住民税について

私は今25歳で製造業の会社の正社員として年収350万円で働いています。夫婦とペット2匹でアパート暮らしをしています。税金の中でも住民税について聞きたいことがあります。それは住民税は年間での収入によって払う人と払わない人に分かれていると思うのですがこれはどのような理由なのでしょうか。私はむかしパートやアルバイトで働いている時月収もそこまで無いので言わずもがな年収も少なかったです。その結果住民税を支払っていなかったのですが今は正社員として働いているので安定した給料で住民税が引かれるようになったのですがこれはどのような決まりで払う人と払わない人が居るのでしょうか。日本に暮らしていて働いているなら支払うべきとは思うのですがこうやって私は支払っていないで過ごしていた時代がありますので支払わなくてもいいものは支払いたくないという考え方になってしまうのですがなぜ支払わない人も居て大丈夫なのでしょうか。またこの住民税の収入について副業の金額はプラスして考えるのでしょうか?