都会の民間に転職すべきか、地方の公務員でいるべきか。

私達夫婦は30代後半、地方都市の一等地にマンションを借りて有名私立幼稚園に子供を2人通わせて、友達も多く幸せに暮らしていました。主人は国家公務員で手取り37万、年収650万程の収入がありました。
しかし激務でパワハラが酷く他の公務員に転職したいと言われ、転職活動をしたのですがなかなか受からず、唯一受かったところが手取り20万の地方公務員でした。
そこは農村部で山に囲まれており、小さなスーパーが一軒あるだけ、コンビニや本屋、ドラッグストア、イオン、喫茶店、映画館、服屋等何もないところでした。町まで行くのに車で峠道を一時間以上かかります。居住義務があり隣県から通う事はできません。収入が減ったので妻である私も働きたいと考えたのですが求人もないです。
環境は悪くてもこのまま地方公務員で安定して勤務するほうが将来的にいいか、便利な都会に戻り、民間で再就職したほうがいいのか悩んでいます。