転職活動について、今の会社に残るべきかどうか

転職活動について
大手企業に勤務して4年目、平社員の26歳男です。
名古屋出身ですが、東京勤務です。30歳を目前にして田舎で暮らしたい欲が出てきました。今の会社は営業部門だと全国転勤があるのですが、管理部門に異動になったため恐らく定年まで東京の本社勤務です。(今の会社は管理部門の人間が営業に行くことは基本的にないので)

いっそ田舎の県庁か市役所で公務員にでもなろうと思いましたが、収入面で不安があります。
今は平社員ですが年収600万強、それとは別に住宅補助で月7万もらっているので実質的な年収は680万ぐらいです。勝手なイメージですけど市役所や県庁に転職したら絶対年収下がりますよね….？

正直今の会社ではやりたいことも出来てるしホワイト企業なので不満は勤務地以外にないです。

この条件で転職するべきでしょうか？それとも今の会社に残るのが賢明でしょうか？
出来れば現職で公務員の方にアドバイスをいただきたいです。