働き方を変えたいのです

こんにちは。ご質問いただき、ありがとうございます。
フリーランスになるにあたって、経理上の作業をどうするか、が不安ということですね。

1つのご提案としては「すべて税理士に任せてしまう」ことが挙げられます。
つまり、仕事に応じて生じた領収書などお金周りの書類をすべて税理士に渡し、帳簿への記帳や確定申告の業務までをお願いしてしまうことです。
質問者様がやることは、郵送やメール（PDF)で書類を毎月送ることだけなので、だいぶ事務処理の負担が減らせるでしょう。
このような記帳代行業務を行っている税理士事務所は全国にたくさんあるので、自宅のもよりなど、相談しやすい場所で開業している税理士がいないかを調べてみるのをおすすめします。

また、別の方法としては「記帳代行サービス運営会社を利用する」も挙げられます。
これもやっていることは基本的に税理士事務所の記帳代行業務と同じですが、確定申告の書類を作るなど、税理士しか扱えない業務に関しては「オプションとして追加料金がかかる」「提携している税理士を紹介される」など、特別な対応になってししまうケースが多いです。

いずれにしても「不得意なことは自分でやらないで、あえて人に任せる」のも、起業する上で非常に大事です。ご自身にとって使い勝手がいいサービスを利用するのが一番なので、税理士事務所にせよ、記帳代行サービスにせよ、いくつか比較検討してみるのをおすすめします。

お役に立てれば幸いです。