子どもの教育費はいつまでにどのくらいあれは安心？

こんにちは。ご質問ありがとうございます。
教育費としてどれだけ貯めればいいのか、ということですね。

1つの目標としては、お子さんが高校に進学されるまでに

・高校3年間の学費
・大学4年間の学費

を余裕で払える体制にしておくことです。
私立小学校、私立中学に進学するなどの事情がない限りは、小中学生のうちであれば学費がそれほどかからないので、貯めやすいという事情もあります。

そこで、具体的にいくら貯めておけばいいのかを考えてみましょう。
私立高校→私立大学文系学部というパターンで進学した場合を想定します。

文部科学省が発表した「平成30年度子供の学習費調査」によれば、私立高校の1年間の授業料の平均は96万9,911円でした。
約100万円というところでしょう。

参照：結果の概要-平成30年度子供の学習費調査：文部科学省
https://www.mext.go.jp/b_menu/toukei/chousa03/gakushuuhi/kekka/k_detail/mext_00102.html

一方、同じく文部科学省の「私立大学等の平成30年度入学者に係る学生納付金等調査結果」によれば、平成30年度私立大学の学費（授業料、入学料、施設設備費）の平均は以下の通りです。

＜私立文系＞
・授業料：785,581円
・入学料：229,997円
・施設設備費：151,344円
・合計：1,166,922円

出典：私立大学等の平成30年度入学者に係る学生納付金等調査結果について：文部科学省
https://www.mext.go.jp/a_menu/koutou/shinkou/07021403/1412031_00001.htm

授業料が約80万円、入学料・施設設備費が約120万円といったところです。

これらの数字に基づいて、一体中学卒業までにいくらあればいいのか計算してみました。

約100万円　×　3年　＋　約80万円　×　4年　＋　約120万円
＝　約740万円

実際のところ、どれだけ費用がかかるかは、どんな学校を選ぶかにも左右されるので、1つの参考にしていただければ幸いです。
そこで、質問者様およびご主人の今の貯金方法で貯められるかも検討してみましょう。

まず、児童手当は毎月貯めていらっしゃるとのことですが、金額が現状のままと仮定した場合、中学卒業まで支給され留学をすべて貯めると合計で1,975,000円になります。
また、ご主人が毎月3万円貯めていらっしゃるとのことですが、これを中学卒業までつづけた場合、540万円（＝3万円　×　12カ月　×　15年）貯まる計算です。

大学で理系学部に進学するなど、より費用が掛かりそうな進路になった場合どうするかを考える必要はあるかもしれません。
しかし、非常に努力されていらっしゃるな、と思います。

お子さんやご主人との生活を楽しみつつ、将来に備えて無理せずに続けてくださいね。