家を建てたいけど、夫が借金でローンを組めない

夫が結婚後、借金を抱えていることをしりました。結構な額の借金があり、返済できずに困っていて、妊娠をしていた為、返済に限界が来ました。、弁護士に相談に行き、任意整理をしました。そのため、7年間は、ローンを組めないと言われました。現在、職場が都会の方で、実家も遠いため、職場からギリギリ通えそうな所で賃貸マンションに住んでいます。家賃が10万円と、とても高く日々カツカツで生活しています。夫婦共働きで、貯金はゼロで現在も貯金出来ずにいます。そこで家を建てることを話していますが旦那の名義ではローンを組めないため、今後どうして行けばいいのか全く分からないのと、不安がとても大きいです。