市街化調整区域 山林に自宅はたつ？

[ggg]

横浜市のとある所に山林を持っています。
もともと農家ということもあり祖父の代には
薪をとるためにその山を購入したようです。
市街化調整区域に編入されてから40年くらいたち

使い道のない山に毎年税金をとられている
（といっても優遇されているそうなので微々たるものらしいですが…）
ので、なんとか住宅を建てすめたら
有効活用できるのではないかと思いました。

利用目的は自宅建設になります。
予定地目の前まで住宅開発がきており
公道にも面した土地になります。

市街化調整区域に自宅が建つのかどうか
アドバイスよろしくお願い致します。