買おうと思っている土地にｺﾝｸﾘの壁…あきらめる？

[匿名]

相談お願いします。
今条件の合う土地の仲介の不動産屋と交渉中の、状態です。
現在その土地には既存の家があり、引き渡しは売り主負担の更地になるのですが、家の３方にコンクリートのブロック塀があるんです。それももちろんなくなるんですよね？と不動産屋に聞いてみた所、不動産屋も知らずにすぐ売り主に確認したら、後ろ隣や横隣との事もあり勝手に取り払えないようで、立ち会ってもらわないといけなくなるから別にあってもいいでしょと不動産屋に言われました。
私としては、庭もやりたいし、自分の土地になるのだから、その塀が誰のものになるのかはっきりさせたいのですが、不動産屋に言ってもお隣も色々物を置いてて見えるようになっちゃうからそのままの方がいいんぢゃない？とか言われ。そんな事は私に関係ないと思うのですが。こういう時は諦めなきゃいけないものなのでしょうか？
教えて下さい。