Houten afsluiting 1,80m tegen perceelsgrens. Kan mijn buurman dit weigeren

wij wonen naast een braakliggend stuk grond, dat door de eigenaar is afgemaakt met een draadafsluiting, tegen de perceelgrens. Wij willen nu aan onze kant van de grens een houten schutting plaatsen van 1,80m hoog, omdat wij momenteel geen privacy hebben in onze tuin.

Eigenaar van het braakliggend stuk, die trouwens zelfs niet in onze gemeente woont, maar 30km hiervandaan, geeft echter geen toestemming tot de plaatsing, met als argument "wij willen niet op een dichte afsluiting kijken" (???? Kunnen zij vanuit Diest naar een afsluiting in mol kijken???).

Kunne wij dit aanvechten bij bv. het vredegerecht? Of is hier echt niks aan te doen? ( plaatsen van een haag is geen optie, want dan moeten we geloof ik 50cm van de grens blijven en dan kunnen we met onze wagen niet meer over onze oprit).