Bonjour,
je comprends que le brise-vue sera sur votre terrain mais que son installation nécessite de passer dans votre propriété.
vous pouvez refuser et votre voisin peut sans doute poser sa clôture du bon côté.
vous pouvez refuser et votre voisin pourra demander à un juge l'autorisation de passer chez vous malgré votre refus en application du tour d'échelle.
voir ce lien :
https://www.service-public.fr/particuliers/vosdroits/F67
vous pouvez accepter au titre de bon voisinage.
salutations