Eigenaar perceel

Door verbouwingen is aan het licht gekomen dat ons rood omkaderde perceel (= perceelnummer uit onze akte) groter is dan we dachten.

Op dit perceel staan 2 gebouwen. 1 ons huis (transparant rood), 2 de schuur van een buurman voor +/- 20jaar. 

Ik heb reeds contact gehad met de gemeente en overheid maar zij hebben geen weet of documenten dat dit perceel destijds is opgesplitst.

Mijn vraag is, wie is de eigenaar van deel 2 ?
Wij, omdat dit op onze perceelnummer staat of mijn buurman dat dit al 20jaar in "vruchtgebruik" heeft. (wij hebben dit huis nog maar 5jaar).

Indien mijn buurman door verjaring "eigenaar" is geworden van dit stuk. Kan hij dit zomaar verkopen? Komt dit stuk terug naar ons bij overlijden?