Rozbiórka przy przekroczeniu granicy

Jestem właścicielem nieruchomości rolnej w Bieszczadach, która przez kilka lat nie była zagospodarowywana. Podczas niedawnej wizyty zauważyłem, iż sąsiad wybudował dom wypoczynkowy, przy czym ten budynek zajął mój grunt o pow. ok. 10 m. Czy po 2 latach od wybudowania mogę zażądać rozbiórki tej budowli?