Komşum evimin duvarını izinsiz yıktı, ne yapabilirim?

Benim küçük bahçem var, yanımızdaki komşu geçen ay izinsiz gelip duvarımı yıktı, kendi bahçesiyle birleştirdi. Şimdi hem bahçem küçüldü hem huzurum kalmadı. Gittim konuşmaya, anlamıyor, 'Hakkım' diyor. Kırk yıldır orada oturuyorum, bu kadar rahat davranması beni çok üzüyor ve sinirlendiriyor. Bu durumu nasıl düzeltebilirim? Hakkımı geri alabilir miyim? Mahkemeye gitmek zorunda mıyım?