Satın aldığım toprakta kaçak yapı var, ben ne yapmalıyım?

Geçen sene büyük bir para verip tarım amaçlı bir arazi aldım. Ama sonra öğrendim ki arazinin bir köşesinde önceki sahibi kaçak bir baraka yapmış. Beni şimdi yasal işlemlerle tehdit ediyorlar, para cezası gelecek diye korkuyorum. Ben ne yapmalıyım bu durumda? O kaçak yapı yüzünden benim arazim zarar mı görecek? Para cezası gelirse ödemek zorunda mıyım?