Görevim değiştirilmiş, istemiyorum ne yapabilirim?

Memur olarak 5 yıldır aynı yerde çalışıyorum. Son günlerde görevim farklı bir birime değiştirilmiş ama ben bu değişikliği kabul etmiyorum. Yeni işim bana çok uzak ve ağır geliyor, ailemle de ilgilenemiyorum. Bu değişiklikte zorlanıyorum ve haksızlık olduğunu düşünüyorum. Görev yeri değiştirmeye itiraz edebilir miyim? Bu durumdan nasıl kurtulurum? Ne yapmalıyım?