Зміна цільового направлення землі

Доброго дня. Купили землю,хочемо побудуватися і тут виникло багато проблем. Через свою недоосвідченість не побачили,що цільове призначення: для індивідуального садівництва. Змінити цільове направлення землепорядник сказав не можливо. чи варто будуватися?Які можуть бути нюанси,штрафи і тд. Проект на  160 м2. Сказали,що можна будувати садівний будинок,але чи потім можна буде приписатися,приватизувати,провести всі комунікації,чи можуть бути штрафи? Чого остерігатися?Чи можна садівний будинок перевести в житловий стан? Бо районний та міський архітектори,землепорядники сказали,що все можна зробити,але потім як вияснилося ніхто не змінить цільове направлення. Щиро дякую за допомогу!!!