Terrain ZN

Bonjour , j'aurais aimer savoir , je veux acheter un terrain en ZN , je regarde le PLU je me conforme à celui ci . Je fait tout les dossier de Permis de construire pour terrain en ZN avec délais de 3 mois. ( je précise la mairie me donne le PLU et le PC correspondant au terrain ZN . Je viens déposer le tout et la stop. ! On me dit la loi alur passer en 2014 indique que seul les agriculteur peuvent acheter et que de toute manière ou n'a plus le droit de modifier ou autre la grange qui est sur le terrain. Est-ce vrai qq peut m'aider et me monter ce dit cela si c le cas ? Merci par avance