Imposition d'une personne seule (case E décl. Rev)

Le fisc me retire la demi-part inhérante à la case E de la déclaration de revenus, en cause que je ne vis pas seule, sur le prétexte que je vis dans le même domicile qu' un ami et sa mère (donc 3 personnes pour le même foyer fiscal). Je ne suis ni mariée ni paxée. Rien, dans la déclaration de revenus ne permet de différencier mon cas, d'une personne seule. Comment puis-je me défendre ?