Pacs, frais réels et redressement

Bonjour,
mon compagnon et moi sommes pacsés depuis avril 2014. Pour des raisons professionnelles, je doit louer un appartement loin de notre résidence commune. Nous avons donc rempli notre déclaration commune en déduisant tous les frais de double résidence possibles. Toutefois un courrier nous a été adressé nous indiquant que, faute de fournir une preuve de concubinage notoire du 1er janvier au 24 avril, nous avions indûment déduit les frais entre janvier et avril. Est-ce normal et si oui quelle preuve de concubinage pouvons-nous apporter (sachant que mon compagnon était déjà propriétaire lorsque nous nous sommes rencontrés et que les factures sont à son nom) ?
D'avance merci