Résilier son bail cause logement trop petit, et nouveau bail

Je suis dans un F3 avec ma femme et 3 enfants au 18 aout nous trouvons une maison avec 4 chambres, libre au 1er octobre, nous signons le bail, et au moment de poser mon préavis, le gardien me dit : rien à faire préavis de 3 mois. nous allons etre obliger de refuser cette maison parce que nous ne pourrons pas payer double loyer pendant 3 mois !! que faire ??