Préavis et travaux?

Nous avons quitté un appartement apres 4ans et demi de location (bail 3-6-9). Nous avons donc donné notre preavis de 3 mois , mais nous avons quitté l appartement pendant le premier mois de préavis. Cependant, le bailleur a refusé un candidat potentiel qui pouvait rentrer dès le deuxième mois de preavis sous prétexte qu il devait faire des travaux de reparation avant que qqun y entre. Bien sur, a cause de cela, le candidat a fait demi tour.. Mais maintenant le bailleur réclame que nous donnions la caution (2mois de loyer) et nous remboursera peut être si il trouve un nouveau locataire! Ma question est: peut il reclamer la caution des maintenant or qu il va faire des travaux pendant le premier mois de preavis? D avance, merci de votre réponse!