Bonjour,
non, " Uriane " !
Tout d'abord, je suppose que " suis " est la conjugaison du verbe " être " et non du verbe " suivre " ? Si oui, il faut dire :
« je suis le seul qui SUIS parti ».
Parce que, dans les propositions relatives - je cite : « le verbe s'accorde avec l'être ou la chose que le pronom relatif représente ».
Référence(s) :
" Accord sujet et verbe en grammaire / conjugaison " sur " www.mister-conjugaison.com/reviser/accord-sujet.html "