Schwertfeger wechselte 1997 vom Mettmanner SC in die nordrhein-westfälische Landeshauptstadt zur F-Jugend der Fortuna. Seither durchlief er sämtliche Jugendteams der Flingeraner und absolvierte 28 Einsätze in der 2. Bundesliga. In der abgelaufenen Spielzeit kam Schwertfeger in der Ersten Mannschaft jedoch nicht mehr zum Einsatz. Das Vertragsverhältnis, das noch bis Saisonende 2013 datiert war, wurde in beiderseitigem Einvernehmen aufgelöst.
Vorstand Sport Wolf Werner: „Kai Schwertfeger hat sich bei uns toll entwickelt und hat sich während seiner gesamten Zeit bei Fortuna sehr professionell verhalten. Dabei hat er stets die richtige Einstellung gezeigt - auch in den Phasen, in denen er nicht zum Einsatz kam. Wir wünschen ihm für die Zukunft sowohl sportlich als auch privat alles Gute und viel Erfolg.“