Ich würde in einem normalen Satz hier auch das Komma weglassen. Da man es aber nach Regel 117 setzen kann (siehe Dudenzitat) und es zudem ein lyrischer Text ist, solltest du es so handhaben, wie es deiner Aussageabsicht entspricht.
4. Man kann bei einem einfachen Infinitiv (nur Verb + „zu") die Kommas auch weglassen, sofern keine Missverständnisse entstehen können <§ 75 E>.
Seine Angst[,] zu versagen[,] war unbegründet.
Wir zweifeln nicht daran[,] zu gewinnen.
Gruß von Kai