Keep On Dancing dirilis pada 29 November 2024 oleh Rogues Gallery sebagai bagian dari album Quiet Kid Makes Music Pt. 4