Apesar da declaração, cantor britânico explicou que sempre terá carinho pela ex-companheira, mãe de sua filha, Khai, de 5 anos