Kljub nesoglasjem sta Cowell in Minogue občasno našla skupni jezik in včasih sta lahko učinkovito sodelovala. Vendar njuno razmerje nikoli ni bilo zares harmonično in na koncu se je končalo, ko je Minogue leta 2010 zapustila šov.
V poznejših intervjujih sta tako Cowell kot Minogue govorila o času, ki sta ga preživela v Faktorju X, in o medsebojnem odnosu. Cowell je izrazil obžalovanje zaradi nekaterih svojih komentarjev proti Minogue, Minogue pa je dejala, da se je nazadnje odločila zapustiti šov, ker je čutila, da z njo ne ravnajo več spoštljivo.
Na splošno se zdi pošteno reči, da Cowell in Minogue nista imela posebej pozitivnega odnosa med svojim časom v The X Factor. Vendar pa je treba tudi omeniti, da sta bila oba uspešna in spoštovana osebnosti v glasbeni industriji in njuna nesoglasja niso preprečila, da bi pomembno vplivala na oddajo.