Sudah berkorban dan berjuang keras untuk menjalani pernikahan dengan Ratu Elizabeth II, faktanya Philip tetap sering mendapat tudingan tak sedap. Publik berulang kali dihebohkan dengan munculnya berita yang menyebutkan jika Pangeran Philip tak sepenuhnya setia pada Ratu Elizabeth II. Sesuai rumor yang beredar, Philip pernah menjalin hubungan dengan wanita lain selama bertahun-tahun. Seorang penulis bernama Gyles Brandreth sempat menemukan berita yang menyebutkan jika Philip sering menemui seorang wanita secara diam-diam di apartemen West End. Kabarnya pula, mereka bertemu di sebuah komunitas fotografi. Soal kebenarannya, hingga saat ini masih belum ada yang tahu karena Kerajaan Inggris selalu berusaha menyembunyikan fakta yang terjadi.