Meski memiliki segudang prestasi yang tinggi, sama dengan kaisar China lainnya, kaisar Xuanzong, juga memiliki banyak selir semasa hidupnya.
Secara tradisional, pada masa Xuanzong, kaisar akan melepaskan selir mereka ketika pemerintahan mereka berakhir.
Pemerintahannya berlangsung selama 43 tahun, dan haremnya terus bertambah besar. Pada akhirnya, dia memiliki lebih dari 40.000 wanita.
Xuanzong hampir pasti tidak punya waktu untuk bertemu mereka semua, jadi sebagai gantinya, mereka hanya duduk-duduk belajar puisi, matematika, dan klasik dan merawat pohon murbei.
Itu tidak berarti dia berhenti menambah haremnya.
Ketika dia berusia 60 tahun, Xuanzong membuat putranya sendiri menceraikan istrinya sehingga dia dapat menjadikan menantu perempuannya sebagai salah satu selirnya.
Wanita yang direbut Xuanzong dari putranya tersebut bernama Yang Guifei.
Pada tahun 741 M, Xuanzong jatuh cinta dengan seorang wanita bernama Yang Guifei yang menikah dengan salah satu putranya.
Yang meninggalkan suaminya dan pindah ke istana kekaisaran bersama Xuanzong.
Dia mengabaikan tugasnya sebagai kaisar untuk urusan cinta ini dan menyetujui apa pun yang diminta Lady Yang.
Dia mulai dengan permintaan kecil yang dikabulkan, dan ini berkembang menjadi tuntutan yang lebih besar sampai dia mendapatkan dia untuk mempromosikan anggota keluarganya ke posisi penting meskipun orang-orang ini tidak dapat melakukan pekerjaan.
Semua reformasi dan kemajuan penting yang dibuat Xuanzong mulai terurai karena anggota keluarga Yang menyalahgunakan posisi mereka dan mengabaikan tugas mereka.
Pada saat yang sama, kebijakan menggunakan warga negara asing di ketentaraan (yang telah berkembang dari reformasi militer Xuanzong) menyebabkan promosi beberapa orang ini ke posisi komando yang sangat tinggi.
Li-Linfu memanfaatkan situasi ini untuk menempatkan orang-orang yang setia kepadanya sebagai komandan tentara, pada saat yang sama dia menerima suap dari keluarga Yang untuk mengangkat mereka ke posisi birokrasi yang nyaman.
Kemakmuran negara sebelumnya mulai menurun karena orang-orang yang berwenang menghabiskan lebih banyak waktu untuk bersenang-senang daripada mengurus tanggung jawab mereka.