Di bawah ratu adalah permaisuri. Jumlah dan pangkat selir ini berbeda menurut dinasti yang berkuasa.
Selama Dinasti Qing, misalnya, harem kekaisaran akan memiliki satu Selir Mulia, dua Selir Mulia, dan empat Selir.
Di bawah permaisuri adalah selir resmi (consort), dan jumlah ini bervariasi menurut masing-masing kaisar.
Menurut Ritus Zhou, seorang kaisar dapat memiliki hingga 9 selir tingkat tinggi, 27 selir tingkat menengah dan 81 selir tingkat rendah.
Namun, selama Dinasti Han (206 SM – 220 M), tidak ada batasan yang ditetapkan untuk jumlah selir resmi (consort) yang bisa dimiliki Kaisar.
Selama pemerintahan Kaisar Huan dan Kaisar Ling, ada lebih dari 20.000 wanita yang tinggal di Kota Terlarang.
Selama Dinasti Ming (1368-1644 M), ada sistem resmi untuk memilih selir untuk bergabung dengan harem kaisar.
Proses seleksi akan berlangsung di dalam Kota Terlarang setiap tiga tahun.
Kandidat berusia antara 14 hingga 16 tahun dan dipilih berdasarkan latar belakang, kebajikan, perilaku, karakter, penampilan, dan kondisi tubuh mereka.
Untuk memastikan bahwa setiap anak yang lahir dalam harem adalah anak kaisar, laki-laki tidak diizinkan untuk melayani wanita dari harem kaisar.
Satu-satunya yang bisa melayani para harem adalah para kasim, pria yang telah dikebiri, sehingga membuat mereka impoten.
Sepanjang sejarah Kekaisaran China, kasim telah melayani keluarga kekaisaran, termasuk sebagai pelayan di harem.