秦始皇有23個兒子，10個女兒，由此可以判斷他的女人應該有很多，他沒有皇后，所以說他應該沒有正妻。其中有少量記載的就是鄭妃——公子扶蘇的母親，胡姬——秦二世胡亥的母親。
他四十九歲死時，最小的兒子胡亥也有二十歲了。其中扶蘇應該是他最疼愛的兒子，歷史上對於他們的母親都沒有太多記載，充其量就是身份的記錄。
由此看來，在高生育率、低成活率的時代，能夠有如此之多的成年子女，必然要有數量驚人的後宮佳麗。畢竟在那時候的醫療條件不是太好，能活下來這麼多實屬不易。
傳說中秦始皇最愛的女子是阿房，阿房宮就是爲其而修。這個女子原名夏玉房，小名叫阿房，據說是趙國神醫夏無啓的女兒，但沒有太多的歷史根據。
秦始皇的母親趙姬行爲失謹，穢亂後宮，可以說是他沒有立皇后的一大原因。秦始皇在心中早就播下了種子，因爲母親的行爲而形成心理障礙，對他打擊深重，奈何千古一帝身邊卻沒有一個知心的人說說話，這是一個遺憾，也讓後人對其議論紛紛。
