在《知否知否應是綠肥紅瘦》小說中齊衡先是娶了嘉成縣主，後來又娶了首輔申大人的孫女、慶寧長公主的嫡孫女。
齊衡在《知否》中算是一個比較悲催的角色了，雖然生了一副好皮相，家世顯赫，但是因爲母親十分霸道，造成他性格不夠剛硬果斷，所以他的一生也有些悲劇的色彩。
齊衡在盛傢俬塾讀書的時候，喜歡上了盛家的六女兒盛明蘭，只是明蘭是庶女，自知和齊國公府的小公爺身份地位都不搭，所以這段感情還未開始她就將這個念頭在心底掐滅，不過在電視劇中，盛明蘭對於齊衡的感情是有迴應的。
後來，兩人終究是因爲身份地位未能在一起，齊衡被迫娶了嘉成縣主，只是嘉成縣主因害死榮飛燕，被榮家的人給報復，沒過多久也死了。
嘉成縣主死後，齊衡先後娶了首輔申大人的孫女、慶寧長公主的嫡孫女填房，只是兩位妻子壽命也不是很長，最終都死了，只給齊衡留下了兩個兒子，齊衡也未再娶。
