太平天國東王府曾三易其地，時間最長、規模最大的府址在漢西門黃泥崗一帶，至東王楊秀清被殺害，東王府也被毀成一堆瓦礫。1856年9月，東王被謀害，東王府被焚燬。當時一個目睹東王被害、東王府被燒燬的英國人格列門治無限感慨地說：“東王府全部被毀而成爲瓦礫場，似乎是有意不許有些少數逆跡及逆種之存留，以致所有其親戚、朋友、部下等皆被殺絕，而其房屋品物皆被毀滅。”東王府僅存在三年多，各項建築早已蕩然無存。時隔近一百三十年的今天，東王府遺址還留有原名虎賁倉、黃鸝巷、羅廊巷、侯家橋、華藏庵等地名。
