7月19日中午,一场雷雨过后,天气晴朗,太平门附近那条废除地道突然被打通了,所埋的炸药霎时爆炸,城墙被炸塌二十余丈,湘军各路由缺口拥入,太平军用成箧火药从高处掷下缺口,湘军先锋总兵朱洪章部当场就被炸死四百人。后来朱洪章回忆,他所部三千人,就有一千五百人在缺口处被杀死。后继湘军邀功,第二路刘连捷、第三路武明良相继跟进。
东方主帅吴如孝率军前来阻挡,已为时过晚,再也难挡住。吴如孝后脱险,逃回顾王府上吊自杀。李秀成见太平门已破,与视王黄亨乾率众赴至天王府,洪天贵福与天王两个小子光王洪天光、明王洪天明聚在他马首。李秀成表示只能带洪天贵福一人突围。天王两个小子下落不明,据说后来逃到江西,又据在江西被俘的瑞王李誉生说,两人在天京没有能逃脱,都死了。天王府又正月宫赖娘娘和天王所有的大小月亮们,一个都没有带出来。洪天贵福的同父异母姐姐,二十六岁的老姑娘洪天姣也没有逃出。她的未婚夫金王钟万信,却独自逃出天京,来到广德追随洪天贵福。金王后来跟着康王汪海洋。1866年2月,南方太平军覆灭时,在广东丰顺白水寨被俘杀。
李秀成当时最大的信念是要摆脱天京危城,护送洪天贵福脱险,至湖州重开基业。他的雄才大略,早就在湖州同时做好了“让城别走”的伏笔。在天京陷落前,就为陷落后出路作出了妥善的安排。湖州既是迎接江西就食军回归的中转点,也是在天京失陷后,各部聚集、转向的中枢站。当时洪仁玕和杨辅清、黄文金、刘官芳等天国上层人物都在那儿。
李秀成见洪天贵福坐骑不佳,就将自己所骑白马与之交换,一起逃到天王府南的忠王府。在忠王府,他见了老母和家人一面,表示为了护幼天王出走,已无力救护家人。他的兄弟、扬王李明成当即表示:兄护幼主,我护老母。李明成后来成功护送老母和李秀成幼子李其祥逃至广德,也追随了汪海洋。1865年在赣南山区的一次战役不利,他携带老母投降了江西巡抚刘坤一。刘坤一释放了他回乡,但他却没有回乡。1867年他游**到上海,在租界被捕,当即表示:现在江淮一带活动的捻首,不少是好朋友,愿意前赴招降立功赎罪。但这回地方当局却没有放过他,把他处死了。李其祥仅是四岁幼儿,1864年10月,洪天贵福等在江西石城军覆时被搜获,关押在南昌监狱,候成年处决,以后下落不明。李秀成有否长子(忠嗣君,为避讳称“忠嗣钧”),语焉不详。但野史之作者因追慕李秀成,多曾编造李秀成的所谓儿子们。二十世纪三十年代初顾明道《荒江女侠》还编出一个李秀成儿子李天豪落草为寇行侠仗义的故事。