薛怀义如今是右卫大将军兼鄂国公，位极人臣，煊赫一时，连武承嗣和来俊臣见了他都不免随马执缰，心揣敬畏。随着他对女皇的厌倦渐趋明显，他在宫中的行为也日益荒唐，几乎到了疯狂的地步。他对于恶作剧似乎非常迷恋，常常以扇打大臣的耳光取乐。他在白马寺中私蓄童娈，终日与之狎戏无歇。他动辄在宫中举行佛教的无遮大会，悬灯结彩，当众抛撒钱袋，以至于有人在哄抢中竟被践踏而死。 薛怀义这次出征归来，武皇未到城外迎接，使他在震惊之余大为羞怒。第二年的正月十二日，为了庆祝自己得胜还朝，薛怀义在万象神官举行了盛大的佛事庆典，整个仪式隆重壮丽，极尽豪奢。善男信女云集宫外，一时人头攒动，万人空巷。薛怀义原以为女皇陛下会像往常一样前来参加这次盛典，不料，直至曲终夜深，灯阑人散之时，武皇始终没有露面。薛怀义终于失去了理智，他一时兴起，便决定放火焚烧万象神宫。 当武皇在侍女的搀扶下登上肃天门的殿楼，眺望西北方被烧红的天空时，大火显然已经无法扑救。这座耗时数年建造起来的天堂神官在一夜之间即被化为灰烬。 太平公主入宫求见。出乎武皇的预料，太平公主也是为了薛怀义之事而来。她的忧虑和母亲一样，既然薛怀义胆敢纵火焚烧明堂。他发誓严守秘密的诺言就成了一句空话。 母女俩的谈话因碍于很多不便启齿的内容而显得小心翼翼。当然，两个当事人由于心领神会，许多枝节问题自可略去不提。