惟自张贵人得宠，日伴天颜，竟把孝武帝迷住深宫，连日不亲政务。所有军国大事，尽委琅琊王道子办理。道子系孝武帝同母弟，俱为李昆仑所生。见六十三回。孝武即位，曾尊李氏为淑妃，嗣又进为皇太妃，仪服得与太后相同。道子既受封琅琊王，进位骠骑将军，权势日隆，太保谢安在位时，已因道子恃宠弄权，与他不和。见六十九回。安婿王国宝，系故左卫将军王坦之子，素性奸谀，为安所嫉，不肯荐引。国宝阴怀怨望，会国宝从妹，入选为道子妃，遂与道子相昵，常毁妇翁，道子亦入宫行谗。孝武帝素来重安，安又避居外镇，故幸得考终。但自安殁后，道子即首握大权，录尚书事，都督中外诸军，领扬州刺史。道子嗜酒渔色，日夕酣歌，有时入宫侍宴，亦与孝武为长夜饮，纵乐寻欢。又崇尚浮屠，僧尼日集门庭，一班贪官污吏，往往托僧尼为先容，无求不应。也是结欢喜缘。甚至年轻乳母，貌俊家僮，俱得道子宠幸，表里为奸。道子又擢王国宝为侍中，事辄与商，国宝亦得肆行无忌，妄作威福，政刑浊乱，贿赂公行。

尚书令陆讷，望宫阙叹道：“这座好家居，难道被纤儿撞坏不成？”会稽处士戴逵，志操高洁，屡征不起。郡县逼迫不已，他见朝政日非，越加谢绝，逃往吴郡。吴国内史王珣，在武邱山筑有别馆，逵潜踪往就，与珣游处兼旬，托珣向朝廷善辞，免得再召。珣与他设法成全，逵乃复返入会稽，隐居剡溪。不略逸士。会稽人许荣，适任右卫领营将军，上疏指陈时弊，略云：

今台府局吏，直卫武官，及仆隶婢儿，取母之姓者，本臧获之徒，无乡邑品第，皆得命议，用为郡守县守，并带职在内，委事于小吏手中。僧尼乳母，竞进亲党，又受货赂，辄临官领众，无卫霍之才，而妄比古人，为患一也。佛者清虚之神，以五诫为教，绝酒不淫，而今之奉者，秽慢阿尼，酒色是耽，其违二矣。夫致人于死，未必手刃害之，若政教不均，暴滥无罪，必夭天命，其违三矣。盗者未必躬窃人财，讥察不严，罪由牧守，今禁令不明，劫盗公行，其违四矣。在上化下，必信为本，昔年下书，敕使尽规，而众议毕集，无所采用，其违五矣。僧尼成群，依傍法服，五诫粗法，尚不能遵，况精妙乎？而流惑之徒，竞加敬事，又侵逼百姓，取财为害，亦未合布施之道也。

疏入不报。会孝武帝册立储贰，命子德宗为皇太子。德宗愚蠢异常，口吃不能言语，甚至寒暑饥饱，均不能辨，饮食卧起，随在需人，所以名为储嗣，未尝出临东宫。似此蠢儿，怎堪立为储君！许荣又疏言太子既立，应就东宫毓德，不宜留养后宫，孝武帝亦置诸不理。