国事如此，刘志家里也不顺心。那个皇后梁女莹仗着自家势力，根本不把老公放在眼里。她衣食住行的奢华程度，前朝无人能比。追求享受排场倒也罢了，梁女莹还嫉妒心极强。她自己没有生儿子，因此对所有能生儿子的女人都怀有刻骨仇恨。后宫嫔妃谁一旦怀了孕，基本就离死不远了。遇上这么一位惹不起的恐怖分子，刘志只有躲着。可越是这样，梁女莹就越恼火。不过，仇恨大大较少了梁女莹的阳寿，她最终没有熬过刘志，在位十三年后死去。
这种日子长了，谁也不爽，何况刘志还是个皇帝。这时发生了一件事，把他逼急了。
刘志有一个非常宠幸的贵人叫邓猛女。邓猛女与梁家本来也沾亲带故，她的母亲改嫁后嫁给了梁冀老婆孙寿的舅舅。孙寿见邓猛女年轻貌美，就做主把她送给刘志当贵人。所以，理论上邓猛女也是梁家派来的人。梁冀为了进一步控制刘志，想把邓猛女收做女儿，还把她改名梁猛女。但这样一来，邓猛女的母亲就多余了，梁冀决定把她干掉。
邓猛女的母亲见到杀手，慌忙逃进皇宫，向刘志诉苦。刘志被气得浑身颤抖，但当着众多梁家的耳目还不敢发作。他借故跑进厕所，对身边惟一信得过的宦官唐衡问道：“我身边还有谁能信得过？”唐衡掐指一算，只有单超等四个宦官对梁家不满，可以利用。于是刘志把这五个宦官招到密室，商议除掉梁冀。可怜刘志一个堂堂的皇帝，最后都不得不与这几个低等的宦官歃血为盟。好在刘志还没咬破自己的胳膊，他咬的是单超，总算留得一点尊严。
159年8月（此前一个月，刘志的皇后梁女莹刚刚病逝），刘志亲自领导了粉碎“梁家帮”的斗争。由于梁家平日横行霸道、强征暴敛，在中央和地方都缺少群众基础，加上刘志又有正统的身份，皇室的警卫部队也还听号令。因此，梁家对这一突变无法抵抗。粱冀和老婆孙寿当天就自杀了。梁家势力自然遭到清算，被诛杀的高级官员有几十人，被免职的官员有三百多名，中央政府几乎无人办公。
刘志在147年当的皇帝，到159年，才真正回到权力中心。刘志是依靠宦官反攻倒算的，那五位宦官成为他的依靠和知己，于是将他们全部封侯，并授以重权。宦官单超竟然担任了与三公平级的车骑将军。自此，宦官从原来的幕后掌权直接走到了前台。
由于宦官势力越来越大，朝臣已经没有控制力，一些股肱之臣纷纷告病回家养老。