十五，心智尚未成熟，即便有过失，也不应归责于其身；况且王男、邴吉之事，皇太子未必知晓，岂能将谋逆之罪强加于他？当速选忠良之臣担任太子保傅，以礼义教导太子，使其明辨是非。废立太子乃国之大事，关乎汉室根基，陛下应当三思而后行！”
奈何汉安帝被怒火与谗言蒙蔽心智，对来历等人的忠言置若罔闻。退朝之后，廷尉张皓仍不死心，再次上书汉安帝，以史为鉴劝谏道：“昔日汉武帝时，贼臣江充捏造谗言，构陷戾太子刘据，致使太子蒙冤而死，汉室朝堂动荡，汉武帝事后醒悟，追悔莫及，却已无法挽回。如今皇太子年仅十岁，尚未接受保傅的系统教导，心智未开，怎可因无端谗言便仓猝废黜？望陛下明察秋毫，切勿重蹈汉武帝的覆辙！”可这份字字恳切的上书，依旧未能打动汉安帝，其废储之心已然决绝。
延光三年（公元124年）九月丁酉日，汉安帝正式下旨，废黜皇太子刘保的储君之位，降封为济阴王，封地位于今山东省菏泽市定陶区，并下令将其迁往德阳殿西钟之下居住，此地偏僻简陋，与昔日东宫的尊荣天差地别，刘保的人生自此跌入谷底。
太子被废，忠良之臣皆心有不甘，太仆来历尤为愤慨，为证太子清白，他联合光禄勋祋讽、宗正刘玮、将作大匠薛皓、侍中闾丘弘、陈光、赵代、施延，以及太中大夫九江人硃伥等十数名朝中大臣，一同前往鸿都门，向汉安帝进谏，联名证明太子刘保并无过错，恳请皇帝收回成命。来历等人的执意进谏，让汉安帝与身边的奸佞之臣深感忧患，唯恐其动摇朝局，便派中常侍奉皇帝诏书前往鸿都门，威胁众臣道：“父子一体，乃天性自然；朕以大义割断私恩，废黜太子，实为天下苍生、汉室基业考虑。来历、祋讽等人不识国家大典，竟与庶民一同聚众闹事，岂是侍奉君主的礼数！朝廷本欲广开言路，对尔等从宽处理，若执迷不悟，执意妄为，必将依法惩处，施以刑罚！”
中常侍的一番威胁，让前来进谏的大臣们无不惊慌失色，人心动摇。将作大匠薛皓率先畏惧退缩，跪地磕头，领旨谢罪，放弃进谏。见此情景，来历怒不可遏，当众严厉责备薛皓贪生怕死、背信弃义，辜负太子与汉室。在薛皓的退缩与皇帝的威压之下，前来进谏的大臣们纷纷心生动摇，相继离去，唯有来历坚守本心，独自守在宫阙之外，日夜不肯离去，执意要为太子鸣冤。
来历的执着，彻底触怒了汉安帝，尚书令陈忠见风使舵，联合朝中各位尚书共同上书，弹劾来历目无君上、聚众闹事。汉安帝借机发难，下旨剥夺来
…。。