但很多人都不这麼看，《宋史》论曰：弥远之罪既著，故当时不乐嵩之继也，因丧起复，群起攻之，然固将才也。显示人们是因否定史弥远而完全否定史嵩之，而这种否定是先验的，不管史嵩之怎麼努力，都不能熔化这些人心中的顽石。在大臣们的反对下，理宗最终放弃了复用史嵩之的打算。
淳祐四年，范钟进拜左丞相，杜范入拜右丞相。当时范钟身为首相，但实受制于杜范。
复出遇阻
杜范发布了一系列措施，临安士民竟欢呼载道，对更新後的人事表示出了绝对的支持。杜范又擢徐元杰为工部侍郎，一切政事都与他商议。徐元杰也知无不言，言无不尽，极有裨益。百姓都喁喁望治，谁料天不假年，老成凋谢，杜范竟暴病而亡，共计他在相位，不过八十日。还没有过一个月，一天徐元杰谒见了左丞相范钟，范钟留他在阁中吃罢午饭，下午归去，徐元杰忽然感觉腹内不舒服，到了黄昏，寒热交作，浑身不适，等到四鼓，竟然指爪爆裂，大叫几声而死。三学诸生听说此事，都说徐元杰是被人谋害而死的，他为抱不平，於是伏阙上书，说“历期以来，小人之倾陷君子，不过使之远谪，触冒烟瘴而死。今蛮烟瘴雨，不在岭南，转在朝廷，臣等实不胜惊骇”!理宗见了此书，下诏将阁中承侍吏役逮交临安府审讯。但此事毫无佐证，那里还有实供。哪里知道，一波未平，一波又起，刘汉弼又因为在阁中会餐，忽然得病身死。
杜范、徐元杰、刘汉弼被称为“淳祐三贤”，杜范身任因为得到乔行简的提拔，此时进升为同知枢密院事，但他不屑与史嵩之共事，就辞职回乡。理宗让去太监追回，并命令临安各城门的官员不得让杜范出城。太学生们也纷纷上书挽留杜范，还直接把矛头指向史嵩之。不过，理宗对史嵩之也的确十分倚重，大凡军国大事都一应交给宰相史嵩之处置。史嵩之久擅国柄，为了平息舆论，他采用欲擒故纵的策略，于是六次请求辞相，理宗果然不批准。但杜范一派的大臣却充分利用这一机会驱遂史嵩之。户部侍郎刘汉弼就秘密上奏理宗说：“现在史嵩之既然多次请求辞职，就让他去为父守丧吧。皇上应当选择贤臣，早日笃定相位。”理宗狠下心来，采纳了汉弼的建议，同意史嵩之请辞。但不过几日，理宗发觉自己真的还离不了史嵩之这个助手。他又回心转意，准备重新起用史嵩之。听到这个消息后，整个朝廷哗然失色。中书舍人、工部侍郎徐元杰认为理宗这种做法是游戏国事、出尔反尔，於是“攻之甚力。”元杰轮对说：“臣前日侍经筵，亲承圣问以大臣史嵩之起复，臣奏陛下出命太轻，人言不可沮抑。陛下自尽陛下之礼，大臣自尽大臣之礼，玉音赐俞，臣又何所容喙。今观学校之书，使人感叹。且大臣读圣贤之书，畏天命，畏人言。家庭之变，哀戚终事，礼制有常。臣窃料其何至於忽送死之大事，轻出以犯清议哉!前日昕庭出命之易，士论所以凛凛者，实以陛下为四海纲常之主，大臣身任道揆，扶翊纲常者也。自闻大臣有起复之命，虽未知其避就若何，凡有父母之心者莫不失声涕零，是果何为而然?人心天理，谁实无之，兴言及此，非可使闻於邻国也。陛下乌得而不悔悟，大臣乌得而不坚忍?臣恳恳纳忠，何敢诋讦，特为陛下爱惜民彝，为大臣爱惜名节而已。”这一轮对，马上在朝野传诵开了，理宗也深知徐元杰忠良，常能从容论天下事。这时太学生们又纷纷上书坚决反对重新起用史嵩之。理宗在万般无奈之下，把史嵩之晾在了一边。不久，理宗夜里降御笔，黜出不才台谏，起复史嵩之的命令也就此落了幕。
十二月理宗任命杜范、范钟并相。史嵩之的决策竟被刘汉弼、徐元杰搅乱，因此对汉弼、元杰有了一股恨心。
于是当杜范、徐元杰、刘汉弼暴死后，太学生蔡德润等一百七十三人，又叩阍上书，为之讼冤。众议愈加沸腾，竟有人说：“故相杜范，也因为人的嫉妒，中毒而亡。”种种议论，在廷诸臣无不人人危惧!甚至到了阁堂会食，无人再敢下箸。究竟是什么人下此毒手?就在这时应璟卿也暴病而亡，史璟卿是史嵩之之弟史时之的儿子，他自小颖悟能文，当时才十八岁，不久前曾写信劝谏史嵩之辞去相位。有了这样一件事，大家都怀疑到了史嵩之的头上。
有的议论还说得有根有据：
有一年，史弥远的儿子史宇之休了他的媳妇洪氏。据说是因为对林氏不够孝顺，林氏是史弥远的嬖妾，因深得宠爱，平日淫纵自如，她为弥远只生一子，即宇之，宇之娶洪氏，而洪氏不能与林氏合污同秽，妨碍了林氏淫纵，林氏就叫宇之休出洪氏。杜范得知就上奏说：“朝廷应当戒谕史氏，弗使丑声有闻。”理宗没有过问。不久林氏死了，理宗给予恩泽，恤典极盛。杜范又上奏说：“皇上因为林氏是卫王(弥远)嬖妾而曲徇其情，为什么只是不想一想洪氏是卫王的媳妇呢?”当时嵩之在相位，因此杜范上奏中就有：“宰臣(嵩之)本来是卫王的同族，连这样的家事都不管，那他还能凭什么来治理天下呢?”杜范也的确管得太宽了，史嵩之听到后，非常气愤，自然把对杜范的恨心都记在心里，何况杜范在理宗心目中地位日高，必谋相位，于是史嵩之就差人去摸透杜范的习惯。史嵩之去相，而取代他的就是杜范，史嵩之再也不能容忍，他得知杜范平素嗜书如命，便用毒药涂在书简上，叫人献给杜范，杜范旦夕翻阅此书，毒气蒸目，就失明死亡。这些都只是一种猜测，但当时史嵩之为公论所不容，这是事实。
于是理宗御笔，史嵩之除职予祠，又令刘克庄行词。刘克庄曾弹劾过他的误国罪行，以为史嵩之从嘉熙四年为相以来，上蒙蔽君主，下抑群臣，奸权误国，实为大恶。所以拒绝为史嵩之草制诰词。他又在疏中说：“嵩之有无父之罪四，无君之罪七，旧相致仕合有诰词，今逆行嵩之之词，未知为褒为贬?”尽管理宗再三规劝，但刘克庄始终不为史嵩之作制。
史嵩之在万般无奈，很不得意的情景下，回到了东钱湖的东吴老家。
史嵩之是怎么死的
