淳熙十年，七十二岁的史浩，封魏国公，致仕。他才悠然自得地游览起故乡的明山秀水、名胜古迹来，偶尔也写一些诗歌和短文，以此抒发心怀。一日游东钱湖，即咏之：“行李萧萧一担秋，浪头始得见渔舟。晓烟笼树鸦还集，碧水连天鸥自浮。十字港通霞屿寺，二灵山对月波楼。于今幸遂归湖愿，长忆当年贺监游。”还填了《满庭芳 游湖》：和靖重湖，知章一曲，浙江左右为邻。绣鞯彩舰，只许日寻春。正好厌厌夜饮，都寂静、没个游人。夫何故，欢阑兴阻，只为隔城闉。堪嘉，唯甬水，回环雉堞，中峙三神。更楼台缭岸，花柳迷津。不惜频添画烛，更深看、舞上华裀。拚沈醉，从他咿喔，金距报凌晨。
这小普陀便是当年史浩为相时所凿。史浩从小居住在东钱湖之畔，为人至孝。他的母亲信仰佛教，平时常要到南海普陀去朝山进香，求佛保佑她家世世代代荣华富贵。后来，因为年老，双目失明，去南海进香，要跨洋过海，路途遥远，海上又多惊涛骇浪，舟楫难渡。可是老母整天嚷着要去拜佛。史浩虑及老母行动不便。但又无法阻止。他为此急得寝食不安。一天，为了消除烦闷，到湖上泛舟。只见湖上有个岛屿风景优美，嶙峋的岩石兀立水中，犹如东海上的普陀山。他忽然灵机一动，何不在岛上凿个山洞，内供佛像以供母亲拜佛。于是，他召集地方上名匠雕工，悄悄的在霞屿岛上凿建一个石窟：把岛屿打一个大洞，洞中雕凿石观音、护法神、飞龙等造像，待一切布置停当，便请老母去普陀进香。这天，正好风和日丽。史浩预先安排了一艘大船，他把老母扶进船舱坐定，然后扬起风帆，荡起橹浆，在东钱湖中周游。每当夜晚，船工便按史浩编的话向老人报告："船到招宝山了"，"船过沈家门了"。船在东钱湖上游荡了三天三夜，最后驶到石窟之前，船工高声报告："普陀山到了!"候在那里的和尚见大船靠岸，赶紧念经的念经，敲木鱼的敲木鱼，烧香的烧香，骗得史母确信到了普陀山。于是，史浩便扶着老母进入石窟，烧香拜佛，了其心愿。以后每年拜佛，他都用这个办法。
史浩迁居月湖，是在他中举之后，所以晚年他治第在月湖上，建阁作堂，特地在园内造了一个宸奎阁，珍藏两朝赐书。孝宗就御书“明良庆会”名其阁，“旧学”名其堂。孝宗还将月湖"竹屿"赐给他，并拨银万两在竹洲建了一座"真隐馆"为史浩府第，垒石为山，引泉为池，称"四明洞天"。又书了"四明洞天"四字相赠。史浩在府第时有诗咏。《喜迁莺(四明洞天)》：凭高寓目。爱屹起四窗，云南云北。缥缈烟霞，萧森松竹，多少洞天岩谷。著向十洲三岛，入海何妨登陆。要知处，在皇家新赐，西湖一曲。林麓。真胜概，樊榭鹿亭，百卉生幽馥。绿绮春浓，青蛇星烂，隔断世间尘俗。笑呼羡门俦侣，时引宝觞醽醁。醉和醒，但南山之寿，难忘勤祝。《迎仙客(洞天)》：瑞云绕。四窗好。何须隔水寻蓬岛。日常晓。春不老。玉蕊楼台，果是无尘到。没智巧。没华妙。个中只喜风波少。清尊倒。朱颜笑。回首行人，犹在长安道。《南浦(洞天)》：一箭舜弦风，向晓来、轻寒初报麦秀。蝶股歇花须，韶光老，莺声倦闻呼友。池塘绿暗，数竿粉节天然瘦。对兹美景，爱清歌妙曲，千钟芳酒。谁知别是壶中，缭画阁朱栏，烟谷云岫。三岛十洲东，青霄上，神工幻成岩窦。瑶台阆苑，翠旌羽葆频相就。世凡洗断，教乌兔从今，迟迟飞走。
史浩告老还乡以后，又创四明尊老会，与魏杞、汪大猷他们咏诗品茗，写下大量诗作。
又建月湖诗社，诗社中大都是地方上学者和史浩的亲故。袁燮是史家姻亲，沈焕是史浩同科进士，杨简是史弥远的老师，他们都师承陆九渊，研究心理合一的"心学"，且颇有成就，人称"淳熙四先生"，这些人虽都年少于史浩，却能与史浩一起吟诗娱乐。
史浩是怎么死的
届时还要举行龙舟竞渡之戏，将船身彩绘如龙形，船头列龙头，龙头篷架精雕细刻。旁边张挂彩旗，鼓乐细吹，竞赛时敲锣击鼓，划者呐喊而行，运动如飞。“三岛烟霞，十洲风月，四明古号仙乡。萦纡雉堞，中涵一片湖光。绕岸异卉奇芳。跨虹桥、隐映垂杨。玉楼珠阁，冰帘卷起，无限红妆。龙舟两两飞扬。见飘翻绣旗，歌杂笙簧。清尊满泛，休辞饮到斜阳。直须画蜡荧煌。况夜深、不阻城隍。且拚沈醉，归途便教，彻晓何妨。”赛龙舟这既是与民同乐，也为追念史氏先祖。相传史浩曾祖史简，跟庆历五先生之一王致学习，以儒雅、端正著称，他对母亲极为孝顺，后任郡吏，一天，月湖举行盛会，史简邀母亲和亲友一起游湖，恰遇郡守要找史简，史简没有及时赶到，被郡守严厉地训责了一顿，回家后因此抑郁而亡，年近三十三岁。对此史家人一直不愿忘记。
史简去世后，他妻叶氏年仅二十五岁，已有弱子幼女，不久弱子也殇，叶氏父母认为年轻守寡不是办法，就动员女儿改嫁，叶氏因腹中有遗孤，请求父母谅解，但父母还是坚持让她改嫁，叶氏严正地说：“要我用异姓粮食度日，宁可成为史姓的饿鬼。”叶氏父母见女儿如此坚决，也就不再劝了。因此，叶氏成了史家最受尊敬的人。
淳熙十四年四月四日，史浩为功德疏文，中说：“道骨既销于黄壤，仙游托在于青霄，伏觊光明，下昭窟宅，潜德九原而可作，遗芳万祀以长存。”下水岙长乐里山有史简叶氏墓，为史诏所筑，在叶氏墓一侧史浩建无量寿庵，前殿供佛，后殿奉祀赠冀国公史简，冀国夫人叶氏，赠越国公八行先生史诏，越国夫人徐氏四位神像。当年史浩在相位时，孝宗诏赐家庙，祀及五世，罢政东归，慨念始祖暨高祖俱无坟墓，乃卜地于东湖下水之原，筑五穴，具衣冠葬之，并植楹其上，自著招魂文，勒之石。
绍熙五年，八十九岁的史浩似乎完成了他生命中的所有使命，在府中寿终正寝。孝宗为此二宫震悼，天子缀朝，封会稽郡王。
