杨玉堂三次因病请辞，因更换总督，依然没有走成，于是又到龙安上任了。他审理积案，整治学校，“在任一日，吾尽一日之责，他何知焉”。在龙安任职五个月，请辞获批准。从四川启程回山东，龙安府乡绅、耆老盘桓叹息，叩拜送别的百姓有千人；而绵州百姓更是摩肩接踵，排队相送，有人更是送出数百里。
为官龙安 加强教育培育文明乡风
　　咸丰五年（1855）春，杨玉堂连续三次因病请辞。本来已得到总督乐某的批准，可是没多久，乐总督就调离了，接任他的是黄宗汉。黄宗汉（？—1864），字寿臣，福建晋江（今泉州）人。道光十五年（1835）进士。1852年任浙江巡抚，倡办海运漕米供应北京和接济江南大营军饷，加强浙省防务并分兵至江苏、安徽防堵太平军。1854年任四川总督，曾镇压川、黔人民起义。在1857年英法联军占据广州期间，被调任两广总督兼通商大臣，驻惠州（今广东惠阳）。1860年调吏部右侍郎。祺祥政变后，被劾为肃顺党羽而革职。
　　黄宗汉在沿途调查中得知，杨玉堂在官员及百姓中享有很高的威望，于是特意到绵州相见。听说杨玉堂已请求辞官，他坚决不准许，并要提拔杨玉堂到省里任职。杨玉堂只得恳请两司及本道官员代为婉拒，也未获准许。黄宗汉说：“这样的好官，四川能有几人？听任其离去，谁与我一同治理？如真因身体原因不能胜任繁重的工作，可以先挑简单的职务，等身体好了再做安排。”于是令他暂代龙安知府。杨玉堂在省里20多天，黄宗汉每次见他，都仔细询问四川的情况、官员的优劣，还让他推荐贤良。有几位口碑良好的官员因此受重用。
　　四月底，杨玉堂启程赶赴龙安府，五月正式上任。提到龙安，早在乾隆六年（1741）至乾隆十一年（1746），寿光益城村人（祖籍斟灌）李炎也曾任过知府。据《寿光县志》载：李炎，康熙五十年（1711）举人。为官中书，钦命丈量四川地亩。升刑部主事及正郎，狱多平反。后升任龙安知府，见群山连绵，土壤贫瘠，百姓穷苦，常为此苦恼。他见山中波罗树（一种野生的木本棉花）很多，大喜，叫人买回山蚕种，教百姓养蚕，结果没过几个月，蚕吐丝结茧，百姓深受其惠。
　　杨玉堂上任后，因之前郡守与县令不和，导致积案如山。杨玉堂一一审理，凡有关伦理道德的案件，必反复开导，定使当事人悔悟。有乡绅叔侄因争财产而要打官司，杨玉堂把两人叫到公堂，晓之以理，两人惭愧，互让财产而去。
　　龙安府地处万山之中，向来缺乏读书风气，杨玉堂整治学校，鼓励人才，为书院题写“为君子儒”匾额，并撰写对联“绍孔孟薪传，总无忘反求道理；绎程朱彝训，还当裕济世经纶”。又因为百姓心中缺少道德法治，于是设“宣讲生”，连续进行普法和道德教育。他还亲自裁定法规十六条，对百姓谆谆教诲。他曾为“讲约亭”题写对联曰：“乐民乐，忧民忧，十六条温语叮咛，共登仁寿；亲其亲，长其长，亿万姓细心体贴，永保子孙。”数月之后，百姓安宁，人心向善。
　　此后，杨玉堂的心悸病日益严重，但他仍坚持办公，即使盛夏也不惧酷热。有人以“五日京兆”的典故劝诫他。此典故出自于东汉班固的《汉书·张敞传》，汉宣帝时，京兆尹张敞与光禄勋中郎将杨恽关系密切。后杨恽因犯大逆罪被杀死，凡与杨恽有关系的人都被免职，只有张敞还在任。张敞手下主管讼案的官吏絮舜，认为张敞已被人弹劾，不久就被免职，他就不肯认真办理张敞部署的案件，私自溜回家里消极怠工。有人劝他，絮舜却说：“我为这位大人已卖了不少力气了，现在他是五日京兆，没几天干头了，还能管什么案件啊？”张敞听后，派人逮捕絮舜，昼夜审问，竟问成死罪，将其杀死。后来此典故比喻任职时间短或将要离职。
　　此人以“五日京兆”相劝，意为龙安只是跳板，杨玉堂待不久就会调走，没有必要这么拼。他却说：“在任一日，吾尽一日之责，他何知焉。”
卸任回乡 百姓不舍千人叩拜送别
　　杨玉堂在龙安任职五个月，终因身体虚弱，强烈要求辞职。不久得到黄总督的批示，大意为：“杨玉堂任职四川多年，政声卓著。之前因为年老多病，请求辞职。我因他为政足以为全省表率，所以我上任伊始，看他精神尚好，于是竭力劝留，随即委任龙安知府。他上任以来，考察官员、安定人民，以及处理地方一切事物，可以说尽善尽美，实在无愧于循吏之称。我正打算推荐他，请求朝廷提拔任用，没想到他操劳过度，导致旧病复发。准许吧，则身边少一位得力帮手；不准许吧，又显得我不体恤官员。我内心矛盾，非常犹豫。”黄总督又对平武县县令恒某说：“如此好官，可惜没有职位空出，以提拔任用，实在是太遗憾了！”
　　十一月下旬，杨玉堂终于卸任。咸丰六年（1856）正月十二，他启程回山东。龙安府乡绅、耆老盘桓叹息，叩拜送别的百姓有千人；而绵州百姓更是摩肩接踵，排队相送，有人更是送出数百里。
　　恒泰评价杨玉堂说：“吾兄朴诚厚重，廉让公明，制事无怠心。在官无矜色，诚以待人，俭以持己，仁爱之心，流露于不自觉。详慎之意，检点于不自知，云云。”嘉庆十八年（1813）举人、寿光人刘中训则评价：“吾邑德行文章，缜亭先生为第一。”《寿光县志》载其事迹，入寿光乡贤祠，世代崇祀。近年来，寿光重评五十乡贤，杨玉堂再列其中，并塑像于寿光历史文化中心乡贤祠。