武昌明清时期家家户户都供奉着吕仙吕洞宾像，武昌黄鹄矶还有一个吕祖殿，是供奉吕祖的。吕祖有睡仙功，有诗云：“高卧终南万虑空，睡仙长卧白云中。梦魂暗入阴阳窍，呼吸潜施造化功。真诀谁知藏混沌，道人先要学痴聋。华山处士留眠法，今与倡明醒众公。”殿里供奉的吕祖是睡姿。1955年修长江大桥，吕祖殿被迫拆毁，这尊吕祖睡仙像也从吕祖殿移到了长春观。在同治《桂阳直隶州志》卷二十七小说篇中，记载着与黄鹄矶吕祖殿睡仙有关的一个故事。

　　清朝雍正年间，湖北某中丞一天登临黄鹄矶黄鹤楼诸殿。诸殿悬挂了许多佳联巧对，其中吕祖殿一幅题吕睡仙的楹联云：“只为醒来，白日场中都是梦；不如睡去，黑甜乡里好偷闲。”落款为“桂阳州赤漂山人题”。中丞大人对其它佳联巧对不屑一顾，独欣赏这幅对联的奇妙，谓其意超脱有如神助，可惜不知道这个“桂阳州赤漂山人”究竟是谁。

　　后来，这位中丞大人偶遇桂阳州人明通进士何泂，因此问何泂道：“你是桂阳人，可知道有个叫赤漂山人的人吗?”何泂回答：“赤漂乃桂阳州北张氏村也。”中丞大人向何泂讲了在吕祖殿看到的佳联，嘱咐何泂寻访“赤漂山人”。

　　何泂回桂阳后，急匆忽地来到桂阳州北深智都赤漂村(今敖泉镇湘山村赤漂自然村，桂阳张氏即发源于此)，问道：“你们村有一个曾经到过武昌的人吗?”村里人说：“还真有一个。”村里人把何泂带到这个人的家里，只见一位老人出来迎接，从其语言容貌上看是一个朴实敦厚的人。何泂问道：“你游武昌，曾经为黄鹤楼旁吕祖殿吕睡仙像题过联吗?中丞大人非常欣赏你的才华，你得到知己了。”老人回答：“曾登临过黄鹤楼，但未曾题联。”说完不愿再见何泂。

　　老人对村里人说：“我若求名，题联时就当直书姓名，现在却不知为何被达官贵人知道了。”何泂叫了许多次，老人始终不答应。何泂感叹道：“真隐士啊!”