聲遠樓原名神醫樓,又名申冤樓。傳說,樓的主人,是壹位世家名醫,姓高名誌遠。其人樂善好施,行醫只求救死扶傷,濟世活人,不為名利。幼聰慧喜讀書,通藥理,耐勞苦,常隨祖父輩四方采藥,足跡遍於沂蒙泰岱,大河南北。漸長,益篤於學,尤精於醫理,遂行醫四方,不辭長途跋涉之苦,不言風霜雨雪之困,視病人如父母兄弟對疾病如仇人大敵。由於醫術高明,每每藥到病除,時人齊稱神醫。
某壹年,魯西南大地疫病流行,村村莊莊哀嘆不絕,家家戶戶悲悲戚戚。人得了此病,上吐下瀉,高燒不退,昏昏迷迷,奄奄壹息。年輕少壯的尚且延緩生命,年老體弱者往往不日死去。這期間,高醫生急得心焦火燎,忙裏忙外,茶飯不思,困眼難合。心想:與其坐等病人登門問醫,不如前去上門送醫。於是便組織全家四十余人成立十個小隊,分路到各村莊巡回治病。藥用了壹擔又壹擔,人瘦了壹圈又壹圈,走遍了大河上下,跑遍了泰岱汶泗。不幾日,數萬病人就壹壹治愈,枯木逢春,千家萬戶歡天喜地。可唯有知州老爺的夫人,死擺“誥命”的臭架子,硬是不去高醫生家治病,小命兒立刻被病魔奪去。昏憒的知州老爺,不但不自責,卻怨恨高醫生眼裏沒有他知州老爺，竟氣急敗壞地發恨要將高醫生置於死地。
但四方百姓因免除了壹場大難,對高醫生百倍感激,於是送錢送物,登門致謝。可高醫生都壹壹婉拒謝絕。百姓們總覺過意不去,想出壹個妙法,就湊錢湊料,給高家蓋了壹座小樓,說是房屋稍微寬敞,便於病人前來就醫。高醫生再也無法拒絕,小樓不幾日蓋起。樓總得有個名字吧!因高醫生醫術高明,便給樓起了個芳名—神醫樓。
忽壹日,京城裏來了壹位巡按大人,此人性情貪酷,奸詐無比,此次出巡,名曰考績,實為抽筋扒皮,走壹程貪贓枉法，到壹地刮盡地皮,不但沿途百姓恨之入骨,就連大小隨員也恨他不起。誰知到了濟寧州衙不過半月,就在壹個漆黑的夜裏，小腦袋竟被“歹人”割去。這下子可闖了大禍,州府上上下下，惶惶不可終日,痛哭流涕,如喪考妣。可那知州老爺,老奸巨滑,富有心機,壹邊興師動眾,發簽捉拿兇手歸案(當然拿不著),壹邊又用重金收買欽差隨員,封鎖消息。隨後又題上壹本,上奏朝廷,說是:“欽差大人到衙不久,偶有小癢,遍求名醫治療,可恨奸醫高某,暗下虎狼之藥,致死非命。”皇上閱本,龍顏大怒,即批:“立斬、抄家、滅族。”知州老爺接旨後,喜形於色,立派五百甲兵,前奔高家,將其家數十余人,盡皆處死，並將神醫樓推倒,夷為平地,隨之悻悻揚長而去,似乎報了往日心頭之仇,解了郁積有年之恨。
誰知過了十天之後,推倒的小樓,竟然又高高聳起,昂頭天外,壹身堂堂正氣。知州老爺聞之,氣急敗壞,即派人將小樓推倒。就這樣,白天推倒,半夜又站起,壹連數十日竟是如此。知州老爺不免狐疑,大概是天怒難犯,預示什麽不祥之兆,不敢再輕舉妄動，觸犯神靈,只好龜縮州衙垂頭喪氣。不數日,欽差案發，知州壹家,滿門抄斬,血流壹地。百姓聞之,無不拍手稱快。此後,這神醫樓,白天迎朝霞,送夕輝,默默無言,沈思不語。夜晚望星月,吐雲霧,恨恨不絕,憤憤不已。那聲音,嗚嗚咽咽,悲悲哀哀,怨怨恨恨,憤憤怒怒,高壹聲,低壹聲,翻山越嶺,穿林跨河,傳向方圓數百裏。人們聽了,長夜難眠,淚下如雨,思之再三，驚嘆不止。於是這神醫樓又有了新的名字——申冤樓。
再後來,鄉民們每每看到自己壹家老老少少歡歡樂樂幸福地生活在壹起,就不免想到高醫生壹家的不幸,感嘆,唏噓。每到清明節,就相約到申冤樓前燒香焚紙、上供、祭掃,哭天哭地,淚下如雨。高醫生若在天有靈,看到此景此情,定會將壹眶淚水抹去。百姓們在祭掃之後,又低頭沈思:樓名申冤,似顯悲憤有余,寄托哀思不足,不如用“聲遠”名之為好,壹來可高揚高醫生之德:“聲洪動天地,遠揚泣鬼神”,二來睹樓思人,永誌不忘,昭示來者。於是聲遠樓的名聲就傳開了。