民间传说，庐山乃“神仙之庐”，早在公元前四世纪，周威烈王时，匡俗兄弟在庐山学道成仙；随后，又传说周武王时，道家方辅与老子李耳，骑着白色驴子入山炼丹，得道成仙；又传说张天师的两个高足弟子王长和赵升被派往庐山，管理道家这个六十九福地……。庐山神秘飘渺的云雾和人迹罕至的密林古洞，为这些神话传说增加了魅力。不过，上述神仙方土，都没有在庐山留下多少遗迹和诗文，讲不出一个系统的故事，唯有“八洞神仙”之一的吕洞宾，在庐山和九江有较多的遗迹和一些诗文。
《宋史陈搏传》记载：“关西逸人吕洞宾有剑术，百余岁而童颜，步履轻疾，顷刻数百里，世以为神仙，皆数来搏斋中，人咸异之。”宋人白玉蟾在《授墨堂记》中说：吕洞宾在游历庐山时遇上了“八仙”中的汉钟离，授给吕洞宾丹诀，后来两人一起成“仙”。据《庐山志》记载：唐咸通年间（860—874），吕洞宾在漫游江湖过庐山，遇五龙真君传授他剑术。吕洞宾既得五龙君剑术和汉钟离丹诀，便在庐山锦绣峰下的仙人洞内精心修炼。至今，仙人洞内的神龛里，仍奉有身佩宝剑，仙风道骨的吕洞宾塑像。
吕洞宾生前曾向人介绍，自己是唐朝宗室，姓李名琼字伯玉。他虽然写得一手好文章，但到五十岁时才登第作官。黄巢造反时，他抛下四个孩子，带着妻子金氏，选择一个山洞修行。由于全家只剩下他两口，所以改姓吕；因为他住在岩下，所以改名岩；最后只剩下他一人，所以自号“纯阳子”。
《九江府志》记载吕洞宾当过浔阳县令。民间相传：庐山有两个妖精善使双剑，剑峰指向浔阳城，城内瘟疫流行。吕洞宾征服了这两个妖怪，将妖怪的宝剑收藏在一个宝匣中。妖孽既除，民可安生。吕洞宾亲手写了一个三尺多高的“寿”字，赠给九江人民，祝愿九江人民多福多寿。
由于吕洞宾为浔阳人民办了些好事，民众就在甘棠湖上的烟水亭内修了吕仙祠。据说，这吕仙祠还很灵验。明朝万历年间，九江关督黄腾春的母亲双目失明，四处求医无效，只好到吕仙祠祈求吕洞宾为母布施仙丹。当天晚上，黄腾春便梦见吕洞宾为他母亲用仙水洗眼。第二天，黄母双目重见光明。黄腾春为了感谢吕洞宾的恩德，重修了吕仙祠，四时前来祭祀。
相传，吕洞宾曾化装成乞丐到瑞昌县民间乞讨。有个病妇施舍了一枚铜元。吕洞宾将铜钱埋入土中，飘然而去。这个奇怪举动引起了乡人的猜疑。因为这个“乞丐”长得身材魁伟，神采英发，不象流落街头面容憔悴的乞丐，倒象画上的八仙之一的吕洞宾。病妇和乡人便去挖铜钱下的泥土治病，果然治愈了不少疑难病症。挖土的人越来越多，挖成了一口井，人称“吕公井”。井水澄清，长年不涸，水波聚结成一个“吕”字，百般扰荡，永不消失。
修水县黄龙山上的黄龙禅院，是宋代江南名刹。这里的开山祖师是宋代的慧南（1002—1069）。传说：吕洞宾经湖南岳阳旅游到黄龙禅院，谒见慧南，并赠诗一首：“铁牛耕地种金钱，刻石儿童把贯穿。一粟粒中藏世界，半升铛内煑山川。白须老子眉垂地，碧眼胡僧手指天。欲向个中还会得，此元元外更元元。”
诗毕，佛道两家对坐论法，吕洞宾问：“你可知，一粒粟中藏世界，半升铛内煑山川，是何禅机？”慧南回答说：“你只能煑铛内的，铛外的却煑不得。”吕洞宾又说：“你奈何我囊中不死药。”慧南回答：“饶经八万劫终是落空亡。”
一僧一道，针锋相对，互不相让，谁也未说服谁，吕洞宾悻悻而去。吕洞宾走后，慧南对徒众说：“他一定会放飞剑来取我头颅。”寺僧正参疑间，一道寒光，自天而降，疾如闪电，直奔慧南。慧南运足内功，断喝一声，飞剑当啷坠地。吕洞宾心悦诚服，又赠慧南诗一首：“弃却飘囊槭碎琴，于今不炼汞中金。一朝悟得黄龙法，始觉平生枉费心。”
《庐山志》收录了吕洞宾咏庐山诗两首：
书归宗寺楼壁
一日清闲自在仙，六神和合报平安。
丹田有宝休寻道，对境无心莫问禅。
书蒋晖之门
宴罢高歌海上山，月瓢盛露浴金丹。
夜深鹤透秋云碧，万里西风一剑寒。
以上均系神话传说。据1990年第一期《山西大学学报》刊载李裕民的《吕洞宾考辨》所论证的史料，吕洞宾是五代时人，而不是唐咸通年间人。吕洞宾是隐士而不是道人，更不是神仙，他携家隐居终南山，后游华山，结交隐士陈搏，会服气辟谷，善长击剑赋诗，宋太祖、宋太宗时，民间盛传他的诗歌，多达一百多篇。他与一般长居深山的隐士不同，爱好旅游，“多游人间”，足迹遍及湖湘、梁魏、三吴、百越，也游览过九江和庐山。他长得丰神英发，飘飘欲仙，又曾为人预测祸福，行踪神秘，也为民间作了一些好事，所以人疑为仙。