自古以來(lái)僧人中不乏學(xué)者大師。這些人往往出身于知識(shí)分子隊(duì)伍，他們不滿社會(huì)的黑暗，深感仕途的艱險(xiǎn)，遁入空門以尋求精神的寄托。這些人往往兼通儒、佛、道三家經(jīng)義，既能談禪又能論政。他們將深?yuàn)W的佛教哲理同中國(guó)文化相結(jié)合，弘揚(yáng)了佛法，并大大提高了佛教的社會(huì)地位。東晉南朝直至唐宋，廬山佛門中的慧遠(yuǎn)、慧永、智常、居訥等人，正是這些人中的佼佼者。還有更多的士人，自己雖未投身空門，卻同僧人保持著密切的關(guān)系，并把和僧、道交游視為一種超逸風(fēng)雅。在東晉南朝時(shí)，劉遺民、周續(xù)之、雷次宗、宗炳等士人與慧遠(yuǎn)、慧永成莫逆之交。晉元興元年(402),慧遠(yuǎn)邀集劉遺民、周續(xù)之等學(xué)者居士聚會(huì)，研討如何轉(zhuǎn)生西方凈土世界問(wèn)題，并請(qǐng)劉遺民撰《發(fā)愿文》,一百二十三人共誓佛前，轉(zhuǎn)托來(lái)世投生西方極樂(lè)世界。謝靈運(yùn)與慧遠(yuǎn)交厚，慧遠(yuǎn)死后，著《慧遠(yuǎn)法師誄》以示悼念。王羲之也崇尚佛教，將自己的別墅舍給西域僧人達(dá)磨多羅，是為歸宗寺。在唐代，白居易也同佛門聯(lián)系密切，臨別時(shí)，將自己的文集寄存在東林寺，并委托僧友代管在廬山的草堂。在宋代，李常將萬(wàn)卷藏書寄存在廬山白石庵。歐陽(yáng)修與圓通寺主持居訥禪師一見(jiàn)如故、坐而論道成為至交，并贈(zèng)詩(shī)給居訥：
方瞳如水衲披肩，邂逅相逢為灑然。
五百僧中得一士，始知林下有遺賢。
三蘇(蘇洵、蘇軾、蘇轍)同居訥也有交往，相互以詩(shī)詞應(yīng)答。士人投身空門和同僧人保持密切的關(guān)系，既與當(dāng)時(shí)的政治背景有關(guān)，但更多的則應(yīng)視為一種文化現(xiàn)象。它反映佛教這一異質(zhì)文化自西漢末年傳人以來(lái)，已漸同中國(guó)文化相結(jié)合，已漸漸得到中國(guó)“文化人”知識(shí)分子的認(rèn)同。也正因?yàn)檫@種認(rèn)同，更促進(jìn)了佛教在中國(guó)的大發(fā)展，佛教在廬山的繁榮。
除佛教外，道教在廬山也有一定的影響，著名的道觀，要首推南朝時(shí)陸修靜創(chuàng)建的簡(jiǎn)寂觀了。此外還有祥符觀、先天觀、景德觀以及唐朝的白鶴觀、廣福觀、太平會(huì)等。當(dāng)時(shí)的佛教寺院多集中在廬山西北麓，而道觀則集中在東南麓。佛、道兩家的競(jìng)爭(zhēng)是激烈的，但道家往往處于劣勢(shì)。清代文人李漁為簡(jiǎn)寂觀書寫一幅對(duì)聯(lián)，反映了這種狀況：“天下名山僧占多，也該留一二奇峰，棲吾道友。世間好語(yǔ)佛說(shuō)盡，誰(shuí)識(shí)得五千妙諦，出我先師?！?br>自古以來(lái)，名剎依名山，名山因名剎而更有名，二者相得益彰，這在廬山又得到一次很好的佐證。