作为著名的仙居八景之一，麻姑岩历来是真人隐士持心清修之地。据《临海郡》一书载：“吴大帝赤乌元年（238），孙权下诏在蔡经故宅建隐真观，供奉王方平、麻姑和蔡经。”据此，这里的道观当有1700多年历史。同时，这里又是文人墨客探胜吟咏之所。唐代著名游仙诗人曹唐作诗《王远宴麻姑蔡经宅》，云：“好风吹树杏花香，花下真人道姓王。大篆龙蛇随笔札，小天星斗满衣裳。闲抛南极归期晚，笑说东溟饮兴长。安得麻姑同一醉，使人赊酒向余杭。”

        “山不在高，有仙则名”，麻姑岩得此名，当然与麻姑大有渊源，同时，颇具渊源的还有成语“东海扬尘”。王远，字方平，东汉时人，传说中的仙人。据传，王远成仙后，云游到东海之滨的浙江仙居括苍山麓时，遇见了蔡经，便对他说：“你可知道你身有仙骨？”说完，便赐给他一颗金丹。蔡经见王远道骨仙风，不疑有他，接过金丹服下，不久便成仙而去。四年后，蔡经回到老家，跟家人说：“仙人王远要来做客。”不多日，王远果然来到蔡经家，并派人邀请仙女麻姑前来相聚。过了半晌，麻姑从天而降。蔡经全家只见麻姑似一位十八九岁的美丽姑娘，头顶做了个发髻，长发及腰，五光十色的衣服上绣着漂亮的花纹，在人世间从未所见，一时之间，都很惊叹。麻姑向众人见礼后，王远吩咐开宴。只见宴会上用的器具都是金和玉所制，珍贵精巧；里面盛的大多是奇珍异果，芳香扑鼻。席间，麻姑对王远说：“自接待以来，已见东海三为桑田。向到蓬莱，又水浅于往日，会时略半耳，岂将复为陵陆乎？”王远叹了一口气，说：“圣人皆言，海中行复扬尘也。”此后，便有了成语“东海扬尘”。原谓东海变成陆地，扬起尘土，现多比喻世事发生极大的变迁。

        明代凌濛初编著的拟话本小说《初刻拍案惊奇》卷廿二，引用了“东海扬尘”这一成语，“东海扬尘犹有日，白衣苍狗刹那间。”