在金刚乘中，相传有三位尊者证得了金刚不死之身——因其至高的证量而超越了生死的概念——他们分别为：吉祥狮子（师利星哈）、无垢友（毗玛拉密扎）以及莲花生大士。
无垢友尊者来自克什米尔地区。相传他为进入甚深禅定状态，朝拜了中国五台山的五座文殊台顶。之后他在甚深禅定中证得金刚不死之身，并至今仍居住于这个被称为金刚窟的“无垢友尊者洞”中。不幸的是，我等众生被自己的不净观所迷惑，无法见到尊者的色身显现。
金刚窟在台怀镇花坊村后的楼观谷左崖畔。据说它与北台顶的天井相通，是五台山最神秘的一个地方。元魏时说，文殊初来五台山时，就把三世诸佛供养之具，楞伽鬼王造的天乐一部及金纸银书毗奈耶藏、银纸金书修多罗藏，都藏于此。因此，在金刚窟建二层门楼一座，上层置六角转轮藏，下层为窟门。窟旁上坡百步有文殊堂和普贤堂，楼东还有供养院。窟后建般若寺，遂形成了一进两院的形制。宋时，金刚窟有文秘宅，窟前有文殊井，窟上有三千脊属围绕的等身文殊象。窟旁建太平兴国寺，寺内有文殊阁、万圣阁、金佛阁、五郎祠。文殊阁内供五方殊象、四菩萨。
历史典籍记载：
《祗桓图》云
：三世诸佛，供养之器，俱藏于此。迦叶佛时，椤伽鬼王所造神乐及金纸银书，毗柰耶藏，银縸金书，修堚罗藏，佛灭度后并收入此。昔佛陀波利，入此不出。金刚，本意讲金属中的最刚强者，用以譬喻牢固，锐利，能摧毁一切。金刚窟，意谓洞内藏着三世诸佛的供养之器，乃万圣秘密宅第。所以凡间任何人都进不去。如果硬要进去，就永远不要想出来了。五台山佛教传说，历史上曾有多名得道高僧进得洞内，聆听菩萨教诲，而终获正果。
唐初成书的《古清凉传》已有记载，略云：
金刚窟者，三世诸佛供养之具，多藏于此。按《祇洹图》云：祇洹内，有天乐一部，七宝所成。笺曰：又按《灵迹记》云：此乐是楞伽山罗剎鬼王所造，将献迦叶佛，以为供养。迦叶佛灭后，文殊师利将往清凉山金刚窟中。释迦佛出时，却将至祇洹。一十二年，文殊师利还将入清凉山金刚窟内。又有银箜篌。有银天人坐七宝花上，弹此箜篌。又有迦叶佛时金纸银书《大毘奈耶藏》，银纸金书《修多罗藏》。佛灭后，文殊并将往清凉山金刚窟中。
《华严》云：
华藏世界所有尘，一一尘中间法界。宝光现佛如云集，此是如来刹自在。故知金刚窟者，诚不可以圣凡境界而思议也。若波利入而不出，则是诸圣化身，权彰斯应耳。既出而坐脱，则谢斯凡累，入彼圣流矣。
《清凉山志》载
：“此窟为万圣（一万尊佛）之密宅，神、乐、曲、藏等经书收藏于此”。本来是五台山最神秘之处，有窟无寺。唐仪凤元年（676年）印度高僧波利到此，顶礼膜拜，希望得见文殊真容，得与一文殊化身的老翁对话。波利回国取来文殊所需佛顶尊胜陀罗尼经，以灭众生重恶孽垢。到长安译完此经，挟梵文本入窟不出。到如今，此窟仍不可知其根底，人或进去而不得出，被人用石狮堵死。唐大历年间，温州元著禅师得一老翁指点，始在此建造寺院，分上下两院，有一尊五台山最重的（七千斤）铜药师佛，还有文殊铜像，普贤石像。因怀疑老翁为文殊化身，遂命名寺院为般若寺，意为“智慧”，也即文殊洞。
明人镇澄诗赞说：
石门寂寂锁苍苔，
波利寻真去不回。
大智愿王无向背，
游人何事浪相猜。
为访金刚窟,相将启石扉.
无心能造诣,有相可归依.
阁迥云阴重,岩深暑气微.
三三前后语,千古露真机.
福登诗:
金刚窟子无缝罅,
入者还他师子儿.
铁壁银山直拶透,
三三之语许渠知.
均提相送出精蓝,
无著投机事已惭.
莫谓当年夫不荐,
至今谁解话三三.
枯藜特叩金刚窟,
回首云生白水池.
欲问三三前后事,
一声幽鸟夕阳西.
无著寥寥不复闻,
古岩馀瑞尚氤氲.
游人千载希灵迹,
犹向峰头礼白云.