遠古時候，五臺山叫五峰山，五座山峰高聳入云，山巒起伏，縱橫連綿，境內溝無泉水，山不生草。盛夏酷暑，干旱無雨，寸草不生;嚴冬凜寒，白雪皚皚，滴水成冰，氣候惡劣，一片荒涼。百姓苦不堪言更無法在此建立修行道場。
五爺廟在五臺山名氣最大，香火最旺。每逢初一、十五朝拜的善男信女便絡繹不絕，久之形成了祈雨、唱戲、趕集等一系列活動。據說五爺廟許愿很靈，因而這里是五臺山香火最旺的地方。
坐北向南這座建筑便是大名鼎鼎的五龍王殿，人們通稱五爺廟。五爺廟創建于清代，民國年間重修時，增建了殿外前庭。
相傳順治皇帝是在五臺山出家當了和尚，故而有不少這方面的傳說故事。傳說有一年，康熙皇帝到五臺山尋父，傍晚走到臺麓寺行宮附近，忽有一股狂風襲來，頓時飛沙走石，天昏地暗，一隊人馬立即迷失了方向。
康熙看時，但覺眼前風沙迷濛一片，山林呼嘯，大雨欲來，只好緊閉雙眼，被眾侍衛團團圍在中間保護起來。這時，康熙恍然看見一個黑臉和尚大聲說：“我主莫慌，佛臣前來接駕。”康熙一時大喜，問：“汝是何方使者?”黑臉和尚說：“臣是萬佛閣的五龍王”。
康熙便說：“若能使朕安抵行宮，定封汝為公侯。”黑臉和尚說：“遵命，請隨我來。”話音未落，只見頭頂密云之中“叭”的一聲，落下出一個火球來，在黑暗中像一盞明燈，只管徐徐向前引路。康熙一行人馬，便一路上循著神燈行進，果然不一會兒就安然抵達行宮。
事后，康熙尋求接駕之人，第二天，便到萬佛閣參拜，看到了這位黑臉黑髯的五龍王像，果然和接駕的和尚一模一樣，便賜“五爺”王冠一頂，蟒袍一套。因五爺護駕有功，康熙回宮時，又將自己御用的鑾駕分了半副放于廟中賜給五爺，另外還賜了匾額一塊。后來人們還給“五爺”臉上貼了金。所以我們如今在五爺廟看到的，正是頭戴王冠，身穿蟒袍，面涂重金的五龍王。
五爺對康熙護駕有功，所以后人常供奉五爺，以保事業順利、身體健康、萬事亨通。
因為順治出家是清廷機密，所以這個故事當然不會記載于正史中，但在民間特別是五臺山一帶流傳極廣，那里都是信佛教的不說謊話，而且這半副鑾駕的確是清代古物。
