Durante la Revolución Cultural, el secretario del Partido de la comuna de Baiyun obligó a los llamados cinco tipos de elementos negros (terratenientes, campesinos ricos, contrarrevolucionarios, malos elementos y derechistas) a destruir el templo de Baiyun. Era un día soleado, pero cuando todos estaban trabajando duro, de repente soplaron fuertes vientos, relámpagos y truenos, lluvia y relámpagos solo azotaron el pequeño lugar en la montaña Baiyunguan. Todos se asustaron y se inclinaron rápidamente y dijeron: "Dios, fuimos obligados. Si estás enojado, ¡dáselo a la persona que nos obligó!". "Sin embargo, después de la tormenta, el templo Baiyun quedó completamente destruido.
El templo Baiyun fue restaurado e inaugurado en 1999, y ahora figura como uno de los tres lugares sagrados del taoísmo en el suroeste, y su incienso está aumentando gradualmente.