林灵素的最终被贬，除了有他自身的原因以外，个人感觉主要还是他得罪了蔡京。据说假道士提诗这件事就是蔡京一手导演的，而回头来看看王仔昔道长，同样是得罪了太监冯浩而死的，所以世外高人在官场上是玩不过政治家的。
至于蔡京和林灵素之间的龃龉，并没有考证到可靠的原因，大胆推测主要原因有二，一是争宠，二是林灵素曾和徽宗说过苏轼也是天上的奎木狼下凡辅佐他的，而苏轼和蔡京又是老对头，因此蔡京看着林灵素当然就不顺眼了。实际上徽宗刚登基苏轼就过世了，林灵素如此捧苏轼的原因，据苏轼家隔壁大妈说，林灵素小时候曾当过苏轼的书童，他自己也想不到这样会得罪老权臣。
林灵素最终还是黯然离开了繁华的首都，徽宗却依旧还是那个徽宗，照样不务正业。没过两个月，徽宗又想起了林灵素在身边时的好处，很是思念他，于是“欲再召入”，可是传却来了林灵素的死讯，“帝闻之惊叹呜咽”，甚至赐了林灵素一个长达九十五字的尊号，也算空前绝后了。
林灵素生前就在城南山上给自己选好了风水吉穴，告诉弟子在那挖五丈深，看到龟蛇就行了。不过下葬那天弟子怎么也挖不到龟，蛇也没见一条，于是接着挖，反正不知道挖了多深，就是没见到龟蛇，只好放下棺材了事。据说到了靖康初年，皇帝曾派人去找林灵素的墓，打算扒开来看看，不过周边乱石纵横，就像诸葛亮当年摆下的八卦阵一样，强行闯进去十有八九就出不来了，慢慢地也就不了了之了。
林灵素临终前还留下一颂，道友们赏鉴一下：
四十五岁劳生，
浮名满世峥嵘。
只记神霄旧路，
中秋月上三更。
无论后世人对他如何评价，林灵素对道教发展做出的贡献是不可否认的，所以站在道教的立场上把他尊为一代宗师，列入神班也属正常，比如全真教就把他视为“法教”的先行者，也正是他的努力下，“法教方兴”。
下面再讲一讲和林灵素有着密切关系的神霄派。
神霄派的形成大体上可以确定是在北宋末年，该派尊神霄玉清真王和青华帝君为宗师，道法则包括雷法、符箓以及内修功法等，而公认的创派祖师则是比林灵素小十几岁的江西道士王文卿。
这个王文卿前面提到过，也是徽宗宠幸的道士之一，之所以学术界认为他是神霄派的创始人，主要原因是明代张宇初张天师在《教门十规》中是如此说的，当然很多文献中也基本上是这种说法。但是，通过上面的讲解，道友们应该了解到了，林灵素和神霄派关系非常紧密，似乎他才是创派之人吧，不急，且听我慢慢分析。
首先要明确谁才是最早提出并建立神霄理论或这个概念的，又是谁建立了一个教派的必要的教义、斋仪、经书等等的，通过上面的讲叙，这个人无疑是林灵素。
根据南宋史学家杨仲良的《长编记事本末》、赵与时的《宾退录》、洪迈的《夷坚志》以及一些其他的相关的文献，诸如《林灵素传》《九朝编年备要》《皇宋十朝纲要》《宋史全文》《两浙名贤录》等等吧，还有很多，大体上都可以得出一个事实，就是林灵素早在政和三年（1113年）以前就曾经在一个化名为张升的道士那里学到了“五雷法”，这个在前面刚提到过了。
在京城期间，林灵素也曾“传役使五雷之术”祈雨，这在《宾退录》中有记载。宣和元年（1119年），京城大旱，于是林大法师就布坛求雨，折腾了半天演砸了，太阳还是面带嘲讽地挂在那不动。于是，林灵素就派自己的劳斯莱斯去请王文卿来救场，说我虽然法力高深，不过现官不如现管，而下雨这事是归王文卿管的，让他来求雨才行。王文卿来了以后，一通法事做后，果然大雨连下了三天。