近年来王老志、王仔者既衰，皇帝访方士于左道录徐知常，以“灵素对”。林灵素既得召见，皇帝问：“有何术”答曰：“臣上知天宫，中识人间，下知地府。”
又进言：“天有九霄，而神霄为最高，其治曰府。神霄玉清王者，上帝之长子，主南方，号长生大帝君，陛下是也，既下降于世，其弟号青华帝君者，主东方，摄领之。己乃府仙卿褚慧，亦下降佐帝君之治。”并称权臣如蔡京、王黼、童贯等皆为仙官。时贵妃刘氏有宠，则奉为九华玉真安妃。皇帝信其言，又视其貌如旧识，为之改名“灵素”，赐号“通真达灵先生”，授以金牌，任其非时入内，并筑通真宫以居之。
六月，汴京再遇水患，皇帝遣灵素厌胜，方率其徒步虚城上，役夫争举梃将击之，走而重。皇帝知道林灵素为世人所怨，有了厌恶之心不乐。
蔡京上奏其妄，请皇帝治林灵素罪。
对此，林灵素也不是任人宰割的羔羊，就来个反奏童贯、蔡京等奸臣，是“飞天大鬼母”、“北都六洞魔王第二洞大鬼头”转世祸国，劝请皇帝斩决。他说：“愿陛下知丙午之乱，奉大道，去华饰，任忠良，灭奸党，修德行，诛童、蔡，此祸可免，他时玉府再会天颜，不然则大祸将临。”其后，林灵素又多次假神真降言，警告皇帝：“幸速避地，勿尚奢华，当出圣断，毋听奸邪所败。”
如此看来，他似乎也是能尽忠言直谏的良臣。但他依其特殊地位，干预政治，那就途谮了。
他上疏说：“愿陛下知丙午之乱，奉大道，去华饰，任忠良，灭奸党，修德行，诛童、蔡，此祸可免，他时玉府再会天颜，不然则大祸将临。”其后，林灵素又多次假神真降言，警告皇帝：“幸速避地，勿尚奢华，当出圣断，毋听奸邪所败”，就是建议皇帝迁都避祸。
迁都这种大事，自然是遭到忠臣的反对，这下皇太子不喜欢他，奸臣不喜欢他，忠臣也不喜欢他，特别是他建议迁都之后，全台上言林灵素妄议迁都，妖惑圣听，改除释教，毁谤大臣。
先是蔡京被贬，紧接着是林灵素被斥还老家，又在温州被地方官举报“居处过制”，再置楚州，没几天就死了，“神仙国师”终年四十四岁。
冯过没纠结林灵素是否是“妖道”，其人褒贬不一，在民间有死忠亦有怨恨其者，身上充满神秘色彩，存有大争议。
譬如，在林灵素的怂恿下，皇帝在全国各地广修道观宫殿，道士不但有封地千亩，而且俸禄堪比官员，造就了一批又一批蛮横的地主道士，他们不但压迫百姓，还强占寺庙，把僧人都赶出去。
由于大量田地都被兼并属于道观，各地百姓可谓是叫苦不迭，给百姓的生活带来了极大的灾难。道士高延昭便倚林灵素，凌灭郡邑，恃势犯法，无复以州县为意，唯有宗泽敢于穷治。
林灵素便诬告宗泽蔑视道教，导致宗泽被贬。
至于其与蔡京的明争暗斗，纯属狗咬狗，谁都非善茬，目的只是争宠。
市井间，关于林灵素的传说有很多，冯过便去勾栏听了一回说书段子，乃是林灵素与佛门高僧斗法的故事，那叫一个天雷阵阵大开眼界呢。
林灵素开始表演，喷一口水，化成五色云，中间有仙鹤百数，一飞绕殿前，又有金龙出现在云间飞舞。
那群高僧说道：只不过是幻术罢了，乃纸龙鹤耳，看我们使用神通，让令龙鹤坠地，化为纸也。
那十四个和尚正要施法，却发现只有两个高僧能开口，其他十二位都被施法不能开口，面若死灰。
林灵素微微一笑，然后空中的仙鹤和金龙又多了几百个，蔽日遮云。
皇帝看到这十四个和尚根本对林灵素无可奈何，就问道：你们破不了先生的法术，还有什么神通？
那十二人皆伏地恐惧，那两个能开口的高僧说道：我们能让水凭空沸腾。
皇太子就让人抬了一口水盂，然后两位高僧做法，果然水沸腾了起来。
然而林灵素濡染向水盂中吹了一口气，结果水马上停止沸腾，并且冻成了冰。
和尚的神通显摆不成了，林灵素就要与两个和尚赌命，找来木炭一千斤，找一个火洞，把木炭烧红，然后自己和两个高僧一起进到火洞里，看谁能活下来。
火洞烧好以后，林灵素说：“我先进去”，于是进入到火洞里，结果火不著衣，林灵素一点事都没有，然后催促两位高僧进入，其他和尚知道高僧进入火洞必死无疑，于是赶紧伏地哀鸣，告皇帝曰：乞救臣等性命，情愿戴冠执简，听役施行。皇帝免两位高僧身死，但是让两个高僧“送开封府刺面，决配于前令众”。
林灵素被贬后，八月的一天，突然携带上表拜见知府，乞求他上交给皇帝。然后和州官、亲族、邻里诀别：“尘世不可久恋，况且大祸将至，我当尽快辞世。”
在十五日月圆之夜，林灵素命令弟子张如晦说：”我的法门只传授给你，尚有六印九符并六丁妙用神机，全部授予你，世代只传一人，不可轻泄。另有七宝素珠一串，如果皇帝来取，给他便是。你将来当是朝廷全节大忠臣，今日师徒分别，他时神霄宫再会。“遂羽化。