偏偏卢杞也不是个心善的，况且他丑陋不已，越发嫉妒杨炎的眉目俊朗，勾引斗角更厉害上几倍。
这日李适着实为藩镇头疼，遇上梁崇义割据襄汉七州之地，居功自傲自己开山做大王！常常轻蔑于朝廷，不申报地方户口，不纳税上贡，更是坦言如今新君都得礼让他三分！
对此杨炎提出策略，派自己的党羽李舟去劝说梁崇义，结果梁崇义顽固不听，觉得皇帝在责其不臣之心，朝廷在挑衅他的实力，惹得他血盟一弑，决意扩大镇守之地，发起叛乱，起兵攻打江陵。
朝臣议论起来，都归罪于杨炎，求和不成反惹得叛乱，得不偿失，认为是杨炎促成梁崇义反叛。
梁崇义发起反叛，朝中商讨对策，皇帝欲任命淮西节度使李希烈统领各军讨伐梁崇义。
杨炎听闻之后劝谏：“李希烈的仕途主要依靠养父李忠臣，深得养父的信任最后却过河拆桥，驱逐养父并夺取其位置。陛下，李希烈就是只白眼狼啊！没有立功前已是桀骜不驯，假使他平定了梁崇义，朝廷拿什么来控制他？”
在此之前，梁崇义的叛乱已经引发不少对杨炎的非议，加上此时杨炎对方打压李希烈，皇帝对他更加不满，对杨炎的劝谏全然不信，派李希烈抗敌已是不二人选。
此后，李希烈因天气原因而推迟进军，卢杞捉得了茬，心眼如生了疮了莲藕，忙报陛下:“李希烈听说自己被杨炎多次阻挠陛下重用，如今才不肯进军，请求陛下撤去杨炎的宰相实权，以此鼓舞李希烈进军。”
事发有余，杨炎被改任为左仆射，被剥夺了实权。
李希烈也不负朝廷所托，讨伐梁崇义一战捷报频传，梁崇义兵败，与妻投井而死。
朝廷沉浸在喜悦的气氛中，李希烈也还没有做出以功挟朝廷的举动，一切归为平静。皇帝觉得，这越发验证了杨炎先前的劝谏疏漏多余。
一来二去，君恩耗尽。有了间隙，皇帝对于杨炎其他劝谏以及举荐官员的议论都觉不爽。寻到由头最后一锤重击，罢免了杨炎的宰相之职。