致天气干旱。’我可不敢作福作威，享受美食。希望陛下您能发扬乾坤的大德，赶走那些骄奢淫逸的臣子，堵住那些造谣生事的人的嘴，听从皇天的告诫，不要让威福长久地落在下面这些人手里，这样就能阴阳调和，天地自然就会风调雨顺了！”
杨震的话虽然说得很恳切，可安帝已经被那些小人蒙蔽了双眼，不管他怎么说，安帝就是不理睬。而且那些受宠的奸臣们，越来越看杨震不顺眼，经常在安帝旁边说他的坏话。慢慢地，安帝也对杨震有了不满。
不过，杨震是关西的名儒，在老百姓心中威望很高，如果一下子就把他撤职，肯定会引起轩然大波，影响到朝廷的稳定。所以这些小人虽然心里恨他，也不敢轻易地对他下毒手，毕竟还是有点怕老百姓的议论。
这时候，河间有个叫赵腾的男子，跑到京城来上书，指出当前政治的得失。安帝看了，顿时火冒三丈，心想：“你一个小小的老百姓，也敢来多嘴多舌，真是不知天高地厚！”马上就下令让有关部门把赵腾抓起来关进监狱。那些太监最恨别人说朝廷的坏话，私下里嘱托有关部门，给赵腾安了个“讪上不道”的罪名，要判他死刑。
杨震身为太尉，怎么能眼睁睁地看着赵腾被冤枉而死呢？于是又上书劝谏，说：“陛下啊，我听说尧舜那个时代，在朝廷上设立谏鼓谤木，就是为了让老百姓能说出自己的想法。殷周时期的贤明君主，听到老百姓的怨言和责骂，都会反省自己，更加注重德行。这样做是为了让自己耳聪目明，广开言路，听取老百姓的意见。现在赵腾所犯的罪，不过是言辞激烈地批评了一下朝政，和拿刀杀人的罪行相比，还是有区别的。希望陛下您能开恩，饶了赵腾一命，这样也能鼓励更多的老百姓说出自己的心里话，这对国家来说可是大好事啊！”
安帝看了杨震的奏疏，还是不听，最后竟然真的把赵腾给杀了，尸体扔在集市上示众。这时候，杨震的处境就更加危险了，有人就说：“杨震啊杨震，你怎么还不赶紧离开这个是非之地呢？”
这一年是延光三年，安帝想出外游玩，就借着去祭祀岱宗的名义，离开京城向东去巡游。文武百官大多都跟着一起去了，只有太尉杨震和中常侍樊丰等人留在了京城。樊丰他们趁着皇帝不在，更加大胆地盗用国库的钱财，用来修建自己的宅子。
原来他们是因为这个原因才没有跟着皇帝一起去啊！偏偏太尉掾高舒，找来了大匠令史等人，仔仔细细地核查，查出了樊丰他们以前伪造诏书的证据，然后把这些证据交给了杨震。杨震因为安帝出去巡游了，觉得这时候揭发不太合适，就打算等安帝回来以后再上奏。可他为什么不派人快马加鞭地把这件事报告给皇帝呢？
樊丰他们听说这件事以后，吓得惊慌失措，每天都和自己的党羽偷偷地商量，想着要先下手为强，保住自己的性命。也许是杨震命中注定要倒霉，这时候正好出现了星变逆行的天象，这些阉党就抓住这个机会，想出了一个邪恶的阴谋。
等安帝回来，快要到京城的时候，樊丰他们急忙先去迎接，还编了个谎话，说回宫必须要等到吉时，让安帝先到太学里休息一下，等吉时到了再进宫。安帝还以为他们是真心为自己好，就答应了。
等安帝进了太学，樊丰他们就找机会偷偷地向安帝上奏，说：“太尉杨震袒护赵腾，以前因为陛下没有答应他的请求，心里就怀恨在心，现在还意图谋反。您看，天上出现了星变，这就是危险的征兆啊！所以请陛下先把杨震抓起来，这样才能安全地回宫。”
安帝听了，一开始还不太相信，犹豫了好一会儿，才对樊丰说：“杨震是个名士，难道他也会做出这样违法的事情吗？”樊丰连忙回答说：“杨震以前是邓氏的旧部下，现在邓氏已经倒台了，他心里肯定有想法，怪不得会有异心呢！”这谗言可真是厉害啊，杨震是被邓骘举荐当官的，以前的事就被樊丰拿出来做文章了。
安帝听了樊丰的话，惊讶地愣了一下，然后点了点头。当天晚上，就派中使去收缴杨震的太尉印绶，免去了他的官职。杨震没想到会发生这样的事情，被这些奸臣占了先机，这时候后悔也来不及了。他只好把印绶交出去，坦然地回到家里，关上门，不再和外界交往。
可是安帝回宫以后，又提拔耿宝为大将军。这耿宝和杨震本来就有旧仇，再加上樊丰等人在旁边煽风点火，就上奏说杨震被免了职还不服气，心里仍然怀着怨恨。于是安帝又下诏书，让杨震回到自己的家乡去。
杨震接到诏书，马上就出发了。走到夕阳亭的时候，他感慨地对儿子和
