這時，劉秀想起西征前，光祿勳郭憲攔路斬馬繩的事。看來，人家根本不是作秀，洛陽城的確離不開劉秀。
8月，劉秀從上邽日夜兼程，返回洛陽。返程前，劉秀給岑彭寫了一封信。信裏有很著名的幾句話“人苦不知足。既平隴，復望蜀”就是要岑彭在搞定隗囂後就迅速南下，平定公孫述。
9月1日，劉秀到達洛陽。召來前潁川太守、現執金吾寇恂“潁川這地方還得卿去平定”寇恂道“潁川百姓素來奸狡。這次是聽說陛下遠征隴蜀，所以纔起來造反。若陛下能親自南征，亂事即平。臣願執銳前驅”6日，劉秀南征，潁川盜賊悉降。郡中父老百姓遮道迎接寇恂，並拜請劉秀“再借寇君一年”劉秀答應，讓寇恂暫留長社縣，安撫官吏百姓，受納餘降。
一波未平一波又起。東郡、濟陰郡盜賊亦起，劉秀派李通、王常前往平定。耿純曾做過東郡太守，威信素著，於是劉秀封耿純爲太中大夫，率兵一起前往東郡。東郡百姓無不歡迎耿純入境，盜賊九千餘人不戰而降。消息傳回，劉秀再封耿純爲東郡太守。
24日，劉秀返回洛陽。
9月，已投降的原齊王、現安丘侯張步帶着妻兒逃奔臨淮郡，欲與其弟張弘、張藍招集故衆再起，被琅邪太守陳俊追殺斬首。
搞定隗囂，這是個艱難的技術活。岑彭和吳漢都在冥思苦想地琢磨着。然而不久，老天就賜給他們一個天大的良機。倆人一看，喜出望外。好了！他們知道該怎麼去對付隗囂了。
隗囂之所以跑去西縣，不是西縣城多麼牢固，而是駐守西縣的將領絕對靠譜：老將軍楊廣！馬援曾給這楊老將軍寫信，想策反他投降，結果什麼迴音都沒…可見，無論多爛的西瓜園裏，還是有一兩個中用的西瓜的！
對隗囂來說，楊廣老將軍不僅可靠，且能打敢戰。所以吳漢和岑彭包圍西縣後，都不敢輕舉妄動。【w qu 】但天要亡隗囂，鬼神都擋不住。不久11月，楊廣老將軍病逝，棄隗囂而去了。其大將王捷在離此不遠的戎丘城，登上城頭，向城下的漢軍大喊“爲隗王守城者，皆懷必死之心。願自殺以明志”說完拔劍自刎！
孤零零的隗囂，看着西縣城外密密麻麻的漢軍，一股從未有過的絕望心情從心底生起。人生多荒謬，晃然一瞬間，英雄變狗熊。如沒意外，西縣將是他的葬身之地。
西縣的確是個埋葬隗囂的好地方。吳漢也是這樣想的，岑彭更是這樣想的。兩人都認爲：楊廣死後，隗囂就是個棄兒，讓一切恩怨都在這裏劃上句號吧！於是兩人馬上分工，吳漢攻城、岑彭率人去城外的谷水，把谷水下游堵住，用谷水來淹西城…
這叫以其人之身還其人之道。相信來歙能看到這一幕的話，心裏肯定特別解恨。但來歙可能也不會料到：就像隗囂當初圍打自己一樣，貌似穩當的殲滅戰，竟也出了個大意外！
當初劉秀要親自率軍征伐隗囂有諸多因素。其中一個主要原因，說出來都沒人相信。隗囂狡猾強悍，前線也根本離不開他！如他不上前線，他那幫將軍可能就要亂套喫敗仗了！
自劉秀起兵以來，將軍們的意見，劉秀不聽，從沒喫過虧。可如將軍們不聽他的話，多數是要喫虧的。當初鄧禹建功心切，劉秀勸他別急，不能一口喫成大胖子，結果鄧禹不聽，犯了冒進主義攻打赤眉軍，屢戰屢敗。
劉秀返回洛陽前，曾再三告誡吳漢“你的那支部隊，都是各郡臨時組織的民兵。戰鬥力不強不說，更可怕的是這個龐大的羣體，每天都要在前線啃掉多少珍貴的軍糧。而前線軍糧所存不多，隴山路途遙遠，崎嶇難走，軍糧極不好運。士兵萬一有逃亡的，還打擊軍心士氣。不如打發一部分人回家，留下精銳攻打隗囂。這樣的話，可保證軍隊的質量”
然而劉秀走後，吳漢根本就沒把這話放在心上。在吳漢看來，這話在楊廣還活着、西縣久攻不下的情況下，可能是成立的。但現在肯定不成立了！隗囂孤軍無援，只要自己一鼓作氣，短時間內拿下西縣，就肯定不存在缺糧危機了。
吳漢很自信。可問題恰恰就壞在他太自信上！吳漢並不知道：隗囂儘管很爛，但還不是爛骨頭，能一啃就下。隗囂攻打來歙不成功，卻很成功的學到了來歙的守城精神。一天天過去，吳漢緊攻猛攻急攻，就是拿不下西縣！
危機卻在逼近吳漢。吳漢部隊攻城不下，軍糧開始緊缺，逃兵越來越多，軍心浮動…此時，吳漢只有寄希望於岑彭了。
事實上，岑彭也很着急。冰凍三尺非一日之寒，他要淹沒西縣，一兩天肯定也是不行的。大約估算一下，現在水位距離城頭，也就只有一丈餘了。再等等，隗囂就等着做水鬼了…
當初，隗器圍攻略陽城時，可能也這樣對自己說“再等等，來歙就成略陽城的水鬼了”可事情壞就壞在“再等等”上，劉秀策反了他手下的部將投降，讓他緊張得逃到這裏…歷史是多麼驚
人的相似，就在岑彭說“再等等”的時候，隗囂的援軍來了！
隗囂的部將王元、行巡、周宗等人率五千餘蜀兵前來救援。往吳漢軍營衝來時，敲鑼打鼓的大呼“蜀兵百萬已到”一時間，漢軍上下都驚惶不安。
王元等人乘勢殺入吳漢軍中。漢軍又疲又餓又慌，王元那五千蜀兵猶如狼殺進羊羣，殺氣沖天，硬是撕開一條血路，衝進西縣城。然後又護着隗囂殺出城外，另投天水郡冀縣而去。
大魚明明就要蒸熟了，竟還是被貓叼走了。看着隗囂絕塵而去的背影，吳漢鬱悶得一句話都說不出來。此時他的軍糧已經喫完，不得不撤軍東返。另一支由耿弇和蓋延率領的部隊也跟着撤軍。
然而此時，隗囂卻不幹了。吳漢和岑彭差點就要把自己悶死，這個刻骨銘心的大仇豈能不報？於是隗囂決定反擊，追殺漢軍！
在岑彭的斷後下，吳漢等人終於安全撤回長安，岑彭更是撤回了南郡郡治jl縣津鄉。只有祭遵還留在右扶風的汧縣。安定、北地、天水、隴西等諸多郡縣，又回到了隗囂的手裏。
校尉溫序在這次戰鬥中，被隗囂的部將苟宇生擒。面對苟宇的勸降，溫序怒叱“叛虜怎敢迫脅大漢將軍”持節亂楇，殺死數人。引起苟宇部下的衆憤，爭欲殺之。苟宇道“此乃義士，就給他一把寶劍，讓他自裁吧”溫序接劍在手，又把自己的鬍鬚全部納入口中，道“毋令吾須污土”拔劍自刎。隨溫序一起被俘的從事王忠得苟宇允許，收斂其屍，送歸洛陽。劉秀特賜墓地，並封溫序三子爲郎。