发生了突厥入侵的事情，北疆百姓亲眼目睹了安北士兵的惨状，想到士兵的艰苦，原先对军户税的不满在这样的冲击之下早就消散了。
安北再加上在安北都护府的有意引导之下，百姓们渐渐开始对上官永平所谓的“仁政”产生了怀疑，原来三皇子是来安北夺军权的啊，为了取得军权，利用了军户税利用了百姓，三皇子根本就是为了自己的利益，而不是真的为北疆的百姓着想，到时候北疆一旦动乱，他拍一拍屁股就返回京兆了，留在这里受苦受难随时面临死亡威胁的还是北疆的百姓，这是北疆百姓对三皇子的最新看法。
一时间，北疆百姓对三皇子及其随行的官员是又怀疑又怨恨！
既被安北士兵仇恨，又被北疆百姓怀疑，上官永平真心觉得在安北是待不下去了，加上这个时候，长泰帝让他回京兆述职的诏书也到了，他连行礼物品也没有怎么打包，就带着冼茂信和一众随从匆匆离开了北疆，到了十二月初，他就回到了京兆西侧的秦岭山麓，只要翻过秦岭，就算回到京兆地带了。
在返回京兆的路上，上官永平的脸色一直很阴沉，他去了安北都护府将近一年的时间，却什么收获也没有，这是他感到失望和愤怒的事情；更重要的是，他还在北疆惹了民怨，回京兆之后，他还不知道如何向长泰帝交代，这又是令他惶恐的事情！
安北都护府的五万士兵还是紧紧地攥在谷大祖的手上，安北都护府的十五万百姓对他也怀疑指责，现在北疆又出现军民对峙、突厥入侵这样的事情来，他是灰溜溜逃离北疆的，还不知道怎么回去向长泰帝述职呢，也不知道怎么向长泰帝解释免除军户税的事情，这可怎么办呢？
越近京兆，他就越心焦，本来他是去安北夺军权的，军权没有拿到，还惹下了军户税的祸患，一想到即将面临长泰帝的问责，他的头都大了，懒洋洋地命令众人在秦岭休整，待都精神气足了，才重新出发。
三皇子在烦恼什么，冼茂信是知道，经过将近一年的相处，所有人都认为冼茂信是三皇子的人了，虽然他反对了军户税的事情，可是上官永平也没责怪他，后来事情的发展证明了他的反对是正确的，上官永平认为他极有才能，以士礼对他，一路上也问了他不少意见，虚心求教拉拢的样子，让冼茂信也颇为受用，心想这个三皇子总算没有笨到家。
对于怎样面对长泰帝的问责，冼茂信已经有了对策，说起来，这个对策还是受了安北都护府的启发，本来北疆百姓和安北士兵的冲突一触即发的了，但是突厥一入侵，军户税事件就悄无声息地解决掉了，说白了，这招就是祸水东引，他为上官永平想的计策，也正是这条，必须最直接最有效地免除长泰帝的不满，这才是目的。
当幕僚都在休憩之际，冼茂信给上官永平说了他的计划，还说明一定要狠下心了，必须损失惨重，尤其是他一定要伤得严重，不然也无法取信于长泰帝，还会引起别人的怀疑。上官永平先是否决，觉得太冒险，万一这事把握不好度，那就不是面临问责的事情了，而是攸关性命的事情。他连连摇头，否决了这个计划。