但是实际上由于吐蕃军队在战争中观望不进，阴持两端，而且又趁机劫掠武功，所以唐德宗听从了李泌的意见，以吐蕃没有履约为由，拒绝将四镇北庭交给吐蕃。
从已有的线索分析来看，西域唐军并不知道交割西域这件事。唐德宗发布撤军敕书的时间是784年(兴元元年)(据《旧唐书·吐蕃传》)，唐德宗建中年号只有四年(780一783年)，784年改元兴元，785年又改元贞元，直到787年(贞元三年)西域仍在沿用建中年号，说明不知道两次改元的消息，换句话说，沈房等人可能根本就没有到西域。李泌在上疏中还说："安西、北庭，人性骁悍，控制西域五十七国及十姓突厥，又分吐番之势，使不得并力东侵"，并以此作为反对将西域交给吐蕃的另一个理由。
其实就当时的客观情况而言，安西、北庭即便起到了"分吐蕃之势"的作用，这种作用也很有限。
西域之所以能够长期坚持不坠，主要原因并不在于它自身如何强大，而是由于吐蕃势力在此期间正全力经关陇地区进攻关中，没有全力进攻西域。唐德宗最初痛痛快快的就答应了吐蕃的要求，正好为李泌的说法打了一个大大的折扣。
总之，一直到了788年至789年(贞元四、五年)之间，唐朝驻守在安西四镇，北庭、西州的军队还控制着葱岭以东的西域地区。
在西域边军大批内调，四镇、北庭孤军坚守期间，西域发生了两个重大的历史事件，一是回鹘(Uighur)汗国的西进，一是葛逻禄的南下。这两个事件都对西域历史进程产生了重要的影响。
回鹘原来是臣属于东突厥的游牧部落联合体。开元末年，漠北东突厥(后突厥)汗国渐次衰亡，回鹘势力逐步兴盛起来。744年(天宝三年)，回鹘叶护骨力裴罗自立为骨咄禄毗伽可汗，占据了漠北草原，取代东突厥成为漠北草原游牧部落的共主。此后，回鹘汗国的势力迅速向西延伸，到达了东、西突厥的传统分界线金山一带。原来居住在金山附近的葛逻禄部落在回鹘的压力下开始向南迁徙。
突骑施苏禄政权被唐朝消灭之后，唐朝虽然不断地册立突骑施各部首领，但由于突骑施内部四分五裂，内战频仍，一直没有建立起一个统一的政权。到大历年间(766-779年)，南下的葛逻禄部落就已经占据了