面对大礼的咄咄逼人，唐老大有点扛不住，首先服软。当时的宰相是杜悰，就是两年前的西川节度使。是杜牧的堂哥，也是李商隐的表哥，还有个身份是唐宪宗的驸马，已经六十多了，老油条一个，得了个外号“秃角犀”，历史评价是才不周用，能力上比他弟弟杜慆差很多。这年七月，杜悰上书劝唐懿宗，希望派使者到大礼也拜祭拜祭世隆老爹，进行安抚工作。然后世隆改个名字，唐朝便给他正式册封，这样大家都有台阶下。唐懿宗也同意了，准备派左司郎中孟穆作为使节前去吊祭。不过唐老大办事的效率实在太低，到了十二月孟穆才准备出发。刚出发，就收到了大礼侵占嶲（xi）州（四川西昌市）、邛崃（四川邛崃县）的消息，于是马上回头，从哪里来还回哪里去。
王宽守不住，那么再换一个试试。这年，唐懿宗派湖南观察使蔡袭接任安南都护！
公元862年正月，大礼再攻安南，这时唐老大有了防备，没有得逞。但不久，大礼又约了他的几个小弟桃花、茫、裸形等部落合兵五万多人攻打安南。
公元863年正月，大礼五万人攻陷了交趾并两次破安南省会，这次唐老大损失毕较惨重。安南都护蔡袭为首的政府领导班子被团灭，仅仅一个会游泳的小秘书