高建勋道：“兄长，不要再多说了，宋军偷裘大理城，人马一定不会多，我们赶快集合人马，明天就赶回去复夺大理城，一定还来得及。”
高继能也道：“父亲，二叔说得对，我们应该马上回军，明天都晚了，应该今天连夜就回兵。”
他们二人的妻儿老小都在大理城中，高建勋是目前高氏的二号人物，家里也是妻妾成群，儿孙满堂，就连高继能年级轻轻，以经娶了四房夫人，生有一男一女。因此一听说大理城被宋军拿下，两个人都惦记大理城中的家人，因此都急着要回军去复夺大理城。
这时李全成也道：“高候爷，我看高将军和少君候说得没有错，恁还是赶快领军回去复夺大理城吧，这里就交给我们交趾军，来抵抗宋军。”
但高建铭沉默了半响，终于摇摇头，道：“不行，我们不能回军。”
这话一说，在场的人不禁都有些愕然，高继能猛地站了起身，道：“父亲，你这是怎么了，为什么不能回军。”他的第四房夫人才娶回家不足一年时间，娇媚动人，两人正是打得火热的时候，一听宋军占了大理城，他从里就向着了火一样，恨不能马上飞回大理城去赶走宋军，夺回妻儿。因此听高建铭说不能回军，立刻就忽不往了。
高建铭向他摇了摇手，示意他稍安勿燥。道：“你们想过没有，我们这次出兵并没有带多少攻城的器具，而大理城有大理最坚固的城墙，就算我们回军去救大理城，在短期内恐怕也无法攻下大理城。而且这些士兵的家小大都在大理城中，如果宋军在城上押着他们的家小在城上，谁还肯用心去攻城。”
其实高建铭在大理城里也有十几房妻妾,还有三个儿子和六个女儿,他心里又何偿不掂念他们，还有他多年积攒下来的财产。但高建铭毕竟也有几分袅雄之姿，知道在这个时候千万不能感情用事，否则绝对是一败涂地。顿了一顿，又道：“何况宋军也绝不会任由我们去进攻大理城，就算有太子殿下在这里和宋军对持，以杨炎的用兵，一定会用骑军去袭击我们，一但我们在大理城下久攻不下，再遭到宋军的偷袭只怕就有全军覆没的危险。”
“可是……”高继能也不是不懂事的人, 听父亲这么一说心里也明白了，知道现在回兵大理城也只能是死路一条,但心里总是有些舍不得。
这时高建勋道：“继能，你不用多说了，兄长说的没有错，现在绝对不能回军，不是我们不回去救他们，而是回兵也是死路一条，到还不如留下来将来为他们报仇。”然后又对高建铭道：“大哥，成大事者不能拘泥于小节，留得青山在，不怕没柴烧，我们绝不能回军大理城，不过下一步该怎么办？”
高建铭缓缓道：“现在宋军势大，杨炎又善于用兵，我们不易和宋军硬拼，我看先退守景胧保存实力，如果实在不行，还可以退到支趾去暂避一时。宋军远路而来,不可能留在大理不走，一但宋军离开了大理，我们还可以在卷土重来。”
其他人听了也觉得高建铭说的有理, 然后又看向李全成, 显然是等他表态, 因为撤到交趾去不是由高建铭说了算, 还要看交趾是否愿意接纳他们。
李全成道:“这样也好，我们交趾与高候爷一向关系良好，欢迎高候爷到交趾去暂免一时。”
高建铭点点头，道：“笫一，现在大理城被宋军占领的消息绝对不能公布，否则军心就会大乱，笫二，事不迟疑，我们收拾一下，明天就走。”
第二天，高建铭立刻叫来自已手下的两员大将陈览和丁昌文，假意说自己要返回大理城去招集人马，让他们领人马在礼社江与宋军对持，最多只要十天，自己就会领援军回来。这两人当然不知道大理城以经被宋军攻取了，还信以为真，虽然觉得招集援兵的事情似乎不该高候爷亲自去做，但也没有多想，只是尊令行事。
到了当天晚上，高建铭、高建勋、高继能以及交趾的李全成和众将一齐连夜出营，向交趾方向逃去。
