杜充面露难色，很久火线说道：“欲起兵至江南督军，快快让行！”
但这只是杜充的缓兵之计，见明目张胆出城已是不能，便于半夜起三千亲卫，暗中来到城门处，夺门而出。次日凌晨，当众官自睡梦中醒来，前去杜充府上扣问对策时，这才发明府中早已是空无一人。
堂上刘团练，贪恐怕死，欲媚谄兀术，便以幅纸书“死活”二字威胁杨邦乂道：“不必多言，若要死进便书‘死’字便可！”杨邦乂面无惧色，提笔疾书“死”字于上，兀术见之动容，命人不得侵犯。
杜充胸中肝火中烧，故意命亲卫将围堵城门之人杀死，却又惊骇激起民变，无法之下只得退回府中。又命令安抚城中百姓，这才使百姓之心稍安。
但此时杜充见金人势大，高宗天子一起南逃，宋军胆气尽失，一遇金军便望风而降，想来金国灭宋只在指日之间。因而便生贰心，现在听了向子忞的发起。杜充便推委道：“圣上南幸，然江南之地未失，某将冬眠于此，以待良机，复兴雄师御敌。”
可当杜充带领亲卫来到建康城门处时，正遇城中百姓举家流亡，人群中有识得杜充之人，便高呼道：“相公欲往那边去？”
次日，兀术等与李悦、陈邦光大宴堂上，立杨邦乂于庭，杨邦乂指李悦、陈邦光骂道：“天子令尔等守城，敌至不能抵当，反与仇敌饮宴作乐，有何脸孔存于人间？”
杜充收到唐佐手札，又听兀术之承诺，便趁夜出城，往金军投降。
杜充一起逃到真州，入城以后，恐百姓知其行迹，便藏身于长芦寺中，蜗居不出。
当马家渡败北的信息传至建康时，杜充终究不再龟缩，而是筹办弃城而逃，一如当年汴京故事。
高宗天子踌躇不定，但问吕颐浩道：“事迫矣，如何？”
随后数年，杜充屡受升迁，直至行台右丞相，并于《绍兴和议》成时客死他乡。
而兀术既得建康，又闻杜充逃至真州，便起劝降之心。当时有杜充旧友，京畿提刑凌唐佐降于金军，兀术便命其写劝降手札于杜充。同时命使者对杜充说道：“若降，当封以中原，如张邦昌故事”。
御史中丞赵鼎、右谏议大夫富直柔同对，请先罢去杜充右相之职，待得其降金动静确切后再议别罪。数日以后，动静确切，高宗天子下制削去杜充爵位，徙其子嵩、岩、崐、婿韩汝惟于广州。
来到城中，李悦、陈邦光率官属迎拜，唯有通判建康军提领沿江措置使杨邦乂立而不跪，并咬指出血，在官袍衣裾上大书十字“宁作赵氏鬼，不为他邦臣。”
兀术接降书后大喜，笑道：“金陵不烦进犯，大事成矣！”因而引军随陈邦光等人入建康城中。
吕颐浩答道：“金人以马队取胜，今銮舆一行，皇族、百司官吏、兵卫、家小甚众，皆陆行山险之路，粮运不给，必致生变。兼金人既渡浙江，必分遣轻骑追袭。今若车驾乘海舟以避敌，既登海舟以后，敌骑必不能袭我；浙江地热，敌亦不能久留。俟其退去，复还二浙，彼入我出，彼出我入，此正兵家之奇也。”
兀术大怒，拔出随身利刃，当胸一刀刺死杨邦乂，并剖其心以示众降臣。李悦、陈邦光等人见之面如土色，涓滴不敢言。
此言一出，众皆哗然，有胆小者，高呼道：“名为督军，实为流亡，相公意欲前去抵当金人，我等愿随之前去！相公自来此处，枉杀之人无数，现在见金人逼近，却要弃百姓而逃，岂有这般事理？”此言一出，顿时群情激奋，将城门围堵，并齐声高呼，请杜充回城，与建康共存亡。