李璘的骑兵到来后，见季广琛阵容严整，也一时没敢动手。
季广琛遥遥拱手道：“我原系永王部下，因感念永王的大恩，故而不忍与之决战，只是逃命归唐而已。若公等苦苦相逼，我必决一死战。”命劲弩齐开，准备迎敌。
骑兵将领看季广琛早有防备，贸然进攻是占不到便宜。况且季广琛距离广陵很近，一旦广陵长史李成式派兵接应，自己反而处境堪忧。于是大度的放过季广琛，率军返回。
季广琛等骑兵走光，才率军继续向广陵进发。
等到了广陵，得到了李成式的热情接待，并设宴为季广琛等人接风洗尘。
席间，李成式问起李璘军中情况。
季广琛默然不答。
李成式再问，季广琛依旧沉默。
李成式因此叹道：“季将军真是忠厚之人也。”遂不再问。
话说季广琛的逃走，令李璘心里更加慌乱，军中士气低落。
李成式正是瞅见这一机会，决定出击。先是故意命手下小股士兵每人手拿两个火把，站在长江岸边，以此迷惑李璘。
李璘对此懵然不知，还以为是李成式是在自己面前耀武扬威，所以命军士也手拿火把，站在江边遥遥对峙。
殊不知李成式这是声东击西，早就命大批的士兵乘船于当晚渡江，并且连夜偷袭李璘的军营。
李璘猝不及防，招致大败，在乱军之中，李偒肩上受了重伤。父子二人经过合计，认为东、西、北三面都无路可去，只能向南逃，逃到岭南一带才有活命的机会。于是率领家人子女及残兵败将，一路往岭南逃走。
江西采访使皇甫侁率军追赶李璘，双方在大庾岭一带展开激战。大庾岭又称作梅岭，因开元名相张九龄曾在这里监督开凿新路，命道旁多植梅树，故又名梅岭。是岭南和岭北之间的交通咽喉之地。
双方一场恶战，李璘再次大败，并且这回是输得一败涂地，连自己的命都葬送了。
李璘中箭身亡，李偒也死于乱军之中。
皇甫侁对此始料未及，也自知闯祸，但是说什么都迟了。只得命人将李璘的妻妾和子女，护送到成都府，并自己上表请求死罪。
太上皇自是伤心不已，哀悼数日。
肃宗因担心太上皇会误会是他指使人这么干的，于是免去皇甫侁的死罪，但是永不录用，算是给太上皇一个交代。
季广琛因有附逆的举动，被贬为温州刺史，后来还是官至右散骑常侍，敕封渤海郡公。
有一个人在这时候不仅没有与李璘撇清关系，反而误会是肃宗妄杀兄弟。并作诗一首，哀悼此事。
这首诗的开头是：行至上留田，孤坟何峥嵘。积此万古恨，春草不复生。悲风四边来，肠断白杨声。借问谁家地，埋没蒿里茔。
前段算是哀悼，后面的诗词就来了：昔之弟死兄不葬，他人于此举铭旌。一鸟死，百鸟鸣。一兽走，百兽惊。还有：田氏仓卒骨肉分，青天白日摧紫荆。
能如此作诗的人，只有咱们的太白兄。
李白这个时候如此行事，给自己闯下滔天大祸。肃宗早年认识李白，知道李白的为人和脾气秉性，本来不予追究。
有人将此诗，连同前面的《永王东巡歌》一并交给肃宗过目。肃宗看过这些诗词后，勃然大怒。命人即刻锁拿李白到凤翔，他要亲自问一问李白，自己是不是真的残杀骨肉同胞。
李白被官差押解到彭原郡，一路艰辛自是不用细说。
等李白人被押解到了彭原郡后，肃宗因为郭子仪潼关兵败，而惴惴不安，无暇处理李白。
这时候，李白的妻子宗氏出现了。
她是唐朝中宗年间的宰相宗楚客的孙女。
自李白被抓后，她多方奔走，却徒劳无功。
崔涣与李白是旧相识，有心营救。但是苦于自身刚刚被罢免宰相，此时无力营救李白。于是对宗氏提到杨错，希望宗氏让李白写封信给杨错，希望杨错能看在结义之情，搭救李白。
宗氏早知道杨错，对他很有印象，也知道杨错是个古道热肠的人。顿时大喜，到监狱里告诉李白此事。
李白遂写了一封信，托人送到尚在凤翔军中的杨错。