皇帝追封楊家父子，并與朝臣商量對策。張由回京，侮蔑楊六郎貪功急進，造成戰敗，皇帝相信，收回對楊家父子的封號。楊家上下憤怒之下與張由在皇帝面前對質，張由措詞狡辯，皇帝相信了張由的話，決意收回封號，并要退朝。桂英情急之下想拉住皇帝，卻不慎害皇帝摔倒，犯下大罪，楊家上下被收押天牢。眾人為楊家求情，皇帝免了楊家死罪，但卻將楊家逐出天波府。桂英建議眾人到穆柯寨暫住。