曾统貔貅百万兵，
时衰蜀道苦长征，
疏狂竟误英雄业，
患难偏增伉俪情，
楚帐悲歌骓不逝，
巫云凄咽雁孤鸣，
匈奴未灭家何在？
望断秋风白帝城！
就在吴佩孚漂泊江湖之际，日本第一遣外舰队总司令荒城二郎少将、海军驻沪特务机关长佐藤秀大佐率将佐十余人自宜昌乘小型舰到白帝城面谒吴佩孚，表示日方愿意借款100万元，并赠予步枪十万支、小炮500门、机关枪2000挺与弹药若干，由小型舰艇运抵白帝城，帮助吴大帅东山再起。吴佩孚面对大好良机却断然拒绝，直言当初坐镇中原，手中枪支不止十万、钱银不止百万，北镇塞外，南扼两湖，天下名士竞相趋从，尚且一败再败，若他愿意借外债，假外人之手纵横天下，又怎么会沦落到今时今日，“中国事应该由中国人自了”，乃命左右送客。
吴佩孚沦落四川，日子过得也不太舒服。杨森和当时的赵恒惕不能相提并论，赵恒惕是有名的忠厚长者，在湖南虽然谈不上手握重兵，但颇得湘人拥护，几次被军阀赶跑，都是得到湘人的支持上台。所以赵恒惕欢迎吴佩孚入湘，一则是吴佩孚给湖南人的印象不差，二则是湘人对赵恒惕的敬重和信赖。但杨森则不同，他在四川本来就不是声势最强的一路军阀，在川人的心目中也谈不上多么值得敬重，所以吴佩孚落户白帝城，川中的军阀和百姓都对吴氏心存芥蒂。