1949年，田衡秋带着杨森多年敛集的财富先行逃往台湾，足见杨森对她的信任。不过，田衡秋未过几年，前往香港探亲时，因突发脑溢血引起半身偏瘫达20年之久，杨森渐渐将她冷落一边。田衡秋晚年的生活、治病全靠美国的女儿担负，才得以走完痛苦的后半生。

第五个老婆萧邦琼，则是杨森长驻沪州时，依靠同样的手段将这位部属之女纳人府中，萧父本为杨森在滇军任团长时的秘书，一个典型的戎装书生。一次，赴杨森家宴时，萧父带上女儿随行。敬酒时，杨森眼中大放光彩，如长辈一样摸着萧邦琼的头赞叹道：「几年不见，小姑娘长这么大了，模样周正得很呢。」一位善于摇尾逢迎的下属瞥见这一幕，便鼓动如簧之舌说服萧家将女儿嫁与了杨森。萧邦琼原本就生得艳丽照人，加之自幼入新式学堂念书，又做过教师，颇有文化。比之田衡秋，她表现得更为乖巧、应对接洽，极有分寸，更重要一点，她不似田衡秋世故、虚矫和故意作态，这在杨森看来，就显得格外纯净，当然就十分钟爱。1931年，萧邦琼由沪州上船时，行至江中，因船覆溺水身亡。

陈顺容是其第六妾，一个粗眉大眼的典型的广东女子。原本为三姨太刘谷芳的贴身丫头，15岁，为杨森酒后乱性奸污，后收为妾。由于语言、性格之故，陈顺容畏畏缩缩，不善承欢，是「十二钗」中最不受杨森喜爱的一个。稍有不慎，便会被杨森用马鞭抽得体无完肤，陈顺容饱受刺激，后来得了精神病，被杨森差人用铁链绑着送回广安乡下。解放后病死于重庆。

第七个老婆曾桂枝，贵州毕节人。据说，她是杨森妻中身材最好的一个，本是杨森养女。早年，杨森率部入黔，在毕节收容了一个无家可归的小姑娘，交由属下代为抚养。流光催出玉人来，不曾想见，几年后，当年那个蓬头垢面、孤苦无助的小女孩竟然出落得亭亭玉立，楚楚动人。后来交由刘谷芳当丫环，改名为杨家桂。家桂而不「嘉贵」，杨森每日见了这位健康活泼、丰满秀挺的养女，禁不住淫心荡漾。不久，他撕下伪装，全然不顾人伦道德，在田衡秋等的帮助下，迫不及待地为14岁的曾桂枝「破了瓜」。随后煞有介事地圆了房。曾桂枝天生机敏，求知上进，杨森便为她请了家庭教师，几年后又不惜血本送往上海、北京等地求学。为的是将来能将这位姿态娉婷的小妾带入社交场，做为自己的装饰花瓶。

然而，曾桂枝在上海读书时，情难自禁，大胆追求新生活，与同班陈姓同学真诚相恋。杨森得知后，大为恼怒，设计将二人枪杀于渠县的荒郊野外。

第八妾汪德芳是成都人。她是「十二钗」中同杨森大胆决裂最为自立自重的一个。汪德芳之父原为杨森二十军军部秘书，为人谨小慎微。被无耻小人强行说合，被迫将女儿嫁与了杨森。汪德芳当时年仅15岁，尚在念中学。成亲后，杨森准予她继续求学，并送至上海国立音乐学院就读。汪德芳学成归来后，在杨森创办的成都天府中学任校长，成了社会名流，当选过国民党「国大代表」。但和杨森关系形同冰炭，几乎不往来，连所生小孩也改姓汪。“文革”期间，因杨森之故，被逼自杀于乐山。