蒋介石为了报复白，凡是回击李宗仁时，都要白为其出力，一有风吹草动，就要白出来说话。1964年2月12日，李宗仁在纽约《先锋论坛报》上发表公开信，要求美国效法法国政府，承认新中国，实现中美邦交正常化。李宗仁的这一举动，遭到了岛内亲蒋报纸的攻击。白崇禧也奉命致电李宗仁，指责他“迭发谬论”，要他“幡然悔悟，以保晚节”。深知内情的海外人士明白，白崇禧身在台北，已没有说话的自由，他给李的电报，言不由衷，实非得已。

白崇禧刚到台北时，住在圆山，后来“台湾省政府”腾出一些房子给从大陆来台的公务人员居住，他便从圆山搬到松江路，后来买下了这所住宅。

就在白被除名的当年，他的家也被“国安局”查抄，屋里的所有物品被翻了个底朝天，连地板也被揭开检查。白崇禧非常气愤，他当即给负责情治部门的蒋经国打电话，问这是怎么回事。蒋经国答他不知道此事，要白直接去问“总统”。白崇禧又将电话打到“总统府”，老蒋则称:“我知道此事，不仅对你如此，人人都应该这样来一次。”白崇禧气得直翻眼，毫无办法。

失去自由 受到监视

白崇禧在台湾，行动也失去了自由。他的寓所对面是派出所，派出所的警员有不少就是特工人员。白公馆进进出出的客人，常常受到特务的跟踪和监视。白崇禧喜欢下棋，以前军务繁忙，但只要一有空，他总要拉部下杀上几盘。来台湾后，也经常请人来陪他下棋。可后来，因老受情治人员的盘问，再也无人敢来陪他下棋了。白崇禧同台湾军政界上层人士的联系无形之中被隔开。

白崇禧喜欢打猎，有一次他一时兴起，邀上几个朋友开车到位于台中的阿里山去打猎。他们一行到了山脚下，然后乘小火车上山。

这天天气晴朗，好久没出门的白崇禧心情很好。阿里山古木参天，鸟虫啁鸣，坐在小火车里的白崇禧哼着歌儿，谈着他过去在广西打猎的一些往事。

铁路是单行线，出发前已与山上打过招呼，可是火车开出车站没多远，忽然山上一列小火车疾驶而来。好在上山的火车刚刚出站，速度不是很快，白崇禧急忙跳下车，才幸免于难。

这次差一点发生的事故，是属偶然，还是有人故意所为，不得而知。从此，白崇禧再也不敢外出了。

白崇禧信奉伊斯兰教，是台湾“回教协会”的理事长，1955年约旦国王侯赛因访台，当面邀请白崇禧以“回教协会理事长”的身份访问中东。蒋介石不放心白崇禧，不准他出境，还授意改组“回协”，另选“回协”常务理事时子周为主席。这时，白崇禧除了“战略顾问委员会”副主席这个空头衔外，没有任何职务了。

白崇禧虽然不是“回协”的理事长，但他仍给予“回教协会”很大支持，凭着他在国民党中的老关系，常常为“回教协会”争取一些经费，协会有什么困难找到他，他从不推诿，尽力帮助解决。为此教徒们非常感激，有什么活动总是把他作为贵宾，特别邀请他参加。这使落难中的白崇禧感到些许慰藉。

晚年丧妻 白崇禧猝死

最令白崇禧伤心的莫过于他晚年丧妻。

白夫人马佩璋是当年桂林有名的美人。她出身诗礼之家，曾读过师范，以品学才貌闻名四周。白崇禧伉俪患难37载，夫妻感情甚笃。马佩璋为白崇禧生下10个儿女，对子女管教甚严，被白崇禧称为贤妻良母。

1962年12月，马氏因高血压与心脏病不治，撒手西归。马氏的离去，使得白崇禧伤感万分。白崇禧平时身体颇好，没有出现大的病症。1966年12月2日，有人发现白崇禧死在他卧室的地板上，尸体周身发紫，睡衣和床单被撕得稀烂，床头还有半杯没有喝完的酒。

白崇禧是死于急病，还是被人暗害，至今仍是个谜。