8月20日，吴晗主持会议，讨论北京文物建筑保护问题。薛子正、梁思成、华南圭、郑振铎、林徽因、罗哲文、叶恭绰、朱兆雪等出席。

郑振铎态度强硬地说:“如有要拆除的最好事先和社会文化事业管理局联系，由中央决定，不应采取粗暴的态度。”

但吴晗绵里藏针:“全国性的问题请示中央决定。”

这是不是意味着，只要不是“全国性的问题”，就不需要“请示中央决定”呢?

林徽因提出，“保护文物和新建筑是统一的。保护旧的是为新建筑保存优良的传统”“北京的九个城门是对称的，如一旦破坏，便不是本来的基础了。再如天坛只保存祈年殿其他都拆掉也不是保存文物的办法”。她认为民居建筑的保存也是重要的方面:“艺术从来有两个传统，一个是宫殿艺术，一个是民间艺术，后者包括一些住宅和店面，有些手法非常好，如何保存这些是非常重要的。”

梁思成在发言中指出，“北京市的发展是要在历史形成的基础上发展，一定要保存历史形成的美丽城市的风格。有些单位(如公安、交通、经济部门)考虑得片面”，“在保护古文物建筑工作上，首都应起示范作用，慎重是必要的。”

他搬出了苏联经验，提出“在莫斯科建设中，古建筑在原则上尽量保存下来”。他还以“土地私有”讥讽破坏文物建筑的行径:“北京各机关好像有‘土地私有’的观念，在他们自己的范围内爱拆爱建，一点不考虑整体。”

可是，吴晗作答:“在处理中应尊重专家的意见，但专家不能以为自己的意见必须实现。”

会后，由北京市人民政府与文化部社会文化事业管理局等部门共同组织的联合调查小组，对北京城区的牌楼及其他一些古建筑进行调查。

最后，对牌楼作出了保、迁、拆三种处理方式，即在公园、坛庙之内的可以保下来，大街上的除了成贤街和国子监的4座外，全部迁移或拆除。

不幸的是，“文化大革命”期间，吴晗与郑振铎组织的这次对牌楼调查测绘的所有资料，全部遗失。被迁至陶然亭公园的东、西长安街牌楼，也大约在1971年9月，被江青下令拆除。

1953年12月20日，吴晗主持召开首都古代建筑处理问题座谈会。他在总结发言中说:“座谈会已取得一致意见的几处古代建筑处理意见:第一，景德坊先行拆卸，至于如何处理，另行研究。第二，地安门的存废问题以后再研究，先拆去四周房屋10间，以解决交通问题。第三、东、西交民巷牌楼可以拆除。”

由于梁思成的坚持，周恩来总理不得不亲自出面找他做工作。梁思成与周恩来恳谈了几乎两个小时，并极富诗意地描述了帝王庙牌楼在夕阳斜照，渐落西山时的美丽景象。周恩来则以“夕阳无限好，只是近黄昏”作答。

孔庆普主持拆除了历代帝王庙景德坊和东交民巷牌楼。他向笔者追忆了当年梁思成向这两处牌楼告别的情景:

市里对梁思成先生非常尊敬。1954年3月6日，我们开始拆东交民巷牌楼，脚手架都搭好了，第二天接张友渔副市长通知:“交民巷牌楼暂停施工，等梁教授看完后再拆。”我们当天晚上又把脚手架拆下来，把杉槁等放在中华门前面。可是，等了两天仍不见梁先生来，我们就报告局秘书室，12日由秘书室出车接来梁先生，由我在现场接待。