有一些同志认为“大跃进”的成绩应该肯定，但是存在的缺点、错误和带来的后果，比想象的要严重得多，应该认真总结经验教训，承认指导思想有失误，采取措施切实纠正。也有一些同志不愿多讲缺点和教训，还有意无意地压制别人揭露问题、提意见。随着讨论的不断深入，批评“三面红旗”的意见越来越多。特别是7月16日毛泽东以《彭德怀同志的意见书》为题，批印了彭德怀的那封信以后，坚持还是否定“三面红旗”的分歧更加鲜明突出，基本赞成彭德怀《意见书》观点的占多数。这期间，李锐也曾问周恩来对彭德怀的《意见书》的看法，周恩来说“那没有什么吧”。

7月8日，周恩来召集小会，商谈会议讨论的哪些问题需要形成文件。到会同志一致认为会议讨论的问题，许多尚不成熟，可以形成文件的不多，并建议会议尽早结束。10日，毛泽东指定我、胡乔木、陈伯达、吴冷西、田家英5人组成小组，负责为这次会议讨论的问题起草一个《记录》。13日，毛泽东提出5人小组增加陆定一、谭震林、陶鲁笳、李锐、曾希圣、周小舟6人，扩大为11人小组，限2日内写出初稿，14日夜印好送给他。遵照这一指示，起草小组立即开会，给“秀才”们分题目，分头起草，由胡乔木抓总，我负责组织联系。当天午夜，各位“秀才”交卷，随即付印。14日凌晨印出清样，各小组全天逐条逐句边讨论、边修改，14日夜如期印出一稿分送毛泽东、中央常委和各组同志人手一份。15日各小组全天都在开会讨论《记录》。那几天，时间抓得很紧，真是分秒必争，大有会议即将结束之势。

7月15日，就在各组讨论《记录》的同时，毛泽东提出要北京再来一些人，参加最后几天的会议。16日，毛泽东批印彭德怀《意见书》的同时，又提出改变庐山会议分组办法。具体地说，就是北京来的同志要调一下组。比如你原来分在华东组，那么从明天起就不再参加华东组的会议了，换到别的组去。毛泽东说：“这样做，见闻将广博多了，可能大有益处。”

各组对《记录》的意见，大多集中在“关于形势和任务”部分。实际上就是如何评价“三面红旗”问题。尽管前一段对“三面红旗”的批评意见很多，后来对彭德怀的《意见书》也是多数表示赞成，但是在最后形成正式文件时，就要字斟句酌了。有人说《记录》对“大跃进”所取得的伟大成绩和丰富经验表述得不够充分，而对存在的问题写得过于具体，会给群众泼冷水；有人说《记录》对缺点看得过重，是一个泄气文件。7月23日以后，有人干脆指责《记录》和《意见书》“唱的是一个调”。这表明，当时虽然许多同志看到了急于求成的指导思想给社会主义建设事业带来的危害，要纠“左”；但另一方面，自己头脑里求速成的急躁情绪并未得到克服。在这种情况下，庐山会议纠“左”的初衷，注定无法实现。

7月17日，彭真到达庐山。22日，由彭真主持中央书记处会议，讨论修改《记录（第二稿）》，意见还是集中在“关于形势和任务”部分。不料，23日，毛泽东突然在大会上讲话，严厉批评彭德怀的《意见书》，风云突变。但这时刘少奇仍然要求起草小组 尽快改出《记录（第三稿）》，争取提交会议通过，形成正式文件发下去。24日，毛泽东也在大区负责人会议上说，《记录》已改到第三稿，合乎实际，有利团结工作。起草是个过程，一稿被推倒，二稿作者本人不满意，现在三稿准备发表。但是随着会议反右倾的不断升级，《记录》的事也就不再提了。