1959年7-8月的庐山会议上，彭总被错误地定为“反党集团”而被撤销一切职务。回到北京后，虽然彭总名义上仍是政治局委员，但受到打击的彭总已不愿再过问政事，并从此在家赋闲。

然而，戎马一生的元帅怎能长期忍受赋闲的生活。一个月后的9月9日，彭总终于按捺不住，提笔向主席写了一封信，这封信的主旨已不再是一个多月前的意见书那样要“纠正左倾”，而是从一个老共产党员的角度，向主席提出希望参加学习、参加生产劳动。

信发出之后，半个月都没有得到主席回应，彭总失望至极。这时，又传来了要他搬出中南海的消息，彭总只得搬出，移居吴家花园。

就在彭总以为信不会再得到回应时，1959年国庆节后的一天，时任中共中央办公厅主任的杨尚昆突然找到彭总，说主席要同他谈话，这让彭总激动不已。

彭总到达中南海主席住处后，发现刘少奇、周恩来、朱德、邓小平、彭真、贺龙、陈毅等人全都在座，这与两个月前庐山会议时批判自己的场景及其相似，相似的场景令彭总又紧张了起来。

然而，出乎意料的是，主席没有再提庐山会议，而是对彭总9月9日写信要求学习和参加生产劳动的意见给与了充分肯定。在座的周总理、邓公等人也纷纷鼓励彭总，犯错误不要紧，不做工作才不会犯错误，应当振作起来，继续为国家做贡献。

主席对彭总说，“读几年书好，要学点马克思主义的哲学、政治经济学”，并且向彭总推荐了书单。据时任中共中央办公厅主任的杨尚昆回忆，谈话时气氛很好，谈话以后，主席又和彭总共进午餐。

在主席的关怀下，11月9日，彭总得以进入中央党校，开始了学习工作。