1952年，北京医院。
已经在朝鲜前线一年半的彭德怀，回到北京化名住院，对前额的肿瘤硬块接受手术治疗。好在肿瘤经检查是脂肪瘤，医生很快进行了切除手术，让彭德怀得以尽快出院。
原本，彭德怀打算立刻返回朝鲜，但中央坚持让他在北京休养一段时间，并安排他住进了中南海。
在彭德怀休养期间，中央开始讨论了他的工作安排。经周总理提议，彭德怀以军委副主席的身份，兼任代总参谋长一职，但彭德怀并不愿接受这一工作。
其实，早在红军改编为八路军的时候，彭德怀就萌生出离开军队的想法，想去地方工作。当时干部多，部队少，再加上彭德怀的学历不高，因此他感到自己不如到地方工作为好。
可惜，这样的想法并没有获得批准。而彭德怀也只能服从中央的决定，一次又一次肩负起重要的军事使命。
得知自己将要兼任代总参谋长一职，彭德怀专门找到毛主席，表示自己希望像王震一样，去搞农垦工作，并提议总参谋长一职交给高岗来当，还列举了高岗的一些优点。
“难道高岗没有缺点吗？”毛主席反问道。
彭德怀闻言，又推荐邓小平来担任总参谋长。对于邓小平的才能，毛主席给予了肯定，但邓小平无法从现在的工作中抽出。
最终，彭德怀的愿望没有实现，只能服从中央的决定，但他并没有放弃为转入地方工作而努力。
朝鲜停战之后，彭德怀为了解决和平时期解放军的建设问题，向中央提议召开军事会议，毛主席批示同意后，彭德怀当即开始着手准备报告稿。在讨论报告稿时，高岗指出报告稿没有思想性，彭德怀顺势建议由高岗来负责修改，想要将军委工作推给高岗。
“还是以彭为主吧！”毛主席当场拍板。
1954年，彭德怀在中央会议上，提出不当国防部长，但未获得同意；1956年军委会议，彭德怀提出只搞军委，不搞国防部，但参加会议的中央领导都不表态；1958年的政治局会议上，彭德怀再次提出辞去国防部长职务，毛主席表示：
“现在备案，以后不准再提。”
1959年的政治局扩大会议，趁着刘少奇接任国家主席的决定，彭德怀提出自己不再担任下届国防部长，想去搞农业工作，结果毛主席有些误解，问彭德怀：
“让你当副总理兼国防部长，还不够吗？”
彭德怀只好不再多说。
作为农民的儿子，彭德怀对于农民有着特别的了解和感情，对土地有着深深的眷恋。但他多年想要改行搞农业工作的夙愿，却始终未能实现，成了彭德怀的终身遗憾。
1965年彭德怀到三线工作后，曾在泸州视察时坦言，假如自己当时没去北京，在新疆搞农业该有多好，也许也就没有后来的那些事了。
遗憾之心，溢于言表。