在大运动时期，一些军队、地方的高级干部受到冲击，靠边站多年，有人三、五年后恢复工作；有些人时间更长，像吕清长达12年，再次被安排工作，却被安排到二线当顾问。
两任中组部部长，对他的工作安排作出调整，要让他重返一线工作。
说起吕清，很多人不认识，他在1964年之前是一名军人。转业之前，担任沈阳军区工程兵政委，属于正军级，在1961年晋升为少将。雷锋就是他麾下的兵，对于宣传雷锋的事迹，起到很大的作用。
1964年，部委、地方等提出向解放军学习的口号，而军队也向这些单位派了政治干部，吕清被调任林业部政治部主任。
在大运动时期，他无可避免地受到冲击，被诬陷为“三反分子”等，最终停止工作，到五七干校劳动。从1966年到1978年，他整整失去12年工作的机会。
1978年以后，各部门开始走上拨乱反正的道路，吕清也在这时候恢复了名誉，走上工作岗位。此时的他才63岁，放到现在肯定是到了退下来的年纪，可在当时并没有具体的年龄限制，只要身体允许可以继续留在一线。
我们知道，很多老同志都在1982年、1985年纷纷退居二线或者离休。因为在1980年提出干部年轻化号召，1982年中顾委成立，一批靠干部年龄到了，身体不允许了。可是在1980年以前是没有打破干部终身制的正式规定。
可是农林部组织上说，考虑他的身体不好，难以支撑繁重的领导工作，就让他担任顾问了。这也就是说，刚刚恢复工作，就被放到二线了。无奈之下，只能这样了。
可是在一次的部长级座谈会，讨论顾问工作开展情况，时任中组部的胡部长看到他，很诧异，年纪不算很大，为何来参加顾问会议，他说自己已经是顾问了。
一般情况下，只有干部身体不好才会到二线，如今看你的身体还很结实，只当顾问不行，要给他安排实质性工作。最终决定，让他到党校学习，毕业再分配工作。
1979年，中组部部长已经换成宋任穷，当征询他想去哪里工作时。按照他的意愿，很想回到部队工作。自从1964年离开部队后，实际上在部委工作2年，此后就中断工作。自己在军队工作二三十年，在地方也就2年，而且刚转到部委工作时，还摸不清怎么工作，只能先搞调查。
如果组织上不能批准他回军队，索性就回家养老，在农林部当顾问，也接触不到实质性工作。显然他的这些想法有些怨气。可前任胡部长和现任宋部长都不同意他回部队，希望他会到老单位林业部担任副部长。
在林业部多年，工作关系上有些僵硬，表示回去不好开展工作。中组部推荐几个单位，他根据自己的条件都觉得有些“高攀不上”，如几个总局，都是高级知识分子集中的单位，自己是个大老粗，不好领导工作。最终决定让他打农垦部当副部长。
干农业他是有兴趣的，毕竟自己就是农民出身，对农业还是有一些了解的。工作到1983年，农垦部撤并，他退居二线，到1995年正式离休。