1969年，珍宝岛反击战后，上级让在京的老干部疏散到全国各地。作为原军科院副秘书长王智涛一家被要求到山西榆次，并且将组织关系、行政关系、供给关系转到榆次军分区干休所。

王智涛在1952年被评为行政7级，1965年全军取消军衔后，套地方行政等级为7级。按照他的待遇，应该安排到省军区干休所，军分区干休所是师团级干部休养的地方。

之所以被降低安排，是在特殊时期被扣上帽子，而且迟迟不给做结论。被疏散的老干部实际上都是靠边站，或者不能工作的老将，在职都在位置上。

王智涛离京之前，一直希望军科院给个明确的结论，但只对他说是人民内部矛盾。尽管心里不愿意走，但也实在留不下，就到榆次安家。在榆次生活一年多，随着形势的变化，1971年以看病为由入京，看了老战友们，也了解了一下情况。叶帅从湖南回来，向他请教，对方说需要形势发生根本变化，才能水到渠成。

他想办法留下来，方便打听情况，第一时间解决问题。如果回榆次，真发生根本性变化，恐怕到地方上也要很长时间。组织他找人借一套房子，将家人接到北京居住。可三居室的房子根本不够一大家子人居住，看到过去自己的老房子还贴着封条，就揭掉撬门住进去了。

俗话说，事情没有不透风的墙，这么大动静也很快引起相关单位的注意。房子已经封存，虽然过去是他所住，也是组织上分配的，是公家财产非私产。对方将情况反馈到军科院，得知王智涛偷偷跑回来，就约他集体谈话。

军科院重要领导粟裕、宋时轮刚担任第一政委，院长，参加谈话的还有其他干部。宋时轮让他先谈，他把自己这几年来的一肚子委屈说出，自己的问题早有结论，怎么不公布？当年战备让大家疏散，都顾全大局走了，几年过去，战争也没有打起来，难道不应该回来吗？如今自行迁回旧居，有何错之有？

有人表示他说的都是强词夺理，粟裕和宋时轮对王智涛的问题清楚，是想睁一只眼闭一只眼。听完他的自述后，表示不能在让他去榆次了，然后离开会议室，大家跟着散会。院长宋时轮还是非常佩服王智涛：老兄，舌战群儒。这件事也就不了了之，也因此留下。

尽管留下来，可一直没有给安排工作，待遇虽然恢复。本来在1975年准备调他军政大学，后改变情况。直到1978年才安排，担任军科院顾问，按照大军区副职待遇。