文化单位的房子历来紧张。艺研院位于恭王府的府邸，包括“99间半”在内的西路和东路是其办公区域和研究生部，曲里拐弯的耳房偏房都被之前的毕业生占据了。艺研院82级一位研究生回忆，她1985年新婚没有地方住，就和丈夫在“99间半”里找了一间空办公室，作为新房。
艺研院所属的红楼梦研究所原在花园里办公，府邸里的艺研院尚未整体动迁，先搬出来的红楼梦研究所无处可去，索性搬出花园，又进府邸。
在这次联席会议上，谷牧首先督促了公安部的搬迁问题，又批评了文化部的腾退工作：“文化部再怎么困难也不能搬进去！公安部搬出来，你们搬进去，是没有什么道理的！”文化部副部长宋木文当场表示：“谁再搬进去，谷牧同志拿我是问！”
后花园腾退工作进行得差不多了，在恭王府未来开放时归谁管理的问题上，文化部和北京市又有了争议。在这次联席会议上，谷牧发话，恭王府首要问题还是腾退修复问题，“至于修复后将来如何使用，暂且不提”。
2006年11月23日，工人正在给恭王府多福轩的窗框上漆。当日，随着占用北京恭王府府邸的最后一家单位中国音乐学院附中悬挂在恭王府府邸近50年的校牌摘下，并移交占用房屋及管理权，历时28年的恭王府府邸腾退工作终于圆满结束。图|新华
三代国务院领导人接力
1987年到1988年，后花园的退一步斋、垂花门等建筑逐渐修缮完成。文化部希望开放恭王府后花园，以园养园，也为府邸部分的搬迁造一个声势。
要开放后花园，必须明确管理权归属的问题。恭王府管理中心原党委副书记吴杰曾查阅过府里的档案，他告诉《中国新闻周刊》，在管理归属问题上，文化部和北京市双方都给谷牧打了报告，谷牧在给文化部的批示中说，想让恭王府归你们管，就要拿出一个更好的策划方案。
1987年，文化部提出了将恭王府建设成为中国传统文化博物馆的方案。谷牧将报告批转北京市政府，北京市同意了这一方案。至此，恭王府的归属权正式交给了文化部。
1988年，谷牧卸任国务院副总理职务。在他任职期间，恭王府后花园的腾退和修缮基本完成。
8月17日，恭王府后花园正式对公众开放。但因缺少经费，后花园的修缮并没有全部完成。
1989年，李瑞环到恭王府视察。为了能让恭王府花园在来年的亚运会期间成为接待定点单位，经他批示，从亚运会的预算里批了150万的专项经费给文化部。赶在1990年亚运会开幕之前，恭王府后花园的修缮工程终于全部完成。
而恭王府府邸部分的搬迁由于牵扯面太广，问题太复杂，几乎无法向前推进。艺研院在北四环的新址被北京市副市长张百发借去，用作亚运会场馆的停车场，以致新址建设迟迟没有开工。
1995年4月22日，退休的谷牧再次来到恭王府考察。恭王府负责人向他保证，应能在1997年完成大部分单位的搬迁工作，但他已经不太相信这样的保票了，只留下一句：“看来我是见不到恭王府修好的那一天了。”
1999年，时任国务院常务副总理李岚清开始主持恭王府的腾退修复工作。他后来回忆：“谷牧同志受周总理的委托，我受谷牧同志的委托，抓了5年恭王府的工作。”
2002年，中国艺术研究院迁往北四环新址；2006年10月，占据恭王府府邸的最后一家单位中国音乐学院附中搬出。在三代国务院领导人的关心下，历时28年的恭王府腾退工作终于圆满画上句号。
2008年8月20日，大修后的恭王府府邸对外开放。至此，恭王府全面开放，成为中国唯一一座对公众开放的清代王府。
