天正十五年（1587年）九月十三日，京都，聚乐第。
聚乐第是秀吉专门为自己在京都营造的别院，毕竟身为关白，自然得时刻伴随在天皇左右，而身为关白又怎么可能在京都没有居所呢？
向过去信长那样，每次来京都都只能借住寺院而居，对于自认为已经建立起比信长更高成就的秀吉来说是不可接受的。
再加上有信长前车之鉴在前，他迫切的希望在京都由一座能被自己时刻掌握的，集合防御和休闲一体的居所，聚乐第便应运而生。
这地方说是居所，实际上比南侧的二条城还要大。
聚乐第以秀吉建造的本丸为中心，周围配置北之丸、南二之丸、西之丸等曲轮，橹、天守阁等建筑物敷以白壁，使用金箔瓦，四周围绕水堀。乃是一座建筑在御所西侧的的平城。
本丸东堀大约在现在的大宫通、西堀位于日暮通西部至知惠光院通附近、南堀位于下长者町通北部、北堀位于一条通南部。
除了南二之丸是后来丰臣秀次营造之外，其他的主体建筑都是在秀吉时期修建完成。
大小规模依丰臣秀次侍从驹井重胜《驹井日记》文禄4年4月10日（1595年5月19日）条与考古调查计算复原，则为本丸南北310m、东西170m，南二之丸南北80m、东西110m，北之丸南北105m、东西85m，西之丸南北80m、东西60m。
这座本来属性应该是“居所”的房子，秀吉甚至在其东北角修筑了一座3层的天守，虽然比不得大坂的天守雄伟，但也是京都最高的建筑了。
在《太阁记》早起版本中，对聚乐第有这样的描绘：四面的石墙延伸三千步，远看好似一座大山。樱门的入口的大门是铁柱铜门，（聚乐第内）橹台好似星辰一般（多）。屋瓦交汇之处，有用宝石雕刻的老虎好似在风中咆哮……
这样一座花费十万人，数十万贯钱用时一年营造出来的奢华城堡，最终却在7年之后，随着他的第二任主人丰臣秀次一道化作一片尘土。
或许是因为杀了自己外甥的事儿是的秀吉对聚乐第产生了厌烦，对其下达了“不留一砖一瓦，所有一切，甚至是地基都尽皆拆除”的命令。
秀吉确实没有骗秀家，他在聚乐第东侧与御所之间的地区，专门给秀长、秀家、秀次等人空出了藩邸。
原本每家的藩邸的面面积都是定数，但是现在秀吉答应了秀家会给他两人份的面积，因此临时将另个院子打通，以供给秀家使用。
据说原本的这个院子是给丰臣秀次使用的，但是现在他只能被顶到的更外围去。
此时的秀吉并没有强制要求天下各大名必须将自己的亲属或者家庭迁移至京都或者大坂，但是他确实趁着宴会兴起，向众大名提议过此事。
用他自己的话说就是“天下大名亲如兄弟，然天各一方，今日我在京都筑宅，众位如果有意可以就近选宅，以后可以时常与我畅谈啊。”
可惜对于大名们来说，统治领地才是第一要务，除非秀吉把刀架在他们的脖子上，不然他们才会答应秀吉迁居京都的提议。
但是身为秀吉亲族的秀长、秀长、秀次等人就不一样了，就连仅有1万石的木下家定都开口说道“能和关白殿居住在一起，实在是臣等的荣幸。况且这样我也能常伴北政所左右，以听差遣了。”
秀家不理解，秀吉将众大名叫到京都的意义在哪里，难道就是为了展示自己的新玩具吗？
整场宴席持续了3天，所有的大名不管过去有什么仇怨，都在秀吉的调停下握手言和，特别是此次有转封的大名，都趁着这个机会好好和自己的邻居们认识了一下，拉进了关系。
在这种场合中，大多数大名或因为志趣，或因为年龄，或因为故交的关系，在秀吉的眼皮子底下三五成群的吆喝在一起。
就连秀吉自己，都拉着秀长、前田利家、德川家康、小早川隆景、浅野长政等人开了个小圈子一起喝酒。
毛利辉元则是和黑田孝高、锅岛直茂几个人聊得很热闹，不知道还以为是多年未见的朋友。
福岛正则、加藤清正和黑田长政等人更是直接拖了衣服在庭院里玩起了相扑，要不是黑田孝高被秀吉叫去了，肯定会大骂黑田长政一顿。
