武功侯府并不在勛貴人家聚居的南坊或者東坊，而是擠在了平民百姓住的北坊。

侯府的宅子原是榮國公府，榮國公傳五世，與族中寧國公比鄰而居，兩處國公府占了一條街，宅子極大。

后來兩位國公的后人出了不肖子孫，連帶著國公爵位被削，家產被抄沒，族人獲罪入獄，這兩處宅子便空了下來。

圣上登位之后，不忍兩處宅子荒蕪，就將兩處國公府一分為五，分賜給五位親近大臣居住，武功侯便是其中一位，因為大小也是個侯爺，便住了榮國公府正路，占了最大最好的一處園子。