燕王府座落在东华胡同，与秦王府所在的西华胡同，中间隔了两条大街，看似离得很近，其实两座王府遥遥相对，秦王府到燕王府要用一炷香的时间。
太祖皇帝先后册封过六位亲王，三位郡王。
这六位亲王是他的两位同胞兄弟福王和寿王，以及他的四位皇子，豫王、燕王、秦王和桂王；
三位郡王则是太祖皇帝的两位庶弟和一位堂兄，他们三人在京城没有庶邸，册封后便就藩了。
因此，京城里的王府最初便是六座。
太祖皇帝殡天之后，豫王和桂王先后被贬为庶人，他们的王府也被收回了。
福王和寿王那时已经很老了，可不知为何，也有子孙被卷进了豫王和桂王的案子里，太皇太后念在他们年世已高，没有制罪，但是将世袭罔替改为了世袭递降，到了这一代，这两家的爵位已经将至镇国将军，原先的王府也变成了镇国将军府。
余下的两座王府就是秦王府和燕王府了。燕王薨逝后，燕北郡王袭爵，京城和燕北的燕王府自是都改成了燕北王府。当时也有人提出让掌管宫中内务的十二监把燕北王府收回去，因为京城里素来没有给就藩的郡王设置王府的规矩，可是不知出于何种心理，太皇太后没有理会。
是没有理会，而不是没有答应。
也就是说，有人提出这件事，太皇太后当做没有听到。
后来街头巷尾便有了传言，说是太皇太后之所以在京城中依然保留秦王府和燕北王府，是因为这两座王府里有冤魂。
且，还是小孩子的冤魂。
传说惨死的孩子怨气极深，何况还是被自己的祖母害死的孩子。
因此太皇太后对这两座王府，并非不想动，而是不敢动，担心稍有不慎，她那两个死在王府里的孙儿就会跑进宫里向她索命。
当然，这都是传言而已。
可是却有人相信。
因此，这两座王府虽然比不上老王府那样是公认的凶宅鬼屋，可是到了夜里，就连巡城的也不会到两座王府所在的胡同转悠。