堡占地超过4平方公里，位于下蔡县城东面五十里处，城堡北门临官道，南依淮水，东通九江郡城，西向下蔡县城。

城堡居住的人员分三大部分：

1、黄家主要的家族成员以及依附于他们的仆从，接近1万人；

2、以三阶兵种为主的私军，超过2万人；

3、各种工匠及其学徒，达2000多人，其中，就有令叶腾垂涎的城堡南面造船厂里的造船师。

除此之外，黄家城堡还有商队每日行