尔斯逊·昆在一六一九年上任之后，才袭击和驱赶了万丹军队，占领了这个地方。不过那个时候，这里人口稀少，缺乏粮食供应，没有木材建造船舶和房屋，周边地区是荒凉的沼泽地，罕见村庄人烟，雨季洪水泛滥成灾，还常有老虎、野猪、犀牛等出没，同时四周也面临当地周边王国的敌视和威胁。
而后，荷兰人用各种手段得到了吃苦耐劳而又手艺精湛的明人，从印度科罗曼德尔海岸的石场运来巨石，从东爪哇的扎巴拉砍得柚木，从当地采集珊瑚石，在废墟上建立起巴达维亚的雏形。
这巴达维亚的主要建设工程，比如运河与排水道的挖掘、房屋和港湾的建造、城墙及防护要塞的修筑大多由明人兴建。华工熟谙制砖和砌砖工艺，令荷兰人甚为称道。
这个时候的巴达维亚，还没有建好，甚至连城墙都没有，只有一些棱堡作为防御工事。之所以这样，荷兰人并不在乎城墙，因为他们有足够的信心应付周边敌人的进攻。因为这个巴达维亚，他们是当作东方的大本营来建设的。光是舰队，就超过了三百膄，统领的还是海军上将安东尼·范·迪门。
此时，这个安东尼·范·迪门，就很是有点鄙视地看着普特曼斯，这个曾经的大员总督陪着大海盗刘香离开港口，