阜城位于大运河以西的平原。县城有城墙环绕，城内庙宇众多；运河码头和道路则供旅人与货物往来。1469年，知县林恭向东扩建城池，使全城共有六门。1648年清朝重建城墙，改设四门，门名寄托了对德行与兴盛的期望。