番禺城最初建造大致在秦平定岭南之后，由时任南海尉的任嚣主持建造，故当时的番禺城也被称为“任嚣城”。