Seiring perkembangan zaman, tempat persinggahan ini semakin ramai dan kemudian menjadi kota. Kota ini dibangun pertama kali sebagai benteng pada 1821 oleh pasukan Paderi. Benteng ini membentang dari Batang Ayumi sampai Aek Sibontar. Sisa-sisa benteng peninggalan Perang Padri saat ini masih ditemukan, walau sudah tidak terawat dengan baik.