การรื้อกำแพงเมืองนั้น เป็นการรื้อแบบค่อยเป็นค่อยไป ไม่ได้รื้อเสียทีเดียวในคราวเดียว ดังนั้นจึงต่างกรรมต่างวาระกัน หลายช่วง หลายพ.ศ.
เช่นในสมัยปลายรัชกาลที่ ๕ ถัดจากป้อมพระสุเมรุลงมา เป็นที่ตั้งหน่วยงานราชการหนึ่ง คือ ที่ว่าการตำรวจภูธร ก็รื้อกำแพงพระนครออกเพื่อเปิดเป็นพื้นที่โล่ง (แนวเส้นสีแดง)
กรมตำรวจภูธร ได้จัดตั้งขึ้นในรัชกาลที่ ๕ ปี พ.ศ. ๒๔๔๓ ทรงพระกรุณาโปรดเกล้าฯ ให้มีหน้าที่ทำการเป็นพลตระเวณในหัวเมือง ดังมีแจ้งอยุ่ในท้องตราพระราชสีห์ใหญ่ ลงวันที่ ๗ กรกฎาคม ร.ศ. ๑๑๙ (พ.ศ. ๒๔๔๓) แต่อาคารที่ทำการกรมตำรวจภูธร จะก่อสร้างขึ้นใหม่หรือจะใช้วังของเจ้านายพระองค์ใดหรือจะใช้บ้านของข้าราชการผู้ใดเป็นที่ทำการยังค้นไม่พบ