ในอดีตเคยเป็นคฤหาสน์ของผู้ช่วยเจ้าเมืองสงขลาคือ พระยาสุนทรานุรักษ์ (เนตร ณ สงขลา) ผู้ช่วยราชการเมืองสงขลาเมื่อปี พ.ศ. 2421 จนกระทั่งเมื่อ ปี พ.ศ. 2437 ถูกใช้เป็นที่พำนัก และที่ว่าราชการของพระยาวิจิตรวรศาสตร์ ข้าหลวงพิเศษสงขลา (เจ้าพระยายมราช) ก่อนถูกใช้เป็นศาลาว่าการมณฑล นครศรีธรรมราช อาคารมีลักษณะสถาปัตยกรรมแบบจีนผสมตะวันตก อายุกว่า 100 ปี พ.ศ. 2516 กรมศิลปากร ได้้ขึ้นทะเบียนอาคารแห่งนี้เป็นโบราณสถาน ต่อมาพระบาทสมเด็จพระปรเมนทรรามาธิบดีศรีสินทรมหาวชิราลงกรณ พระวชิรเกล้าเจ้าอยู่หัว รัชกาลที่ 10 เมื่อครั้งดำรงพระอิสริยยศสมเด็จพระบรม โอรสาธิราช เจ้าฟ้ามหาวชิราลงกรณ สยามมกุฎราชกุมาร เสด็จเป็นองค์ประธานในพิธีเปิดพิพิธภัณฑสถานแห่งชาติสงขลา เมื่อวัน ที่ 25 กันยายน พ.ศ. 2525 ภายในจัดแสดงศิลปวัตถุที่เป็นมรดกทางวัฒนธรรม ศิลปวัตถุ ภาคใต้ตอนล่าง และเป็นแหล่งศึกษาความรู้ทางด้าน โบราณคดีประวัติศาสตร์ ศิลปะชาติพันธุ์วิทยา ศิลปะจีน ศิลปิะพื้นบ้านพื้นเมือง นอกจากนี้ยังจัดแสดง ศิลปโบราณวัตถุที่เกี่ยวกับตระกูล ณ สงขลา ตระกูลเจ้าเมืองสงขลาในอดีต