พิพิธภัณฑ์พระยารัษฎานุประดิษฐ์มหิศรภักดี ตั้งอยู่ถนนหน้าค่าย อยู่ห่างจากเทศบาลกันตังประมาณ 200 เมตร เป็นที่ตั้ง ของสถานที่ประวัติศาสตร์ที่สำคัญแห่งหนึ่งของเมืองตรัง “จวนเก่าเจ้าเมืองตรัง” หรือบ้านพักอดีตเจ้าเมืองตรัง พระยารัษฎานุประดิษฐ์มหิศรภักดี เป็นเรือนไม้ 2 ชั้น มีรูปปั้นหุ่นขี้ผึ้งและเครื่องมือเครื่องใช้ในชีวิตประจำวันของท่านอย่างครบถ้วน โดยทายาทตระกูล ณ ระนอง เป็นผู้ดูแลรักษา ชาวกันตัง และเทศบาลเมืองกันตัง เห็นว่าบ้านหลังนี้คือหลักฐานสำคัญทาง ประวัติศาสตร์ที่ควรรักษาไว้คู่เมืองตรัง จึงคิดจัดทำเป็นพิพิธภัณฑ์แสดงชีวิต และผลงานของพระยารัษฎาฯ ให้ชาวตรังได้ศึกษา จดจำ โดยได้ขออนุญาตใช้เป็นอนุสรณ์สถานรำลึกถึงคุณูปการของพระยารัษฎาฯ ขอใช้เป็นพิพิธภัณฑ์ โดย ตาโต๊ะเบียนจง อนุญาตให้จังหวัดตรังใช้บ้านหลังนี้จัดทำเป็นพิพิธภัณฑ์ เมื่อ 10 กันยายน 2535 ใช้นามว่า พิพิธภัณฑ์พระยารัษฎานุประดิษฐ์ มหิศรภักดี (คอซิมบี๊ ณ ระนอง)