วัดศิริวรรณาวาสแห่งนี้ในอดีตเป็นวัดที่เจ้าเมืองสงขลาต้นตระกูล ณ สงขลา ในสมัยที่เมืองสงขลาตั้งอยู่ที่แหลมสนเป็นผู้สร้าง คนท้องถิ่นจะเรียกชื่อว่า" วัดตก" มีความสำคัญเป็นอย่างมากกับเมืองสงขลา กรมศิลปากรได้มีการขึ้นทะเบียนเป็นโบราณสถานและประกาศให้เป็นส่วนหนึ่งของโบราณสถานบริเวณเมืองสงขลาเก่าเป็นสถานที่ท่องเที่ยวในเชิงอนุรักษ์

วัดตั้งอยู่บนพื้นเชิงเขาโดยมีอุโบสถตั้งอยู่ในระดับที่สูงกว่าสิ่งปลูกสร้างอย่างอื่น สิ่งปลูกสร้างภายในวัด ประกอบด้วย อุโบสถมหาอุตมีที่เดียวในจังหวัดสงขลา , หอระฆังที่แสดงรูปแบบศิลปกรรมแบบท้องถิ่นภาคใต้ที่สวยงามยิ่งนัก รวมทั้งกำแพงแก้วที่สร้างล้อมอุโบสถ โดยทางเข้าทางด้านทิศตะวันออก มีซุ้มประตูแบบเก๋งจีน อายุประมาณสมัยพุทธศตวรรษที่ 24-25

อีกหนึ่งสถานที่ซึ่งห้ามพลาดไปชมนั่นก็คือ พระแท่นที่ประทับของ พระบาทสมเด็จเจ้ากรุงธนบุรีหรือพระเจ้าตาก เมื่อครั้นเสด็จมาวัดแห่งนี้ครับ