บ้านคลองใหญ่ตั้งอยู่ที่ราบเชิงเขาทางตะวันออกของแนวเทือกเขาบรรทัด พื้นลาดชันลงไปทางทิศตะวันออกสลับกันเนินเขาเตี้ยๆและพื้นราบ พื้นที่อุดมสมบูรณ์ไปด้วยป่าไม้และแม่น้ำลำคลอง ที่มีต้นกำเนิดจากเทือกเขาบรรทัด ชาวบ้านคลองใหญ่บางส่วน ได้อพยพหนีศึกสงครามมาจากไทรบุรี ประเทศมาเลเซีย ซึ่งมี สถานที่เป็นที่ราบเหมาะแก่การทำกิน เช่น เพาะปลูก ทำไร่ทำนา เพราะอยู่ใกล้เทือกเขา มีแม่น้ำหลายสายจากเทือกเขาต่าง ๆ จึงได้ตั้งรกรากสร้างบ้านเรือน

ตำบลคลองใหญ่ เดิมเป็นพื้นที่ของตำบลตะโหมด อำเภอเขาชัยสน จังหวัดพัทลุง โดยโอนหมู่บ้านจากตำบลตะโหมดมาบางส่วน แล้วมาตั้งเป็นตำบลคลองใหญ่ ตามประกาศของกระทรวงมหาดไทย เรื่องตั้งและเปลี่ยนแปลงเขตตำบล ในท้องที่อำเภอเขาชัยสน จังหวัดพัทลุง ประกาศ ณ วันที่ 28 กันยายน 2515 ชื่อตำบลคลองใหญ่ที่มีลำคลองไหลผ่านพื้นที่ตำบล เดิมพื้นที่ดังกล่าว มีชื่อว่า "บ้านโป๊ะข้าวแห้ง"ตำบลคลองใหยญ่บางส่วนเป็นพื้นที่ติดกับเทือกเขาบรรทัด พื้นที่ลาดชันมาทางด้านตะวันออก เเหมาะกับการทำการเกษตรโดยเฉพาะการทำนาข้าว แต่ปัจจุบันเริ่มลดน้อยลงเนื่องจากชาวบ้านเริ่มปลูกยางพารา เพราะเห็นว่าราคาสูงแต่ก็เป็นโอกาสดีที่สมเด็จพระนางเจ้า สิริกิติ์ พระบรมราชินีนาถ พระบรมราชชนนีพันปีหลวง ได้พระราชดำรัสเรื่องข้าวสังข์หยดพัทลุง ทำให้ชาวบ้านเกิดแรงบันดาลใจ จนกระทั่งปัจจุบันพื้นที่ทำนาข้าวไม่มีที่ว่างเว้น ชาวบ้านทั้งชุมชนศาสนาพุทธ และชุมชนศาสนาอิสลามมีความสัมพันธ์กันตั้งแต่อดีตจนถึงปัจจุบัน