วัดเขาป่าแก้ว นั้น เนื่องจากเดิมบนเนินเขาสีเสียดนี้ มีต้นสีเสียดขึ้นเป็นจำนวนมาก และมีต้นแก้วขึ้นอยู่มากมาย ซึ่งลำต้นแข็งแรง ใบสวย ดอกหอม ชื่อก็เพราะ จึงใช้ตั้ง