İlçe merkezinin güneyinde yer alan Bozaniç kayası, ismini eteklerinin yerleşkesinde bulunan Bozaniç köyünden almaktadır. Bozaniç kayasının deniz seviyesinden yüksekliği 839 metredir. Jeolojik olarak volkanik oluşumlu olan Bozaniç Kayasının belli bir bölümünde batıdan doğuya doğru örülmüş 5-6 metre yüksekliğinde bir sur mevcuttur. Kale, sarp kaya üzerine inşa edilmiş olup taşların örülmesin de Horasan harcı kullanılmıştır. Doğu kısmında ise burç bulunmaktadır. Kalenin taban kısmında belli aralıklarla yağmur suyunu tahliye etmek için dehlizler yapılmıştır. Kayanın batı kısmında ana kaya delinerek bir kaçış tüneli oluşturulmuştur. Kayanın alt düzlüğüne inildiğinde yine aynı döneme ait hayvan barınakları ve mezarları bulunmaktadır. Bozaniç kayası, Amerika Birleşik Devletleri’nin en görkemli ve popüler milli parklarından biri olan Yosemite Ulusal Parkıyla çok benzerlik göstermesiyle de dikkati çekmektedir.