Sarımsaklı bölgesinin en önemli yapı malzemesi olarak kullanılan sarımsak taşı dayanıklılığı kolay işlenilebirliği ve rengi nedeniyle yöredeki yapılarda tercih edilmiştir. Bölgedeki manastır, kilise, okul ve resmi dairelerin hemen hemen hepsinde bu taş kullanılmıştır.Sarımsaklı adının da Sarımsaktaşından alındığını söyleyenler vardır.