Köyün adının anlatılanlara göre Kozan'dan kaçan Ermenilerin güzergahı üzerinde olan bu köy ermenilerce "şu eli kılıçlılardan da bir geçersek kurtuluruz..." dedikleri söylenmektedir.Kılıçlı köyü sakinleri Bozdoğan yörüklerinin alt kolu olan Karahacılı yörüklerinden oluşmaktadır.Köy 1850 yıllarında Osmanlı devletinin iskan politikaları sonucu Karahacılı yörüklerinin yöreye yerleştirilmesi ile kurulmuştur. 1997 Adana depreminde köydeki yerleşim yerlerinde büyük bir yıkım olmuş ve köyün bir kısmı 1 km ileriye yeni deprem konutlarına taşınmıştır.