Tarihçesi hakkında belgelere dayalı kesin bilgiler olmamakla beraber Türkmen köyü olduğu Döğer isminin Düğer olarak değişmeye uğraması ile anlaşılmaktadır. Köyün ismi Düğer kardeşlerden geldiği tahmin edilmektedir. Bu kardeşlerden birisinin Yukarıdüğerköyünün mevkisine diğerinin ise komşu köy olan Aşağıdüğer köyünün bulunduğu alana yerleşmesi sonucunda köyler bugüne gelmiştir. Daha önceleri köy halkı "Kadılar Mahallesi" olarak bilinen Dörtdivanın güney kesiminde yerleşmiştir.