1071 yılında Malazgirt Muharebesinden sonra Anadolu'nun her köşesi Oğuz Türkleri tarafından ele geçirilmişti. Batı Anadolu'ya gelen Oğuzların Kayı Boyunun bir kolundan olan Çaka Bey yaptığı savaşlarla bütün Ege kıyılarını ve Adaları ele geçirdi. Bugünkü Ayvacık yöresinde çok az Türk olduğunu gören Çaka Bey, Kayı Boyunun bir kolunu, gemilerle eski adı Kayılar olup, zamanla Kayalar olan köyün kıyısından karaya çıkardı. Aşiret buradan üç kola ayrılıp, Yalı kolu bugünkü Kayalar köyünü oluşturdu. Yerleşik düzene geçerek hayvancılık ve çiftçiliğe başladılar.


Kaz Dağları eteklerindeki Kayalar köyü yaklaşık 200 nüfusa sahiptir, ancak yaz aylarında yerli ve yabancı sakinlerle 300 kişiye ulaşmaktadır. Köy Marmara iklimi etki alanı içerisindedir. Ancak kıyı şeridinde Ege iklimi hakimdir. Bitki örtüsü de bu iklime uygun şekillenmiştir.

Zeytinyağına ve bitkiye dayalı bir mutfağa sahip olan köyde, geçim, zeytin, sebze ve meyve üretimine dayalıdır.