Dahulu juga desa ini desa yang besar sebelum mekar menjadi desa:kalisari dan tawang sari.
di desa ini penduduknya sangat mengutamakan pendidikan.ini terbukti dengan banyaknya sekolah di desa kalirahayu.dari mulai sekolah umum sampai sekolah agama..
diantaranya;
.ponpes al hikmah (sudah tidak digunakan lagi)
.ponpes darussalamah
.ponpes darul maghfiroh
Di kalirahayu juga terdapat .liga sepak bola karang taruna cup desa kalirahayu yg di adakan setahun sekali..
di kalirahayu juga terdapat beberapa klub sepak bola yang sering mengikuti kompetesi di liga kalirahayu diantaranya: