Kelurahan Brebes terletak di bagian tepi barat dari Kecamatan Brebes. Maka dari itu, bagian barat kelurahan ini berbatasan dengan kecamatan lain yaitu Kecamatan Wanasari.
Secara resmi wilayah ini dibagi dalam 22 RW (Rukun Warga), tetapi dalam kesehariannya sering digunakan pembagian wilayah berdasarkan dusun atau kampung, berikut adalah nama nama dusun atau kampung di wilayah Kelurahan Brebes.
