Nommée d'après la Church Avenue, l'ancienne route menant à l'église réformée de Flatbush.
La Church Avenue s'appelait autrefois Church Lane, et East Broadway à l'est de la Flatbush Avenue. À mesure que l'Église réformée gagnait en importance, la route prit son nom, selon Forgotten New York. L'église se trouve à l'angle de Church Avenue et Flatbush Avenue ; sa congrégation fut fondée en 1654, d'après Untapped New York, et son bâtiment actuel en pierre date des années 1790.