„Brixton“ bedeutet der Stein eines Mannes namens Beorhtsige.
Zuerst belegt ist der Name 1062 als Brixiges stan; andere Quellen nennen ihn Brixi, einen sächsischen Herrn. Sein Stein markierte vielleicht den Versammlungsort der Hundertschaft Brixton, einer Gruppe von Pfarreien in Surrey. Wo er stand, ist unbekannt, vermutlich aber oben auf dem Brixton Hill, lange bevor hier eine Siedlung entstand.