Nommée d'après la 181st Street ; aussi appelée 181st Street–Fort Washington Avenue.
La station se trouve sous Fort Washington Avenue, avec une sortie face à Bennett Park, l'emplacement de Fort Washington. Le fort fut construit en 1776, pendant la défense de New York menée par George Washington. Après sa prise par les troupes britanniques et hessoises le 16 novembre 1776, il fut rebaptisé Fort Knyphausen, d'après le général hessois Wilhelm von Knyphausen, qui avait joué un rôle majeur dans la victoire.