Die Fifth Avenue entstand aus der Middle Road des Landvermessers Casimir Goerck.
Vom Stadtrat mit der Vermessung des Gemeindelands beauftragt, legte Goerck eine Middle Road an, aus der die Fifth Avenue wurde; seine East und West Road wurden zur Fourth und Sixth Avenue. Der Commissioners’ Plan von 1811 stützte sich stark auf seine beiden Vermessungen. Heute ist die Fifth Avenue die Trennlinie zwischen Ost und West: Sie trennt etwa die East 59th Street von der West 59th Street.