Нині архітектура міста має дві потужні домінанти, підкреслені великою кількістю хмарочосів: Фінансовий округ і Середній Мангеттен. Частина міста на захід від П'ятої авеню називається західною, решта — східною. Поперечні вулиці мають, таким чином, різне найменування в різних частинах міста, наприклад, 42-га західна і 42-га східна вулиці.
У XVII–XVIII століттях у будівництві переважали дерев'яні каркасні і зроблені з колод будинки, устрій яких перенесено з Європи тодішніми колоністами. Однак після спустошливої пожежі 1835 року дерев'яне будівництво обмежили. В XIX столітті місто забудовується будинками переважно з цегли і природного каменю, які завозився з каменоломень Нової Англії[20]. Всі будівлі вище шести поверхів обов'язково оснащувалися водонапірними резервуарами для того, щоб знизити необхідний тиск у водопровідних магістралях.
\