В 1850 г. титулярный советник Порфирий Николаевич Григорьев купил с торгов обширный участок земли поблизости от Георгиевской башни Нижегородского кремля. Проект дома на этом участке в том же 1850 г. был выполнен архитектором А.Е. Турмышевым. Планы фасадов в стиле эклектики губернская Строительная и дорожная комиссия одобрила, посчитав их «как в частности, так и в общем виде вполне удовлетворительными».
Дом располагался, справа от церкви Святого Георгия, перед Верхнепосадской базарной площадью. В 1851 г. на своем участке П.Н. Григорьев построил деревянные одноэтажные службы (по проекту арх. М.К. Ястребова), которые были обращены на Георгиевскую площадь и главный вход в церковь.
Первоначально дом был двухэтажным. Фасад дома сохранял классицистические элементы и решения, межоконные пилястры римского ордера на втором этаже и треугольный фронтон кровли над ними, тимпан которого должна была украшать рельефная скульптура. Этажи имели самостоятельные боковые входы, между собой сообщались круглой винтовой лестницей.
Главный его фасад имел 5 световых осей. На первом этаже окна имели прямоугольную форму, на втором - с полуциркульным завершением. Над окнами первого и второго этажей располагались прямые сандрики. Поясок отделял первый этаж от второго. С двух сторон по главному фасаду на первом этаже имелись пристройки с отдельными входами, над которыми были устроены открытые террасы с ограждением в виде балясин.
Позднее дом принадлежал управляющему Нижегородской конторой пароходного общества «Меркурий» Н.А. Брылкину и сдавался внаем.
30 июня 1973 г. состоялось торжественное открытие Дома архитектора. Председателем совета Дома архитектора выбрали Бенедикта Алексеевича Бастырева. Дом архитектора стал центром культурных и творческих мероприятий.
На протяжении нескольких десятилетий Дом Архитектора способствовал развитию архитектурного сообщества, был площадкой для обмена опытом, реализации различных культурных проектов и репрезентации архитекторами своей деятельности горожанам.
Совсем недавно в Доме Архитектора снова произошли изменения, появились новые функции - новые интерьеры. Этому предшествовала большая проектная работа от наших нижегородских архитектурных бюро: DA, Mish Studio, ГОРА, FD Studio, Архилэнд, Архитектурный квартирник, Асгард.