Первым владельцем участка дома № 24 по Большой Морской улице был колокольный мастер Ферстер. Служил он в Петропавловском соборе, был принят на службу в Россию по личному указанию Петра I. Дом Ферстера сгорел при пожаре в 1736 году. Далее участком владели другие хозяева. С 1764 года среди владельцев этого участка числятся и ювелиры.
В 1850х годах дом здесь перестраивал П. Жако. В 1898 году участок приобрёл санкт-петербургский потомственный почётный гражданин, купец 2-й гильдии Карл Фаберже. В то время Карл Фаберже был оценщиком и поставщиком императорского двора. В 1899–1900 годах располагающееся здесь здание было полностью перестроено по проекту Карла Карловича Шмидта, двоюродного племянника Фаберже. Нижний этаж был распланирован для торгового зала. Фасад отделан одной породой гангутского гранита. Камень обработан разными приёмами, что создаёт впечатление многообразия форм отделки. Фирме Фаберже дом № 24 принадлежал до 1917 года. Кроме торгового зала здесь располагались бухгалтерия, студия дизайнеров и скульпторов, собрание моделей, мастерские.