В 1881 году дом перестроил архитектор М. А. Иванов. В середине 1890-х здание приобрел крупный промышленник В. Ф. Голубев. Последним предреволюционным владельцем дома был генерал-майор Свиты граф Н. П. Ферзен.

Большую квартиру в бельэтаже, выходившую окнами на Зимнюю канавку, занимала семья Головиных. Хозяйка – Любовь Валериановна Головина (урожденная Карнович, вдова камергера) – приходилась сестрой княгине Ольге Палей, морганатической супруге великого князя Павла Александровича. Ее дочь Мария Евгеньевна (Муня) Головина была ревностной почитательницей Григория Распутина. Квартира Головиных представляла собой типичный петербургский дом обедневшей аристократии.

Писательница Вера Александровна Жуковская вспоминала: «Я любила бывать в этом темноватом, таинственном, старом доме, любила прохладу его больших комнат с чопорной старинной мебелью. Муня <…> в своей неизменной серой вязаной кофточке <…> светлые пряди ее волос, выбиваясь из небрежной прически, падали на выпуклый лоб. Она, как всегда, улыбнулась мне своей приветливой улыбкой <…> Отношение ее к Распутину – это не поклонение перед святостью, это какая-то слепая вера <…> Как могло такое чопорное, в строгих правилах прежней узкой морали воспитанное семейство, как Головины, не только мириться с разнузданностью поведения Распутина, но даже делать вид или на самом деле ничего не замечать из того, что его окружало?»

Полицейским наблюдением в 1912 году было замечено «почти ежедневное посещение» Г. Е. Распутиным Головиных. Он «приезжал обыкновенно утром и оставался у них 2–3 часа. В это же время к Головиным обычно собирались Мария Сазонова; жена тайного советника, главноуправляющего Собственной Его Величества канцелярией Надежда Илларионовна Танеева; жена коллежского секретаря Зинаида Леонардовна Манчтет и жена капитана 2-го ранга Юлия Александровна Ден». Все они встречались с Распутиным в Спасе на Крови на богослужении, а потом отправлялись к Головиным. Распутин проводил с ними целый день. Свои поездки по городу он обычно совершал в карете Головиных, на улице почти всегда появлялся с какой-либо из упомянутых женщин, преимущественно с Марией Головиной и Марией Сазоновой. С октября 1914 года по декабрь 1916-го Распутин 19 раз навещал Головиных.

Г. Распутин перед домом, в котором была квартира Головиных

Распутин и его поклонники. 1914

Муня писала о Распутине: «В каком бы веке ни появлялись люди, открывающие другую жизнь, их всегда будут преследовать и гнать, как всех, кто шел по стопам Христа. Все великое скрывается под известной оболочкой, которая для профанов закрывает путь к истине…»

В 1736–1737 годах архитектор Г. Крафт построил каменный особняк для графа Федора Андреевича Апраксина, племянника адмирала Федора Матвеевича Апраксина. Затем особняк сменил множество владельцев, пока в 1904 году его не купил князь Семен Абамелек-Лазарев, крупнейший в России землевладелец. По его заказу архитектор Е. С. Воротилов перестроил дом № 21 по Мойке, а Иван Фомин – дом № 23, замечательный пример неоклассики. Сюда князь переехал из дома на Невском проспекте, 40, который по завещанию его отца перешел во владение Армянской церкви.

В начале XX века Императорский Эрмитаж – общенациональный публичный музей. Пускают сюда всякого опрятно одетого человека без билетов. В год Эрмитаж посещало примерно 150 тысяч человек.