Петр I мимо ехал и залюбовался. Из экипажа вышел и в гости зашёл. Щербаков по всем правилам императора принял, а тот ему потом собственный портрет подарил.
Висел портрет напротив дивана, где Петр отдыхать изволил. Об этом хорошо написано у Дмитрия Покровского в книге «Очерки Москвы».
Автор и портрет, осыпанный бриллиантами, видел, и на диване посидел. Дом построен был с торговыми лавками — так Щербаков продолжил Немецкий рынок, поставив торговые ряды на Большом Гавриковом переулке (теперь Спартаковский).
Хозяева дома менялись, и в XIX веке купеческий дом, где сам Петр отдыхал, превратился в дешевый трактир для самого лихого и нищего люда столицы.