В конце XVIII века здесь жила Марфа Кроткова, вдова, славившаяся щедрой благотворительностью. Храмы и монастыри постоянно принимали от нее пожертвования. С ее именем связана интересная история: когда умер ее муж, Марфе Яковлевне стало очень страшно жить одной в большом доме. И тогда она совершила удивительную вещь: явилась в полицейский участок, потребовала, чтобы под ее окнами поставили пост городового, и устроила себе таким образом выбор будущего мужа. Как на пост заступил один из служивых, она с ним обвенчалась. У Кротковой была одно странная привычка: она любила кормить гостей кашей. Да какой — не меньше семи разных сортов ставила она на стол. Причем распределяла так: если кому досталось каши мало — тот в немилости у нее был. И пока все разные каши не съешь — из-за стола не вставай.

В 1870 году усадьба досталась купцу и нефтепромышленнику, старообрядцу Шибаеву, который начинал работу вместе с Морозовыми на текстильной фабрике, а потом купил часть бакинских нефтяных месторождений, заинтересовался нефтью и стал ею торговать. Как старообрядец, Шибаев получил денежную ссуду, расширил дело до постройки и запуска нефтеперерабатывающего завода, а затем перешел к серной кислоте. Позже он занялся и производством минеральных масел и других химических продуктов.

После смерти купца во главе семейной фирмы встала его жена, которая продолжила строить новые фабрики. После ее кончины делом заправляли сыновья, но в конце концов оно было продано нефтепромышленникам из Голландии.

При Шибаеве дом был оформлен в псевдорусском стиле. Пилястры убрали, заменили полуколонками. Декор выполнялся из терракоты, которую красили в разные цвета. Именно эта отделка выделяла здание среди остальных.

После смерти вдовы Шибаева дом выкупило государство, здесь открыли больницу. В советское время дом использовали под административные цели, а потом закрыли на реставрацию. Работы продолжаются и сейчас. Если и раньше от нарядного здания было трудно оторвать взгляд, то сейчас оно просто великолепно, словно возникший откуда ни возьмись в городской суете теремок из сказки.