В тысячный раз повторюсь — не знаем мы своей истории.

С 1770-х годов участком, расположившимся на углу Большого Левшинского и Денежного переулков, владел полковник А. Ф. Ладыженский. Скорее всего это был Алексей Федорович Ладыженский (1739-1817), полковник с 1776 года, который был был в числе учредителей в 1784 году московской типографической компании.

В 1782 году полковник просит позволения построить дом на своём участке и получает его. Когда точно был построен дом — неведомо, но на плане 1797 года двухэтажное здание уже присутствует. Видимо поэтому о дате строительства пишут скромно — здание возведено в конце XVIII века.

Зданию повезло, в 1812 году оно не сгорело, а в 1835 году было приобретено Московской дворцовой конторой для жилья своих служащих.

Контора была идеальным местом для службы при императорском дворе, при этом не требуя переезда в столицу Российской империи Санкт-Петербург. В составе Министерства императорского двора Дворец в стиле модерн для Министра Императорского двора, существовавшего с 1826 по 1918 год, было несколько дворцовых контор , которые занимались обеспечением придворного хозяйства для нужд Императорской фамилии.

1 июля 1768 года для строительства Большого Кремлёвского дворца была создана Экспедиция кремлёвского строения. Дворец не был построен, но экспедиция продолжала существовать, получив другие функции. В 1831 году была преобразована в Московскую дворцовую контору, которая занималась строительством и эксплуатацией царских дворцов в Москве и её окрестностях, а также подготовкой и проведением коронационных торжеств.

Среди первых жильцов был Евграф Дмитриевич Тюрин (1792-1870), служивший в Московской дворцовой конторе с 1840 по 1868 год. Тюрин сделал много для российской архитектуры. В 1817—1827 годах — участие в перестройке дворцового комплекса подмосковной усадьбы Архангельское, в частности им построен Храм-памятник Екатерине Великой. Множесто храмов и гражданских зданий воздвигнуто им в Москве и окрестностях.

Помимо работы он увлекся коллекционированием картин в конце 1810-х—начале 1820-х годов. Удивительно, но не имея лишних денег, лишь на своё жалованье, он к 1850 годам имел коллекцию из более чем 400 "оригинальных картин всех известных школ Европы". Все стены м даже лестницы в его квартире были увешаны картинами У Тюрина была мечта — создать в Москве публичную общедоступную галерею. В 1851 году он написал: "Почти тридцать лет тому назад родилась во мне мысль собрать коллекцию оригинальных картин, и с тою единственною целью, чтобы впоследствии положить из оных основание Отечественной Картинной Галереи в Москве, в которой ко всем неисчислимым сокровищам, кажется, только ее и недостает". Обращения в различные инстанции оказались бесплодными, глухи к его предложениям были Московское художественное общество, московский генерал-губернатор граф Арсений Андреевич Закревский и министр двора, который ответил ему вместо императора. В 1852 году Тюрин открыл галерею, разместившуюся в его квартире, для широкой публики по воскресеньям.

Разочарованный, что ему отказывают в благом деле, Евграф Дмитриевич решил продать коллекцию, при этом ему хотелось, чтобы она сохранилась. Но ни Общество любителей художеств в 1862 году, ни Училище живописи, ваяния и зодчества в 1863 году этим предложением не заинтересовались. Коллекция была распродана по частям.

В здании жили в разные годы историки Иван Егорович Забелин (1820 -1909), на протяжении 20 лет бывший архивариусом Дворцовой конторы, и Сергей Михайлович Соловьёв (1820 — 1879), который провёл здесь свои последние дни. Издатель исторического журнала "Русский архив" Пётр Иванович Бартенев (1829 — 1912) рассказывал: "... с переездом в Москву врачи воспретили ему много работать, и писать предписано ему было в течение не долее получаса. 3 октября 1879 г. он увлекся делом и прописал довольно долго, а на другой день скончался"

Среди жильцов были писатели Александр Фомич Вельтман (1800- 1870) и граф Евгений Андреевич Салиас-де-Турнемир (1840 — 1908), которого называли "Русский Александр Дюма" и книги которого в советское время не переиздавались.