В самом конце XVIII века граф Федор Толстой построил двухэтажную усадьбу, от которой после пожара 1812 года остался лишь каменный остов. В 1815-м дом покупает и за два года его восстанавливает выходец из ярославской деревни купец Андрей Карзинкин. Его внук Андрей торговал чаем в старом Гостином Дворе, служил депутатом Городского собрания, дружил с Александром Островским и устраивал у себя дома на Покровском бульваре музыкальные и театральные вечера. А правнук Александр занимал должность директора Торгово-промышленного товарищества Ярославской большой мануфактуры, состоял в браке с балериной Большого театра Аделаидой Джури и числился старостой церкви Трех Святителей на Кулишках, находящейся в соседнем Малом Трехсвятительском переулке.
В 1899 году сестра Александра Карзинкина художница Елена Андреевна вышла замуж за писателя Николая Телешова и переехала к мужу на Чистопрудный бульвар.
Николай Телешов был известен как организатор литературного кружка «Среда», на заседаниях которого читали свои произведения ведущие писатели, поэты и мыслители того времени и классики наших дней – Максим Горький, Иван Бунин, Леонид Андреев, Серафимович, Владимир Маяковский, Вера Инбер, Илья Эренбург. Бывали также и видные государственные и общественные деятели – например губернатор Москвы Н.Н. Алексеев (брат Станиславского)
Иван Бунин описывает одно из своих последних посещений дома Телешовых: «Вчера был на собрании «Среды». Много было «молодых». Маяковский, державшийся, в общем, довольно пристойно, хотя все время с какой-то хамской независимостью, щеголявший стоеросовой прямотой суждений, был в мягкой рубахе без галстука и почему-то с поднятым воротником пиджака, как ходят плохо бритые личности, живущие в скверных номерах. Читали Эренбург, Вера Инбер».
И в наши дни, в ресторане выступают музыканты, писатели и поэты.
На летней веранде на импровизированной сцене также проходят различные концерты, по вечерам играет аккордеонист. Когда холодно, в помещении особняка невероятно комфортно и уютно.