Строительство особняка на ул. Мясницкой началось в 1793. Его архитектором был Матвей Казаков, который занимался не только архитектурными формами, но и внутренними интерьерами. В залах особняка размещены несколько десятков колонн, облицованных искусственным мрамором. Пятиметровые стены украшены ручной росписью и лепниной. Строение благополучно пережило пожар 1812 года, который тогда уничтожил 70% построек в Москве.

Спустя 200 лет убранство особняка сохранилось в первозданном виде, даже цвет стен в каждом из залов повторяет задумку великого Казакова. Исконным владельцем особняка был Иван Иванович Барышников — представитель одного из самых богатых родов Российской империи. В XIX веке усадьба Барышникова была одним из светских центров Москвы. Здесь собирались известные поэты, проходили блестящие балы. Считается, что именно в доме-усадьбе Барышникова в круглом зале танцевала девушка – прототип Наташи Ростовой, главной героини романа Льва Толстого «Война и мир». В этом здании по приглашению хозяев гостил русский драматург, поэт и дипломат Александр Грибоедов. Именно в этих стенах он впервые зачитал задуманную еще в Петербурге знаменитую комедию «Горе от ума» и написал несколько музыкальных вальсов. Здесь он встречался с поэтами Денисом Давыдовым и Владимиром Одоевским, декабристом Вильгельмом Кюхельбекером.

После революции в здании располагался Медсанпросвет. В 1990 году особняк был передан в аренду ИД «Аргументы и факты», в чьем ведении находится и по сей день. Дом-усадьба Барышникова является архитектурным памятником XVIII века и находится под охраной государства.