В XIX веке на берегу реки Воронеж появилась усадьба, которая впоследствии была куплена известным цирковым артистом Анатолием Леонидовичем Дуровым.

За время своей карьеры ему довелось побывать и дрессировщиком, и канатоходцем, и акробатом, и клоуном. Именно Анатолию Дурову принадлежит идея использования в своих выступлениях красочных костюмов. Вместе с братом Владимиром Дуровым он стал основоположником династии цирковых артистов.

В своем воронежском доме Анатолий Леонидович устроил частный музей, где на протяжении нескольких лет проводил экскурсии.

У Анатолия Дурова была довольно большая коллекция предметов из разных областей культуры и истории. В его музее можно было увидеть и археологические находки, и этнографику.

Полного благоустройства усадьба достигла к 1910 году: на террасах, спускающихся к реке, стояли беседка-бельведер, античные статуи, фонтаны, манеж для дрессировки животных, грот с аквариумом и павильон в виде средневекового замка, где Дуров проводил выставки необычных картин, которые создавал сам. На стеклах одного размера он послойно писал пейзаж, потом соединял заготовки и получалась объемная картина, как сейчас сказали бы, с «эффектом 3D».

Примечательно, что в воронежском доме родилась Тереза Дурова, ставшая известной дрессировщицей. Она продолжила дело своих предков, заслужив звание народной артистки. 

Анатолий Леонидович Дуров умер 6 января 1916 года. Его вдова завещала дом Союзгосцирку при условии создания в нём мемориального музея артиста. Со временем здание стало разрушаться, и решено было заменить деревянные конструкции второго этажа на кирпичные. Первый этаж был частично перестроен.

В 1978 году дом-музей был открыт как часть Воронежского областного краеведческого музея. Сейчас в нем представлено несколько экспозиций, посвященных династии Дуровых. Имеются уникальные фотографии и документы, а также предметы искусства созданные непосредственно самим Анатолием Леонидовичем.