Усадьба Дивовых берёт своё начало под исход 18 века. Первыми владельцами имения была графская семья Кутайсовых, затем Иван Дивов выкупил этот участок. Позже он перешёл по наследству его сыну Николаю, который был ординарцем у графа Кутайсова, участвовал в сражении под Бородино, разделял убеждения декабристов и обожал лошадей.
Николай Дивов разводил коней только орловской породы. Такие лошади не подходят для скачек или быстрого перемещения на большие расстояния, орловских рысаков использовали в каретной упряжке.
Сегодня из всей усадьбы уцелело мало. На месте конюшни - руины, а дом, который был пристроен, не сохранился вовсе. Историки рассказывают, постройки были возведены в русском стиле, об этом свидетельствуют круглые окна. Элементы швейцарского шале не сохранились, о декоративных башенках свидетельствуют только фотографии советского периода. Здесь же рядом с конюшней была смотровая площадка, куда Николай Дивов выводил своих рысаков и показывал публике. Самому первому, своему фавориту, он поставил гранитный камень, надпись на нём обновили совсем недавно.
Конное дело Дивовых погибло в год отмены крепостного права, но возродилось в советское время. Сейчас недалеко от усадьбы расположен НИИ Коневодства, где разводят десятки пород лошадей.
Из сохранившейся части усадьбы интерес вызывает также минарет, который был пристроен ко второму каменному дому усадьбы на холме. Мусульманская постройка посреди православных просторов вызывает неподдельный интерес каждого, кто включает посёлок Дивово в свой туристический маршрут.
В башне была винтовая лестница, которая вела не только на верхний балкон, но и вниз. Другая легенда гласит, что там внизу было помещение, где русские массоны проводили свои собрания.