Фольварк Чахец (прежнее название деревни) известен с 1563 года. С этим местом связаны судьбы таких родов, как Межеевские, Крупинские, Булгарины и Дьяконские. Строительство усадьбы на окраине села было начато в 1-й половине XIX века судьей Пружанского района Михаилом Булгариным. Помимо одноэтажного дома, в Каштановке была библиотека, дом эконома, прачечная, кухня, ледник, зернохранилище, паровая винокурня, солодовня, теплица, гумно, скотный двор, овчарня и конюшня. Сам Михаил Булгарин участвовал в шляхетском восстании, поддерживал повстанцев, организовал в поместье лечение раненых, а затем переживал здесь ссылку за бунтарство.