Одним із попередніх власників Качанівки був російський полководець Петро Рум’янцев-Задунайський: при ньому збудували кам'яний палац і заклали сад. З часом маєток перейшов від Рум’янцевих до Тарновських. Григорій Тарновський — камер-юнкер імператорського двору — був багатим землевласником і мав дев'ять тисяч кріпаків у Київській, Полтавській і Чернігівській губерніях.
Силами тих же кріпаків відомий меценат збудував новий палац, який оточував величезний парк площею 430 гектарів. У палаці була велика бібліотека, картинна галерея, пан організував навіть кріпацький симфонічний оркестр. Водночас Тарновський жорстоко поводився зі своїми підлеглими та мав гарем кріпачок. Про те, що відбувалося у маєтку письменник Тарас Шевченко описав у повісті "Музикант", відтворивши в образі Арновського моральний портрет Григорія Тарновського.
