Палац міняв своїх господарів – у різні роки у ньому жили дочка графа Софія Михайлівна, син Семен Михайлович, вдова Марія Василівна. У 1880-х роках будівля спорожніла і була кинута. На початку 20 століття родичі Воронцових – Дашкови влаштували там санаторії та пансіони. Після революції землі були націоналізовані.
З 1856 по 1882 р. маєтком володів син фельдмаршала М. С. Воронцова – Семен Михайлович, а після його смерті – Шувалови та Воронцові-Дашкові.
З 1956 року в палаці знаходиться музей. При Воронцовському палаці знаходиться парк – пам'ятник садово-паркового мистецтва. З грудня 1824 року до квітня 1851-го Воронцовський парк в Алупці створював талановитий німецький садівник-ботанік, головний садівник Південного берега Криму Карл Антонович Кебах.
Едвард Блор – ранній представник британської архітектурної еклектики, який добудував Букінгемський палац і спроектував палац в Алупці. Син відомого шотландського антиквару. Систематичної освіти не здобув. Вікіпедія