Проектирование усадебного ансамбля граф заказал самому Джакомо Кваренги. Архитектор в 1785 году упоминал о сделанном им проекте для деревни графа Завадовского. Рассуждая о своей усадьбе, Завадовский писал своему другу Воронцову про "дом, сад, церковь и гроб", намереваясь упокоиться в склепе под величественным храмом. Храм был освящен в честь Св. Екатерины, что тоже говорит о многом. О причастности Кваренги к его проектированию документальных подтверждений не имеется, но архитектура здания однозначно говорит в пользу этого зодчего. Кваренги создал в Ляличах замечательный ансамбль классицизма, как всегда в своем творчестве — строгий и торжественно-величавый. Дворец с крыльями флигелей и куполом над колонным портиком принадлежал к лучшим образцам палладианства в России.