Это название Дворец получил из-за удивительной ограды, украшенной экзотическими бюстами мавров с лицами из черного мрамора и одеждами из белого.В ряде помещений сохранились выполненная по его рисункам лепка, кариатиды, дубовые двери с резьбой, камины.