Этот дворец, один из первых, который был построен в северо-западном углу города-крепости в конце Фиренце, Палаццо Пандольфини, статуи Il giardino decorato da 15-го века, имел небольшой «Сад наслаждений» и большой огород , Вазари пишет, что здание было перепроектировано Рафаэлем, вероятно, в 1514 году для епископа Джанноззо Пандольфини. Сад и дворец были украшены статуями, фонтанами и водными экспозициями - подарками папы Льва X - и таким огромным количеством цветов и растений, что дворец стал довольно культурным центром во времена Ферранте (около 1550 г.), Филиппо (около 1600 г.), Роберто (около 1750 г.) и другие члены семьи. В конце 18 века так называемая «дворцовая ветвь» семьи Пандольфини вымерла бы, если бы Элеонора, дочь Аньоло, не усыновила своего племянника Алессио. Благодаря Элеоноре, у которой была построена теплица для зимнего хранения ее коллекции декоративных растений, дворец получил новую жизнь и снова принял художников и писателей, как это было в эпоху Возрождения. С 1870 года по 1885 год Алессио продолжал реконструкцию здания; за этой реставрационной схемой последовали еще два, в 1954-1956 и в 1994-1996 годах, Филиппо Пандольфини, отец нынешних владельцев Роберто и Никколо. Сад, который Элеонора превратила в «романтический сад в английском стиле», вернулся к своему первоначальному великолепию благодаря жене графа Алессио Софронии Стибберт, которая также стала опытным садовником. Ее коллекции камелий и цинерарий известны, а некоторые ботанические раритеты, которые она выращивала, были удостоены призов Ботаническим обществом садоводства в конце 19-го века. Ее сын Роберто построил оранжерею над оранжереей для своей жены Беатрис Корсини, последнее изменение, сделанное в великолепной резиденции Пандольфини.