Великолепный маленький дворец, в котором находится Галерея Боргезе, был построен в начале семнадцатого века как частная резиденция и для общественного представительства семьи Боргезе. С самого начала здесь размещалась коллекция кардинала Сципиона (1579-1633), племянника папы Павла Пятого Боргезе.

Картинная галерея уже была перенесена туда в 1615 году, а в 1625 году туда было перенесено около двухсот экспонатов древних скульптур. Оригинальное ядро ​​коллекции свидетельствует о глубоком интересе кардинала Сципиона к античности, классицизму и новаторским художественным течениям того времени, за исключением средневекового искусства. Со временем коллекция была увеличена за счет конфискации, пожертвований и покупок, а в конце XVII века она была обогащена наследием Олимпии Альдобрандини.

В 1807 году принц Камилло Боргезе, муж Паолины Бонапарт, должен был передать Наполеону большую часть археологической коллекции (154 статуи, 160 бюстов, 170 басов, 30 колонн и несколько ваз, которые сегодня составляют Фонд Боргезе в Лувре в Париже). В 1902 году итальянское государство приобрело остаток коллекции и дворца.

Долгая реставрация вернула фасаду оригинальный белый мраморный цвет и перестроила внешнюю лестницу с двумя лестницами в соответствии с оригинальным дизайном. В настоящее время коллекция состоит из скульптур, бас-рельефов и старинных мозаик, картин XVI-XVII веков и скульптур. Они включают в себя шедевры Антонелло да Мессины, Джованни Беллини, Перуджино, Пинтуриккьо, Веронезе, Рафаэля (Смещение), Доменикино (охота на Диану), Тициана (священная и светская любовь, Любовь с завязанными глазами Венеры), Корреджо (Даная), Караваджо (Молодость с корзина с фруктами, Мадонна лакеев, Давид с головой Голиафа), Рубенс (Пьета) и великолепные скульптуры Джана Лоренцо Бернини (Аполлон и Дафна, Похищение Прозерпины, Давида) и Кановы (Паолина Боргезе).