Der prächtige kleine Palast, in dem sich die Galleria Borghese befindet, wurde zu Beginn des 17. Jahrhunderts als privater Wohnsitz und zur öffentlichen Vertretung der Familie Borghese errichtet. Von Anfang an befand sich hier die Sammlung des Kardinals Scipio (1579-1633), des Neffen von Papst Paul dem Fünften Borghese.

Die Bildergalerie wurde bereits 1615 dorthin verlegt, und 1625 wurden dort auch etwa zweihundert antike Skulpturen übertragen. Der ursprüngliche Kern der Sammlung zeugt von Kardinal Scipios tiefem Interesse an der Antike, dem Klassizismus und den innovativen künstlerischen Strömungen der Zeit, mit Ausnahme der mittelalterlichen Kunst. Die Sammlung wurde im Laufe der Zeit durch Beschlagnahmungen, Spenden und Einkäufe erhöht und Ende des 17. Jahrhunderts durch das Erbe Olimpia Aldobrandinis bereichert.

Im Jahr 1807 musste Prinz Camillo Borghese, Ehemann von Paolina Bonapart, einen Großteil der archäologischen Sammlung (154 Statuen, 160 Büsten, 170 Baß-Riliefs, 30 Säulen) und mehrere Vasen, die heute die Sammlung darstellen, Napoleon übergeben Borghese Fund im Louvre in Paris). Im Jahr 1902 erwarb der italienische Staat den Rest der Sammlung und des Palasts.

Eine lange Restaurierung hat der Fassade die ursprüngliche weiße Marmorfarbe zurückgegeben und die Außentreppe nach dem ursprünglichen Entwurf umgebaut. Gegenwärtig besteht die Sammlung aus Skulpturen, Bass-Riliefs und alten Mosaiken, Gemälden aus dem 16. bis 17. Jahrhundert und Skulpturen. Dazu gehören Meisterwerke von Antonello da Messina, Giovanni Bellini, Perugino, Pinturicchio, Veronese, Raffael (Deposition), Domenichino (Dianas Jagd), Tizian (heilige und profane Liebe, Venus Augenbinde), Correggio (Danae), Caravaggio (Jugend mit einem Obstkorb, Madonna der Fußsoldaten, David mit Goliaths Kopf), Rubens (Pietà) und prächtige Skulpturen von Gian Lorenzo Bernini (Apollo und Daphne, der Raub der Proserpina, David) und Canova (Paolina Borghese).