Στη Madison Avenue της Νέας Υόρκης βρίσκεται από το 1906 το συγκεκριμένο κτήριο που αρχικά κατασκευάστηκε με σκοπό να χρησιμοποιηθεί ως προσωπική βιβλιοθήκη του J. P. Morgan -εξ ου και το όνομα του κτηρίου- η οποία περιείχε σπάνια χειρόγραφα, βιβλία καθώς και έργα τέχνης. Μετατράπηκε σε δημόσιο ίδρυμα το 1924 από τον γιο του J. P. Morgan καθώς αυτή ήταν η επιθυμία του πατέρα του. Το εν λόγω κτήριο απο το 1996 έχει οριστεί ως Εθνικό Ιστορικό Ορόσημο , γεγονός που αποδεικνύει και επιβεβαιώνει τη σπουδαιότητα τόσο του κτηρίου όσο και των περιεχομένων του . Σήμερα, είναι μουσείο αλλά και επιστημονικό κέντρο έρευνας .
Σπάνια και σπουδαίας σημασίας έργα μεγάλων καλλιτεχνών φιλοξενούνται εκεί , όπως των Jean de Brunhoff, Vincent Van Gogh, Paul Cézanne.
Η συλλογή piece of arts που διαθέτει την καθιστούν μοναδικής εικαστικής σημασίας ενώ τα σπάνια μουσικά χειρόγραφα που βρίσκονται στα ράφια του μουσείου προσδίδουν στο χώρο μια αίσθηση καλλιτεχνικού χρυσορυχείου .
Michelangelo, Raphael και Picasso έχουν την τιμητική τους.
Το μοναδικής σημασίας περιεχόμενο του κτηρίου συνοδεύεται από την νεοκλασική αρχιτεκτονική του κτηρίου, που κατασκευάστηκε το 1903 από τον Charles Follen McKim . Εμπνευσμένος από την Villa Giula και το αρχαιοελληνικού τύπου nymphaeum , επένδυσε πολυτελώς το εσωτερικού του χώρου,τοποθετώντας ιδιαίτερο μάρμαρο ενώ η Palladian style αψίδα στην είσοδο του προσδίδουν μια λεπτεπίλεπτη διάθεση μεγαλοπρέπειας .