Fin dal Medioevo Jabłonna, "città sana e tranquilla", faceva parte dei possedimenti dei vescovi di Płock, che nel XV secolo vi costruirono una residenza estiva. La scelta fu probabilmente influenzata dalle qualità paesaggistiche e dalla breve distanza da Varsavia.
All'epoca, Jablonna era famosa per i suoi meleti e il miele delle capanne della foresta.
Nel 1773, Jabłonna fu acquistata da Michał Poniatowski, allora vescovo di Płock, poi primate di Polonia e fratello minore del re Stanisław August.
Nel 1774, Michał Poniatowski commissionò il progetto di un nuovo palazzo e di una residenza nel parco a Dominik Merlini, il primo architetto del re e della Repubblica, divenuto famoso per l'ampliamento del Castello Reale di Varsavia e del Parco Łazienki.
L'elemento principale della residenza divenne un complesso di tre edifici: un edificio centrale con un appartamento per il proprietario, un padiglione a sinistra a due piani chiamato Padiglione Reale, destinato al re Stanisław August Poniatowski (oggi uffici per gli alloggi), e un padiglione di destra destinato agli ospiti (oggi camere d'albergo).
L'edificio è stato costruito in stile classico. La costruzione fu completata nel 1779.
Intorno al palazzo, al posto del precedente giardino barocco, negli anni Settanta e Ottanta dell'Ottocento fu realizzato un parco paesaggistico all'inglese, affacciato sulla valle della Vistola. Il progettista del parco, Szymon Bogumił Zug, costruì anche una serie di edifici, di cui i seguenti sono sopravvissuti fino ad oggi: una grotta, un'aranciera e un padiglione cinese.
Palazzo Jabłonna è una residenza molto originale - progettata nello stile del primo classicismo, con elementi di architettura rococò. Il centro della composizione era il salone rotondo, molto più alto delle altre stanze, dove le decorazioni in stucco furono realizzate da Antonio Bianchi nel 1775 e quelle pittoriche da Szymon Mańkowski nel 1777. Vi si accedeva attraverso un vestibolo rettangolare (sala vetrata), da cui si accedeva a sinistra con una scala alla torre e a destra all'anticamera.
Ai lati del soggiorno si trovavano due stanze, quella a destra ospitava la sala da pranzo e quella alla sinistra un giardino d'inverno. Gli appartamenti, costituiti da camere da letto e spogliatoi, si trovavano alle estremità dell'edificio. L'insieme degli interni del palazzo comprende anche le sale del seminterrato, che venivano utilizzate per le riunioni sociali in estate (decorazione pittorica 1776 - Antonio Tavelli). Oggi il seminterrato ospita il Ristorante del Palazzo.
Nel 1794, il nipote di Michał, il principe Józef Poniatowski, generale polacco, comandante dell'esercito della corona della Repubblica di Polonia, comandante in capo dell'esercito del Ducato di Varsavia, divenne erede di Jabłonna, che visitò spesso questo luogo nel 1798-1806. Il suo appartamento personale si trovava al piano terra dell'annesso destro.
Dopo la tragica morte del principe Giuseppe nella battaglia di Lipsia del 1813, Jabłonna fu affidata a vita alla sorella Teresa Tyszkiewicz.
Nel 1822, l'immobile divenne proprietà di Anna di Tyszkiewicz 1°voto Potocka 2°voto Dunin-Wąsowiczowa. Anna, collezionista e disegnatrice di talento, si impegnò subito a trasformare la proprietà, volendo farne un monumento commemorativo del principe Giuseppe.
Ha emesso un arco di trionfo con l'iscrizione "A Poniatowski", ha raccolto ricordi di lui e, col tempo, ha emesso una targa nella parete settentrionale con l'iscrizione " Ritiro dell'eroe decorato con cura senza disturbare i ricordi che consegno ai miei discendenti 1837/A.D.W.". I monumenti e i souvenir dedicati agli eroi nazionali e che esprimono sentimenti patriottici erano una caratteristica particolare dei parchi paesaggistici polacchi dell'epoca.
Nel 1827, all'ingresso del parco fu costruita una porta con due colonne di granito provenienti dal castello teutonico di Malbork. Al cancello furono costruite delle case per i portieri. Le case recano il saluto latino SALVE.
Nel 1837 il palazzo fu ricostruito secondo il progetto dell'architetto Henryk Marconi. Su entrambi i lati della parte centrale del palazzo furono aggiunte altre stanze: a destra uno spogliatoio e una camera da letto, a sinistra un armadio e una stanza d'angolo. La parte centrale della facciata fu segmentata con lesene ioniche, nelle ali laterali furono realizzate nicchie con sculture decorative e a lato del parco furono costruite verande in ferro. All'interno, solo il soggiorno non è stato modificato. La sala del conservatorio fu ricostruita in stile moresco. La camera da letto e lo spogliatoio sulla destra furono uniti in una grande sala biblioteca. All'esterno, al palazzo a nord fu aggiunto un pergolato a colonne e fu installato un lapidario.
Tra i frammenti scultorei superstiti vi sono un medaglione romano con il busto dell'imperatore Nerva, il primo dei cosiddetti cinque imperatori buoni e un rilievo raffigurante il busto di un uomo barbuto, realizzato nel XVI secolo da Baccio Bandinelli, amico di Leonardo da Vinci.
Sotto Anna Dunin-Wąsowicz, anche il parco fu trasformato: gli alberi furono sostituiti da grandi aiuole e nel cortile davanti al palazzo furono piantati alberi e arbusti.
Furono costruiti anche nuovi edifici agricoli e grandi stalle con rimesse per le carrozze, su progetto di Henryk Marconi.
Nel 1944 il palazzo fu incendiato dalle truppe tedesche.
Jabłonna rimase nelle mani della famiglia Potocki fino al 1945.
Il palazzo, distrutto durante lo sforzo bellico e i saccheggi del dopoguerra, passò in proprietà al Tesoro di Stato nel 1946.
Il Palazzo fu ricostruito secondo il progetto di Mieczysław Kuźma, mentre il parco fu ricostruito secondo il progetto di Gerard Ciołek. Durante la ricostruzione del Palazzo, la parte centrale fu riportata allo stato di fine Settecento, mentre le parti laterali furono aggiunte riportandole alla prima metà dell'Ottocento, modificandone i prospetti. La decorazione in ghisa della Sala Moresca fu rimossa, restituendo ad essa e agli altri interni il carattere classico. L'arredamento interno fu completato dopo il 1945 e le sale di rappresentanza furono decorate con mobili e dipinti della fine del XVIII secolo e della prima metà del XIX secolo.
Nel 1953, il palazzo e il suo parco furono ceduti all'Accademia Polacca delle Scienze, che vi creò un centro per conferenze e per il tempo libero: la Casa dei Congressi e delle Conferenze.