תוכנן על ידי מי שהיה נחשב לגאון ארכיטקטורת הבארוק קיליאן איגנץ דינצהופר, והוקם בשנת 1765 על ידי אנסלמו לוראגו. קומתו השנייה של הארמון שימשה בעבר, כגימנסיה הגרמנית, וקומתו התחתונה שימשה כחנות סיטונאית של אביו של פרנץ קפקא, הרמן קפקא. בשנת 1948 הכריז ממרפסת הארמון קלמנט גוטוולד על תחילתו של המשטר הקומוניסטי. כיום משמש הארמון כאחד מאתרי הגלריה הלאומית ומציג תערוכה המתמקדת באמנות עתיקה מאזור אסיה והמזרח התיכון.