1603年、ルドルフⅡ世（1552-1612）は、この土地をオーストリア帝国軍付きの秘書だったハインリッヒ・ニカールに与えました。1707年、この場所には、ヨーゼフⅠ世によって、今日のオークション会場、ドロテウムの前身となった質屋と競売所が設立されました。1720年～1730年にかけて、この建物は、ヨハン・ルーカス・ヒルデブラントらの建築家によって改築されました。

1805年にカール大公が手に入れたこの建物は、1801年から1804年にかけてルイス・ヨーゼフ・モントイヤーによって宮殿として改築されました。1817年に、のちに高名な司令官となる、息子のアルブレヒトがここで生まれました。 

1841年から1847年の間、作曲家であり、ウィーンフィルハーモニーの創設者であるオットー・ニコライがこの宮殿に住んでいました。

1838年からニコライが亡くなる1856年まで、19世紀のオーストリアで重要な銀行家、起業家であるシモン・ゲオルグ・フライヘアー・フォン・シーナ（1783～1856）がこの建物の所有者でした。

1872年には、ザイラーシュテッテを臨むバロック風の 外観 と、格子のバルコニーが増築され、1965年には、この宮殿は国際文化センターと学生寮に改築されるとともに、さらに小劇場が加わりました。最後の改修が2000年に行われ、この建物は「音楽の家（ハウス・デア・ムジーク）」として、音響博物館の本館となりました。