Дворцовое здание в стиле неоренессанс было возведено в 1883 году по проекту Дьюлы Паргоша и Эдёна Лехнера. По замыслу архитекторов дворец должен был хорошо сочетаться с находящимся неподалеку Государственным оперным театром.

Изначально в здании размещался Пенсионный фонд венгерских железнодорожников, впоследствии сюда переехала школа бальных танцев, а в наши дни во дворце действует престижный отель.

Название зданию дало кафе «Дрехслер», которое находилось на первом этаже дворца в конце XIX — начале XX в.