В 1854 году в этом месте располагался научный институт, известный как "Королевский паноптикум науки и искусства". По-видимому, в те времена наука казалась слишком скучным занятием, так как два года спустя данное заведение разорилось. Его здание было приобретено неким Э. Т. Смитом, владельцем известного цирка. Он разместил внутри манеж, и на короткое время бывший паноптикум стал "Дворцом Альгамбра". В 1860-м Смит сменил тактику, поставив на месте манежа сцену и переименовав место в мюзик-холл "Дворец Альгамбра".
Альгамбра стал одним из первых театров-варьете в Лондоне, способных соперничать с классическими драматическими театрами. В таких заведениях не показывали обычные пьесы - представления в них состояли из нескольких непохожих друг на друга актов, во время которых артисты пели, танцевали и показывали магические трюки. Одно представление могло состоять из целых двадцати актов и длиться до четырех часов. О, да, такие вечера наверняка были ЛУЧШИМИ! Артисты варьете за один вечер могли выступить в нескольких театрах - едва закончив свой номер, они садились в карету и гнали во весь опор в следующее заведение.
Здание Альгамбры было построено Т. Хейтером Льюисом. При его проектировании он вдохновлялся индо-исламской архитектурой Британской Индии, внеся в конструкцию ее характерные элементы, такие как парные минареты, коническая крыша и круглый зал с большим куполом.