Het gebouw werd gebouwd in opdracht van de Belfast Charitable Society en werd als armenhuis gebruikt tot het einde van de jaren tachtig van de negentiende eeuw. Met de statige uitstraling en rustige sfeer was dit gebouw zonder twijfel een veel luxere accommodatie dan de arme bewoners gewend waren. Het is echter belangrijk te bedenken dat het gebouw verschillende renovaties heeft ondergaan sinds het begin.
Toen het gebouw dienstdeed als armenhuis, bood het onderdak en water aan de armste bewoners van Belfast. De kinderen die hier woonden, leerden vaardigheden zoals spinnen en weven, welke industrieën steeds meer de overhand kregen in de stad. Twee van de oprichters van het Clifton House waren redacteur bij de krant. Zij verbreidden het goede werk dat werd gedaan in het huis. Helaas werd de neef van een van de redacteurs, Henry Joy McCracken, opgehangen voor zijn rol in de Ierse opstand van 1798. Hij werd begraven in de Clifton Street Graveyard. Het gevolg hiervan was dat het leger dat in de barakken naast het armenhuis verbleef erop stond dat het gebouw werd ontruimd, vanwege de associatie met de problemen.
Tegenwoordig is het Clifton House deels een woonhuis en deels een conferentiecentrum waar het hele jaar door verschillende evenementen worden georganiseerd. Het Interpretive Centre bevindt zich onder de opvallende witte spits die bovenop het gebouw staat.
Het Clifton House staat in het hart van de stad op Clifton Street, vlak bij de A12. Deze bezienswaardigheid mag je zeker niet overslaan tijdens een bezoek aan de stad. Zoek op de website van Expedia naar een hotel en een vlucht en plan je vakantie naar deze bijzondere plek.