Von den 164.000 nach Australien deportierten englischen Gefangenen, landeten etwa 66.000 auf Tasmanien, 12.000 davon waren zwischen 1830 und 1877 in Port Arthur inhaftiert. Die Häftlinge produzierten alle notwendigen Güter für den Betrieb der Anlage selbst und versorgten die Siedler um Hobart mit Gebrauchswaren und Baumaterial. Der Anstaltsfriedhof auf der vorgelagerten "Isle of the Dead" ist per Fähre erreichbar.