Nazwa Koloseum została nadana we wczesnym średniowieczu od znajdującego się w pobliżu budowli ogromnego (gr. „kolossos”) posągu Nerona przedstawionego jako Apollo. W 445 zostało poważnie uszkodzone przez trzęsienie ziemi. W 528 odbyły się tu ostatnie igrzyska.