Нет, не "страдание фигнёй". Но фигуры в духе вышеупомянутых Гелиогабалов с Калигулами - это и не симптомы болезни/системного кризиса Империи, это просто личности больные и/или с тараканами, масштабы которых были несовместимы с качественным управлением государством. Подобных примеров, если покопать, можно с лихвой найти в любых точках мира, в любые эпохи и при любых режимах.
С падением, на самом деле, всё просто. Она стало неизбежным (пусть и не в сиюминутной перспективе) тогда, когда Империя перестала вести успешные завоевательные войны. Скажем, не будь Тевтобургского леса и закрепись РИ за Рейном, это, скорее всего, отсрочило бы её кризис и падение на пару веков, но принципиально ничего не изменило бы. Необъятного не объять, любая империя достигает пика своего развития, за которым, раньше или позже, неизменно следует стадиальный спад. Отсюда растут корни и у вышеупомянутого кризиса рабовладельческого строя, и падение престижа императорской власти вместе со степенью её сакральности, и
вынужденное изменение отношения к варварам (впрочем, равно как и варваров к РИ), и идеологический/религиозный/экономический кризис в обществе. РИ была не первым примером и не последним.