In de vierde Rayman-game van de hoofdserie vallen Rabbids de aarde binnen en sluiten Rayman op in een gevangenis in een colosseum. Hij wordt gedwongen om deel te nemen aan meer dan 75 minigames, trials genaamd. Rayman mag koeien gooien, koeien melken, Rabbids laten dansen – zelfs met wrattenzwijnen en arenden racen… allemaal voor het vermaak van de Rabbids. Na het winnen van games verdient Rayman plungers die gebruikt kunnen worden om een ladder te bouwen om te ontsnappen uit de gevangeniscel. Na het voltooien van drie trials in het colosseum, moet een boss game voltooid worden; zoals een on-rails first person shooter of een racegame.
Tijdens de Story Mode ontgrendelt de speler speciale minigames die vervolgens gespeeld kunnen worden in Score Mode om nieuwe content te ontgrendelen (zoals muziek, garderobes en uitdagingen) en scores te verbeteren. Het behalen van een high score in Score Mode genereert ook een wachtwoord waarmee spelers hun high score kunnen indienen bij een online ranking systeem via de home page van Ubisoft. Het spel kan gespeeld worden in de singleplayer-modus en multiplayer-modus (voor maximaal vier personen in competitieve of coöperatieve gameplay).