Regex htaccess

Bonjour,

Je développe actuellement un site perso.
En local, j'utilise WampServer sur lequel Apache est en version 2.4
Mes réécritures d'url (url rewriting) fonctionnent correctement.
Cependant, la version Apache de mon hébergeur (ovh mutualisé) est la 2.2 et mes réécritures d'url ne marchent plus une fois que je mets à jour le site.

Par exemple :
/dossier/fichier.html
devrait donner :
/index.php/dossier/fichier.php

RewriteRule ^(dossier/)?([a-zA-Z-]*)\.html index.php/$1$2.php [L]

J'ai également tenté un simple :

RewriteRule ^dossier/fichier.html index.php/dossier/fichier.php [L]

Je vous mets également les paramètres au début du .htaccess

RewriteBase /
Options +FollowSymlinks
RewriteEngine On

Je vous remercie pour vos réponses.