Problème FPS démarrage PC à froid

Bonjour,
Après avoir épuisé toutes mes idées et les solutions vu sur internet je me tourne vers vous..
Mon problème est simple, lors du premier démarrage après un certain moment sans utiliser mon PC, mes FPS bloquent aux alentours des 80/100 FPS sur n'importe quel jeu.
Je dois donc le redémarrer une seconde fois afin de pouvoir atteindre les 140/180 FPS selon les jeux, et cela me pose des problèmes de saccades si je ne le fais pas.

J'ai essayé quelques solutions de base que j'ai pu voir, désactiver le démarrage rapide, allumer l'écran après le PC, supprimer le logiciel Radeon Software et n'installer que les pilotes, réinstaller complètement Windows et tous les pilotes et j'en passe..

Ma config :

Carte Mère : ASUS Intel Z390 PRIME - ATX - LGA1151
Carte Graphique : Sapphire Pulse Radeon RX 5600 XT BE 6G GDDR6 DUAL
Processeur : Intel Core i5-9600K - 6coeurs - 3.7/4.6 GHz
RAM : PNY XLR8 2x8 Go - DDR4 - 3200MHz
SSD : Samsung 980 NVMe M.2 500Go
HDD : 2 x Seagate Barracuda ST2000DM008 7200tr/min 2To
Alimentation : Antec VP600P 600W