Importation / Gestion de GROS fichier CSV

Bonjour,

Je dispose de 7 gros fichiers CSV allant de 1.2 Go à 35 Go
Dans chaque fichier CSV, je souhaiterais récupérer seulement les informations dont j'ai besoin.

Actuellement je me suis fait un script qui me permet de traiter 25000 lignes / jour, j'ai tout simplement split un des fichiers, mais c'est beaucoup trop long comme méthode.


J'ai essayé d'importer mon fichier CSV brutalement dans une BDD mysql en boostant au maximum des performances, mais ça ne passe pas. Et j'ai retenté l'opération avec des fichiers de 50 Mo ( split ), rien n'a faire, que ce soit en local ou sur mon dédié, il ne veut pas traité les informations ( à titre informatif, j'ai bien remplie avec les bonnes valeurs les prérequis )


J'ai du coups plusieurs questions:

Existe t'il un logiciel qui me permettrait de visualiser le fichier, et de par exemple supprimer les colonne que je n'ai pas besoin ( en vue de minimiser la taille du fichier final ) ?

Avez vous une idée pour importer mes fichiers CSV vers une base de donnée en vue de les modifier ?

Ou tout autres idées pour que je puisse traiter mes fichiers ?

En vous remerciant.
Si vous avez des questions, n'hésitez pas :)

Au plaisir.