Donnez moi des idées s'il vous plaît

Bonjour,
Je veut implémenter un analyseur lexical pour un langage que j'ai défini , le problème est que je ne sais pas comment extraire mot par mot de mon rich text box pour tester ( si mot clé , identifiant, chiffre ) donc en gros , j'ai testé lettre par lettre,le tout vc des if else, while.. Bref la galère et mon Pc plante quand je lance le test . Meri d'avance!