Html menu ligne horizontale

Bonjour,

voici mon souci, je suis actuellement en pleine création de site web et j'aimerai y intégrer un menu horizontal avec des lien et la couleur qui change quand on passe dessu (le hover)
Pour vous montrer le genre de menu dont je parle remonter un peut dans la fenetre et regardez la barre de ce site (Accueil | Forum | Astuce ...)

Mon probleme est que je ne sais pas par ou commencer, est ce des liens ? des boutons ? si ce sont des liens quelqu'un pourrait il m'orienter pour le CSS avec les "li" et les "ul" et pour le html également

merci d'avances messieurs, dames