Optimisation d'un code d'insertion de ligne dans SQL

Bonjour,



Je prépare une petit moteur de recherche dédié et j'ai besoin pour ça de charger des urls dans ma base de donnée, pour ce faire je scan des sitemap et récupère les url contenues dans les balise loc, voilà mon code d'insertion :

$dom = new DOMDocument ();
      $dom->loadXML("le-sitemap.xml");

      $urls = $dom->getElementsByTagName("loc");

      foreach ($urls as $key)
      {
        $url = $key->nodeValue;
        global $bd;
        $sql = 'SELECT id from urls-du-site WHERE url = "'.$url.'"';
        $req = $bd->prepare($sql);
        $req->execute();
        $result = $req->fetch();

        if ($result === FALSE )
        {
          $sql = 'INSERT INTO urls-du-site (url) VALUES ("'.$url.'")';
          $req = $bd->prepare($sql);
          $req->execute();
          echo "ajout de: ".$url."<br>";
        }
        else {
          echo "url déjà ajoutée: ".$url."<br>";
        }

le soucis c'est qu'en laissant mon script tourner toute la nuit il n'a récupéré "que" 280k urls,

je pense que le soucis vien de:

 $sql = 'SELECT id from urls-du-site WHERE url = "'.$url.'"';

plus il y a d'entrées plus sql met de temps a effectuer cette requête je suppose.

Comment pourrais-je optimiser ce code de sorte de charger ces sitemap en bloc ?

Merci de vos conseils.