Alleen de grote algemene zoekmachines maken een index van het hele world wide web. Dat zijn Google, Bing, Yandex en Baidu. Zoekmachines als Ecosia, DuckDuckGo en Qwant draaien op de indexen van Bing en Google, soms met wat aanvullingen.

<aside> 📌

Een zoekmachine zoekt in zijn index en niet live op het web. Daarom kan een zoekopdracht ook zo snel gaan!

</aside>

| 4

Een zoekindex is bedoeld voor het vinden van losse pagina’s en bronnen. Maar ook de crawlers voor de LLM’s van de grote AI-Chatbots maken een index van grote delen van het web. Een chatbot-index is bedoeld voor het geven (genereren) van snelle antwoorden, vanuit alle trainingsdata (teksten, boeken en artikelen) die de chatbot ooit ‘geleerd’ heeft.

In RAG worden zoekindex en chatbot-index gecombineerd. Google AI-mode is hier een voorbeeld van. Het blijft belangrijk om via de links naar bronnen zelf de inhoud van wat een chatbot zegt te controleren. Net zoals in een zoekmachine het beste antwoord lang niet altijd bovenaan staat!