Eine Suchmaschine ist eine webbasierte Software, die dazu dient, das Internet nach Verlinkungen und Informationen zu durchsuchen. Hier liegt ein Algorithmus zu Grunde, der nach bestimmten Metriken das Netz durchsucht und Content indexiert. Auf Grundlage der Suchmaschinen erhalten Nutzer relevante und individualisierte SERPs auf Basis der eingegebenen Suchanfragen. Im Bereich der Suchmaschinenoptimierung (SEO) und Webtechnologie ist eine Suchmaschine eine zentrale Plattform, die den Zugang zu Webinhalten erleichtert. Hier geht es darum, die eigene Sichtbarkeit signifikant zu erhöhen, um gefunden zu werden.
Suchmaschinenanbieter platzieren (ranken) Suchergebnisse nach 2 Hauptmerkmalen: bezahlte Suchergebnisse (SEA) und organische Suchergebnisse (SEO). Um die beste SEA Platzierung zu erhalten, müssen Websitebetreiber das höchste Gebot für eine Anzeige bezahlen. SEO Rankings werden durch eine Vielzahl von Qualitäts- und Rankingfaktoren – onpage und offpage - erzeugt.
Grundsätzlich gibt es Suchmaschinen mit eigenem Index, Meta Suchmaschinen und Proxy Suchmaschinen.
Eine Suchmaschine mit eigenem Index sammelt alle verfügbaren Informationen auf einem eigenen Datenbestand (Index). User können Anfragen stellen, woraufhin die Suchmaschine ihren Index durchsucht und relevante Ergebnisse liefert. Sie nutzt komplexe Algorithmen, um Webinhalte zu indizieren, zu kategorisieren und Nutzern effizient zugänglich zu machen.
Der Indexierungsprozess bei Suchmaschinen mit eigenem Index umfasst mehrere Schritte:
Crawling Queue: Suchmaschinen verwenden Crawler oder Bots, die das Web durchsuchen, um neue und aktualisierte Inhalte zu finden. Diese Bots folgen Links von einer Seite zur nächsten und sammeln Daten. Alle Daten werden vor der Verarbeitung in einer Crawling Queue hinterlegt.
Crawling: Die gefundenen Webseiten werden analysiert. Dabei wird der Inhalt (Text, Bilder, Videos usw.) extrahiert und strukturiert. In diesem Arbeitsschritt werden URLs kopiert, wenn die Meta Robots Tags und die Robots.txt Datei dies zulassen.
Suchmaschinen crawlen übrigens nicht nach einer festgelegten Reihenfolge der URLs. Die Kriterien, warum beispielsweise die Suchmaschine Google URLs crawlt hängt von folgenden Faktoren ab:
Im Schritt der Indexierung in der Suchmaschine werden die Daten aller gecrawlten Seiten in eine Datenbank (Suchindex) angelegt. Vergleichbar ist dies mit einer digitalen Bibliothek. Hier werden alle Inhalte nach Keywords, Qualitätsmerkmalen und User Signals „archiviert“
Ob URLs und Inhalte von der Suchmaschine indexiert wurden, kann in der Google Search Console oder den Bing Webmaster Tools überprüft werden. Alternativ hat sich auch die Site:Abfrage bewährt.
Suchmaschinen mit eigenem Index aktualisieren regelmäßig ihre Datenstruktur, um Usern die neuesten Informationen auszuspielen. Websites mit Zeitgeistthemen oder sich schnell ändernden Fakten sollten deshalb besonders stark auf die Optimierung und Aktualisierung der Website achten.
Im Gegensatz zu Suchmaschinen mit eigenem Index, fungieren Proxy-Suchmaschinen als Mittler zwischen User und anderen Suchdienstanbietern. Sie leiten Suchanfragen über die Browser an eine primäre Suchmaschine weiter und präsentieren die Ergebnisse zurück an den User. Es ist dabei möglich, dass die Proxy Suchmaschinen die Privatsphäre von Usern stärker schützen, indem sie Nutzerdaten anonymisieren und Suchanfragen verschleiern. Sie bieten eine zusätzliche Schicht der Datensicherheit, indem sie die direkte Interaktion des Nutzers mit der primären Suchmaschine vermeiden.
Startpage: Nutzt den Index von Google. USP: Bietet starke Datenschutzfunktionen, indem es Nutzeranfragen anonymisiert und ohne Tracking an Google weiterleitet.
DuckDuckGo: Verwendet verschiedene Quellen, darunter Bing, Yandex und eigene Crawler. USP: Schwerpunkt auf Datenschutz, speichert keine Nutzerdaten und bietet eine neutrale Sucherfahrung ohne personalisierte Ergebnisse.
Searx: Aggregiert Ergebnisse von über 70 Suchmaschinen, inklusive Google, Bing und Yahoo. USP: Open-Source und hochgradig anpassbar, ermöglicht es Nutzern, ihre Datenschutzeinstellungen und Suchquellen individuell zu konfigurieren.
Meta-Suchmaschinen senden Suchanfragen an mehrere andere Suchmaschinen gleichzeitig und aggregieren die Ergebnisse. Ihr USP liegt in der breiten Abdeckung und Vielfalt der Suchergebnisse, da sie Daten aus verschiedenen Quellen zusammenführen. Sie bieten eine umfassendere Suche und sparen Zeit, indem sie Nutzern ermöglichen, mehrere Suchmaschinen mit einer einzigen Anfrage zu durchsuchen.
Dogpile: Kombiniert Ergebnisse von Google, Yahoo, Bing und anderen, bietet so eine breite Auswahl an Informationen.
Metacrawler: Sammelt Ergebnisse von Suchmaschinen wie Google, Yahoo und Bing, filtert Duplikate heraus und präsentiert eine kuratierte Liste.
Ixquick: Aggregiert Ergebnisse von mehreren Suchmaschinen und legt dabei einen Fokus auf Datenschutz und Anonymität der Nutzer.
Für die Suchmaschinenoptimierung (SEO) sind Suchmaschinen von essentieller Bedeutung. Denn nur dadurch und auch heute sind sie der Schlüssel zur Auffindbarkeit von Webseiten. Historisch gesehen entwickelten sich Suchmaschinen wie Yahoo! und Altavista, aber die heutige Landschaft wird von Unternehmen wie Google, Bing, Yandex, Seznam, Baidu, Ecosia, Youtube und anderen - je nach Region - dominiert.
Die Veränderungen in den Algorithmen dieser Suchmaschinen haben die SEO-Landschaft stark beeinflusst. Früher basierte die Platzierung auf einem bestimmten Keyword und Meta-Tags. Heute werden Faktoren wie User Experience, Content Qualität, Ladezeiten und mobile Optimierung berücksichtigt. Das sind nur wenige SEO Faktoren, die das Ranking von Websites beeinflussen.
Diese Optimierungsmaßnahmen verbessern Websites für die Suchmaschinen:
Um Suchmaschinen wie Google, Bing, Yandex, Seznam, Baidu und Ecosia, aber auch eine Videoplattform wie Youtube effektiv zu nutzen, sollten Website-Betreiber einige bewährte Praktiken beachten: