Assessor ist eine Person, die im Auftrag der Entwickler der Suchmaschine bewertet, inwieweit das gefundene Dokument mit der Suchanfrage übereinstimmt. Assessoren sind meist nicht beruflich mit Information Retrieval vertraut. Ihre Qualifikation nähert sich dem Wissen durchschnittlicher Internetnutzer an. Einer der ersten Arbeitsgutachter begann 2003 mit Google. Yandex-Assessoren erschienen 2006.
Gutachter-Workflow
Zunächst findet eine automatische Suche statt, und die Suchmaschine bildet eine vom Roboter berechnete Reihenfolge von Seiten nach ihrer Relevanz. Dann wertet der Assessor, der sich in diesem Moment überall auf der Welt befinden kann, mit einem speziellen Programm und gewöhnlicher Logik das Ergebnis aus. Die Bewertungsskala wird von jeder Suchmaschine eigenständig entwickelt. Es enthält normalerweise sechs oder mehr Elemente. Die Arbeit der Gutachter unterscheidet sich durch einen Fehler von etwa 5 %.
Der Gutachter sendet das Ergebnis seiner Tätigkeit an die Zentrale der Suchmaschine, wo auf Basis der gemeinsamen Analyse der Daten des Suchroboters und der Angaben des Gutachters die endgültige Bewertung des Dokuments errechnet wird. Das Ergebnis, welchesDabei hilft dem Gutachter eine deutliche Steigerung der Objektivität der Bewertung von Dokumenten, der Ausschluss von Ressourcen, die aufgrund formaler Merkmale fälschlicherweise in die Bewertungsliste aufgenommen wurden, von der Bewertung.
Alle Suchmaschinen haben ihren eigenen Gutachterstab, der ständig rotiert. Der am besten geeignete Prüfer ist ein Benutzer mit durchschnittlichen Internetkenntnissen. Der Zweck seiner Arbeit besteht darin, die Funktionsweise von Suchmaschinen zu verbessern, damit sie die Fragen der Benutzer so genau wie möglich beantworten.
Assessoren, die Suchergebnisse auswerten, führen Aufgaben aus. Ihr Inh alt ist ein Schlüsselwort, ein Link und Anweisungen zur Bewertung der Entsprechung eines Links zu einem bestimmten Wort. Das vorgegebene Wort gemäß der Anweisung, an die sich der Assessor h alten muss, ist eine Handlung der Form „go“, „do“oder „learn“.
Der Assessor muss entscheiden, ob das Schlüsselwort einer bestimmten Aktion des Benutzers (Einkauf tätigen, einen Film ansehen, Musik hören) oder einigen ihn interessierenden Daten entspricht.
Arten von Prüfernoten in Yandex
Yandex-Assessoren vergeben durchgehend zwei Arten von Noten:
1. Vorläufige Schätzung. Ob sich dieses Dokument auf Pornografie bezieht und keinen Schadcode enthält. Wenn die Antwort „Ja“ist, wird die Bewertung des Dokuments beendet.
2. Relevanzbewertung (Compliance). Diese Bewertung ist nicht quantitativ. Der Gutachter gibt seine Bewertung ab, indem er das Dokument einer beliebigen Kategorie zuordnet:
- "Vital"– ob es sich um eine offizielle Seite oder eine offizielle Antwort auf eine Frage handelt.
- "Nützlich" - ein Dokument, das Daten enthält, die genau der Suchanfrage entsprechen.
- "Relevant+" - ein Dokument, das der Suchanfrage entspricht.
- "Relevant-" - ein Dokument, das nicht exakt der Suchanfrage entspricht.
- "Irrelevant" - ein Dokument, das nicht der Suchanfrage entspricht.
- "Spam" - ein Dokument mit Anzeichen von schwarzer Optimierung (versucht, die Suchmaschine zu täuschen).
- „Nicht darüber“ist eine Kategorie, die entwickelt wurde, um Konzepte zu trennen, die für einen Roboter ähnlich, aber für eine Person grundlegend unterschiedlich sind. Bei der Suchanfrage "Leo Tolstoy" sollte die Suchmaschine also keine Dokumente über dicke Menschen und Tiere als Ergebnis zurückgeben.
Bedeutung der Gutachternoten
Die Arbeit der Gutachter hilft dabei, den Grad der Suchgenauigkeit zu beurteilen und den Suchroboter zu trainieren. Assessoren haben keinen Einfluss darauf, welche Positionen ein bestimmter Standort einnimmt.
Bewerter von Standorten lassen sich bei ihrer Arbeit von klaren Anweisungen leiten. Es ist ein recht umfangreiches und komplexes Dokument geworden und wird ständig mit neuen Anforderungen aktualisiert.
