Google 検索評価ガイドラインについて

Google 検索評価ガイドラインについて

GoogleがPDFのみで開示している検索評価ガイドライン「Search Quality Evaluator Guidelines」についてChat GPT-4を用いて要約いたしました。
本来はここで紹介する以上の情報がPDFにはあります。
さらにGoogleの検索評価ガイドラインを知りたい方は「Search Quality Evaluator Guidelines」をダウンロードして読み込んでください。(英文)

Google 検索評価ガイドライン

Google 検索評価ガイドラインでは、ウェブページや検索結果の品質評価に関するガイドラインをPDFで提供しています。
主な内容は、ページ品質(Page Quality, PQ)とユーザーのニーズに合った評価(Needs Met, NM)の評価基準について。

ページ品質評価とは

ウェブページの品質の概要は、その主要コンテンツ(MC)の質、ウェブサイトの評判、コンテンツ作成者の専門性や権威性(E-E-A-T)に基づいて評価されます。
ページがユーザーの期待を満たすかどうか、ユーザーにとって有益かどうかが評価の基準となります。

評価基準を適用するための具体的な例やケーススタディの一部を要約すると次のようになります。

PDF P61 7.1 High Quality Main Content 参照

高品質のメインコンテンツ(MC)

高い努力のレベル
ウェブサイトやコンテンツ作成者は、ページの目的を達成するために精力的に取り組んでいます。
コンテンツは整理され、編集され、目的をサポートするためにキュレーションされています。

例えば、正確さと深みを持つニュース記事、多くの参加者による意味のある議論が含まれるQ&Aページ、明確で役立つ手順を含む整理されたクラフトチュートリアルページなどがあります。

高いオリジナリティ:

MCはウェブサイトやコンテンツ作成者に固有のもので、オリジナルの写真や動画、作成者の直接的な生活経験に基づいた個人的な視点などが含まれます。

高い才能やスキル

MCは作成者の才能を示し、例えば才能のあるコンテンツ作成者によるダンスのビデオや、熟練した配管工による配管に関するハウツー記事などがあります。

低品質のメインコンテンツ(MC)

低い努力のレベル
ウェブサイトやコンテンツ作成者による努力の欠如が見られます。
例えば、目的を達成するのに役立つコンテンツが邪魔な内容や埋め草コンテンツと混在している、議論やコメントが少ないフォーラムの投稿、目的のための説明に努力が見られないクラフトチュートリアルページなどがあります。

低いオリジナリティ
情報は他のソースからの要約であり、付加価値が少ないものが含まれます。また、写真や動画が他のソースからのものである、他の人による商品レビューの要約などがあります。

低い才能やスキル:
適切な才能やスキルの欠如により、ページは目的を達成できていません。例えば、適切なスキルを持たない人による配管に関するハウツー記事などがあります​​。

ユーザーのニーズに合った評価とは

検索結果がユーザーのニーズにどの程度合致しているかを評価します。
この評価は、ユーザーがどのような情報を求めているか、提供された結果がその情報ニーズをどれだけ満たしているかに基づきます。

検索結果にあるクエリに対する評価方法として具体的な要約として次のことが書かれています。

Why do people search the Internet?

検索の目的
人々はインターネット検索エンジンを使用して、さまざまなタスクを異なる環境で実行します。
例えば、映画の監督を見つける簡単なタスクから、映画の上映時間を調べてチケットを購入し、劇場への道順を得る複雑なタスクまで様々です​​。

クエリの理解
クエリの理解はタスク評価の第一歩です。
クエリはユーザーがデバイスに入力または発言するものであり、ユーザーの意図を理解することが重要です​​。

複数の意味を持つクエリ:
多くのクエリには複数の意味があります。
例えば、[apple]というクエリはコンピューターブランドや果物などを指す可能性があります。クエリの解釈には、主要な解釈、一般的な解釈、あまり一般的でない解釈などがあります​​。

「知る(Know)」クエリ
「知る」クエリは、特定の事実や図表などの非常に具体的な回答を求めるものです。一般的な回答が可能で、短い文や簡単なリストで表現できるものが含まれます​​。

「行う(Do)」クエリ
「行う」クエリは、目標を達成するか活動に従事することを意図しています。ダウンロード、購入、取得、エンターテイメント、ウェブサイトやアプリとのやり取りなどが含まれます​​。

「ウェブサイト(Website)」クエリ
「ウェブサイト」クエリは、特定のウェブサイトやウェブページを見つけることを目的としています。これには正確なURLクエリや不完全なURLクエリが含まれます​​。

「訪問(Visit-in-Person)」クエリ
「訪問」クエリは、近くのコーヒーショップ、ガソリンスタンド、ATM、レストランなどを検索する際に使われます。一部のクエリは近くの情報や結果を「求めている」と明示的に示します​​。

複数のユーザー意図を持つクエリ
多くのクエリは複数の可能性のあるユーザー意図を持ちます。例えば、「ハーバード大学」や「ウォルマート」に関するクエリは、オフィシャルホームページを訪れる、個人訪問する、または関連する情報を知りたいというさまざまな意図があり得ます​​。


これらの異なるクエリタイプへの理解は、検索結果の評価において重要であり、検索者の意図やニーズに合った結果を提供することが目的となっています。

Search Quality Evaluator Guidelines 参照項目

  1. “Why do people search the Internet?”​​:P83
  2. “Understanding the Query”​​:P84
  3. “Queries with Multiple Meanings”​​:P87
  4. “The intent of a Know query”​​:P90
  5. “Do Queries”​​:P91
  6. “The intent of a Website query”​​:P92
  7. “People use search engines to look for Visit-in-Person information”​​:P93
  8. “Many queries have more than one likely user intent”​:P95

また、言語や地域によるニーズの違いに対応する方法についても書かれています。

地域特有のニーズに合わせた評価
評価者は、自身の地域のユーザーにとって結果がどれだけ有用かを反映させた評価を行うべきです。クエリがその地域の言語である場合、ユーザーはその言語の結果を求めていると仮定します。ただし、地域のほとんどのユーザーが英語を読めない場合は、クエリが特に英語の結果を求めていない限り、英語の結果は無用とみなすべきです。

言語の混在するクエリの評価
クエリに英語の名前や単語が含まれている場合、または英語の結果が特定のクエリに対して満足できるか不明確な場合、評価は難しくなります。この場合、地域に関する知識と判断力を用いて適切な評価を行う必要があります。

地域固有の考慮事項
各地域には、公用語、地域言語、方言などの言語の数や種類、筆記体系、一般的に使用されているキーボード入力言語に関して独自の考慮事項があります。これらのガイドラインに特定の地域の例が含まれていない場合でも、評価者はそのタスクの地域や文化を代表し、クエリを解釈し結果を評価することが重要です。疑問がある場合は、クエリが明示的に指示していない限り、ユーザーはタスクの言語で結果を好むと仮定してください​​。

このガイドラインは、言語や地域に応じたユーザーのニーズと期待を理解し、それに適切に対応する方法を提供しています。

参考:23.0 Rating English Language Results in Non-English Locales

補足「評価者」とは
検索エンジンの結果の品質を評価するために雇用された専門家や専門チームを指します。
これらの評価者は、提供されたガイドラインに従って、ウェブページや検索結果の関連性、有用性、信頼性などを評価し、その品質を判断します。

彼らの役割は、検索エンジンがより正確で有益な結果を提供するための改善点を見つけることにあります。評価者は通常、様々な言語や地域に関する専門知識を持ち、検索結果の品質を公正かつ効果的に評価するための訓練を受けています。

補足:E-E-A-Tはどこに説明があるの?

P26の3.4 Experience, Expertise, Authoritativeness, and Trust (E-E-A-T)に説明があります。

このGoogle 検索評価ガイドラインについて

この記事は、Googleが提供する「Search Quality Evaluator Guidelines」の要点を要約しました。
主に取り上げた部分は、主要コンテンツ(MC)の質、ウェブサイトの評判、コンテンツ作成者の専門性や権威性(E-E-A-T)を評価基準とし、ユーザーのニーズに合ったページ品質の評価方法を提供。
検索結果がユーザーの期待にどれだけ応えているかを判断するための具体的なケーススタディ。言語や地域に応じたニーズの理解と適切な対応方法など
実際のPDFはこの以上の情報が含まれています。

全容を知りたい方はPDFをご覧いただくか、ルーシーさんのコンテンツをご覧ください。