16.0 複数の解釈と意図を持つクエリの評価
クエリの中には本当に1つの意味しか持たないものもあります。例えば[iphone]というクエリで考えてみましょう。このクエリに対するユーザーの意図は様々かもしれません(iPhoneについて調べる、iPhoneを購入する、AppleのウェブサイトのiPhoneのページに行く)がどのユーザーも基本的には同じものを指しています。Apple社によって作られたiPhoneの事です。
クエリの中には実に異なる意味をいくつか持つものもあります。[apple]というクエリで考えてみましょう。あるユーザはコンピュータのブランドを、または果物に関する詳細な情報を知りたいのかもしれません。このような異なる意味をクエリの解釈(query interpretations)と私たちは呼びます。
異なるクエリの解釈を含む結果に対してNeeds Met評価を与える場合、そのクエリの解釈がどの程度の可能性なのか、結果がどの程度役に立つのかを考えてください。
● 主要な解釈(dominant interpretation)で非常に有用な結果なら多くのユーザーまたはほとんどのユーザーにとって非常に有用であるため、Highly Meetsと評価されるべきででしょう。このドミナントな解釈(dominant interpretation)を持つクエリの中にはFullyMの結果を持つものもあります。
● 一般的な解釈(common interpretation)に対して非常に参考になる結果であれば、解釈の信憑性の高さによっては”Highly Meets”または”Moderately Meets”となるでしょう。
● 非常にマイナーな解釈に対する(でも)非常に有用な結果は興味を持つユーザーが少ないので”Slightly Meets”またはそれ以下の評価かもしれません。
● 有り得なさすぎる解釈なので結果が”FailsM”と評価されるべき物もあります。このような解釈は”ノーチャンス(見込無し)”と呼びます。
原文16.0 Rating Queries with Multiple Interpretations and Intents
Some queries really only have one meaning. Consider the query [iphone], English (US). There may be different user intents for this query (research iPhones, buy an iPhone, go to the iPhone page on Apple’s website), but all users are basically referring to the same thing: the phone made by Apple, Inc.
Some queries truly have different possible meanings. Consider the query [apple], English (US). Some users may want to find more information on the computer brand or the fruit. We refer to these different meanings as query interpretations.
When giving Needs Met ratings for results involving different query interpretations, think about how likely the query interpretation is and how helpful the result is.
● A very helpful result for a dominant interpretation should be rated Highly Meets, because it is very helpful for many or most users. Some queries with a dominant interpretation have a FullyM result.
● A very helpful result for a common interpretation may be Highly Meets or Moderately Meets, depending on how likely the interpretation is.
● A very helpful result for a very minor interpretation may be Slightly Meets or lower because few users may be interested in that interpretation.
● There are some interpretations that are so unlikely that results should be rated FailsM. We call these “no chance” interpretations.
Copyright 2021