オープン製品検索テストツールの最初のリリース

最近のいくつかの投稿では、意図を使用して製品検索の品質を評価する有望でかなり単純な方法について説明しています。 この種のテストのためのオープンな自動化ツール- 意図ベースの検索品質 -を急いで導入します。 アイデアは、事前に用意された「フォーカスされた」クエリを使用することになります。そのクエリの価値は、単純明快で明確な解釈にあります。







このアプローチに興味がある場合は、 「購入するつもりです」という投稿、または食料品検索の品質を評価する最も簡単な方法に注意してください 。 標準のA / Bテストから意図を使用したテストへの移行は、完全に明白ではないように思われるかもしれません。



アプローチの本質



「集中」クエリは、検索結果を検証するための非常にシンプルで信頼性の高い方法を提供します。 ちなみに、最初の近似では、その実装は、返された製品の名前のクエリからのすべてのキーワードの存在をチェックすることに減らすことができます。



当然、最終号における製品の位置も重要です。 たとえば、モバイルアプリケーションでの検索では、最初の結果と次の結果がより重要です。 通常の検索(使い慣れたデスクトップ)の場合、最初のページに関連する結果が表示されます。



ウォルマート検索はどれくらい良いですか?



私は購入するつもりです -検索結果の「手動」検証を必要としないため、本当に強力なアプローチです。 Walmartの優れた機能を調べてみましょう(この場合、fiskarsブランドのクエリパッケージを引き続き使用します)。 それで、「フィスカルスチールチョッピングアックス」:







それをすべて自動化しましょう



原則として、結果は良いように見えますが、よく見ると、完全に無関係なオプションに簡単に気付くことができます。 人間の介入なしに必要なチェックを実行することは非常に簡単です。レポートを見てください:







最終セットには、本当に無関係な製品が多すぎるため、結果は否定的です(彼は包丁を必要とせず、なたを取ります)。 当然のことながら、評価関数は「攻撃的でない」ものに簡単に置き換えられます。 将来のバージョンでは、より柔軟な製品スコアリングを実装し、基本機能を拡張したいと考えています。



評決



現在のバージョンでは、ウォルマートは感心しませんでした。フィスカルスの評価はそれほど高くありません。







すべてが非常に悪いとは思わないでください。 多くの場合、たとえ些細な場合でも、結果は正しいですが、検索をさらに改善するには、潜在的に問題のあるポイントをすべて強調する必要があります。 提案されたツールを使用すると、常に機会があります。





クエリの複雑さを評価する機会を提供します。







参照資料



  1. 意図ベースの検索品質
  2. 検索品質API
  3. 「購入する予定」または食料品検索の品質を評価する最も簡単な方法
  4. ガスバイクまたは奇妙な製品検索(eコマース)



All Articles