研究・学術出版

TREC-COVIDの50トピック、各トピック200件の候補、候補レコードの延べ10,000件を、当初の22種類のランキング設定と、テキストのみを用いた保存済みの2種類の開発用プロファイルで確認できます。読み取り専用のビューアーでは、NISTがすでに公表した人間による関連性評価、保存された順位と指標を表示します。新たな検索、レコードの並べ替え、推論による新たなスコアの算出、評価の収集は行いません。

初期設定はBaselineです。当初のFullおよびGuardrail設定の平均関連性は、Baselineより低い結果でした。対応のある比較の95%区間にはゼロが含まれており、このベンチマークは同等性や非劣性を示すものではなく、これらの設定の実運用への採用を検証したものでもありません。

テキストのみを用いた2種類の開発用プロファイルでは、メタデータによる加点を行いません。開発には50トピックすべてを使用したため、保存された結果は独立した確認を提供するものではなく、どちらのプロファイルも正式な採用には進めていません。

査読者やテスターは、ご自身のペースでプロトタイプを確認できます。時間制限や完了期限はありません。アカウントやアクセスコードも不要です。

過去のデモ：2026年9月24日の別のOpenAlexスナップショットには、タイトルに基づく107の検索クエリ、候補レコードの延べ10,075件、異なる研究成果10,023件が含まれています。この読み取り専用のデモには人間による関連性評価がなく、関連性の証拠として50トピックのTREC-COVIDベンチマークと比較することはできません。