محبوبترین نویسندگان :
نویسندگان مقالات پربازدید :
یادگیری ماشین 2013
جزئیات رویداد
اینستاگرام تی پی بین
همایش ، رویداد ، ژورنال
حوزه های تحت پوشش رویداد

  • active evaluation of ranking functions based on graded relevance

    نویسندگان :
    کلمات کلیدی :
    جزئیات بیشتر مقاله
    • تاریخ ارائه: 1392/07/24
    • تاریخ انتشار در تی پی بین: 1392/07/24
    • تعداد بازدید: 986
    • تعداد پرسش و پاسخ ها: 0
    • شماره تماس دبیرخانه رویداد: -
     evaluating the quality of ranking functions is a core task in web search and other information retrieval domains. because query distributions and item relevance change over time, ranking models often cannot be evaluated accurately on held-out training data. instead, considerable effort is spent on manually labeling the relevance of query results for test queries in order to track ranking performance. we address the problem of estimating ranking performance as accurately as possible on a fixed labeling budget. estimates are based on a set of most informative test queries selected by an active sampling distribution. query labeling costs depend on the number of result items as well as item-specific attributes such as document length. we derive cost-optimal sampling distributions for the commonly used performance measures discounted cumulative gain and expected reciprocal rank. experiments on web search engine data illustrate significant reductions in labeling costs.

سوال خود را در مورد این مقاله مطرح نمایید :

با انتخاب دکمه ثبت پرسش، موافقت خود را با قوانین انتشار محتوا در وبسایت تی پی بین اعلام می کنم
مقالات جدیدترین رویدادها
مقالات جدیدترین ژورنال ها