编辑: 贾雷坪皮 | 2019-07-04 |
此时,结果页面或者为在线视听页本身,或者包含在线视听、阅读、游戏页面链接,需要点击1次才进入在线视听、阅读、游戏页面.子分类当搜索词未说明视频/音频剧集,音频版本,小说段落、游戏版本时 当搜索词说清楚了软件版本,视频剧集,音频版本,小说段落,游戏版本时 效果评价方法 影响用户满意度的几个主要方面相关性4分的相关性在线意图当搜索词未说明视频/音频剧集,音频版本,小说段落、游戏版本时 a.结果页面中是该视频/音频剧集,但是部分剧集链接,或是剧集的某一集,预告片等,相关性为4分.b.果页面中是该音频,但音频不是最热版本/最被大众认可版本时,相关性为4分.c.结果页面中是该小说段落,但是小说部分章节目录,相关性为4分.d.结果页面中是该游戏,但游戏不是最热版本/最被大众认可版本时,相关性为4分 效果评价方法 了解用户的搜索目的影响用户满意度的几个主要方面分析和对比我们的技术服务水平如何将用户的感受目标变成开发工作 效果评价方法 分析和对比我们的技术服务水平获得如下的珍贵数据模拟用户真实查询,我们与竞争对手的差别评估数据我们目前做得不好的大量实例Case竞争对手比我们做得好的实例Case 效果评价方法 分析和对比我们的技术服务水平 Y 资料/信息 其他 刘德华意外死亡 Y 其他 其他 我和爸爸 Y 其他 文学 儿子与情人 1,2 资料/信息 其他 别克林荫大道内饰 1,2 资料/信息 其他 高考成绩查询
3 URL 网站 淘宝网
1 URL 网站 赵薇官网 权威站点 时效性 多样性 相关性较差 导航没命中 效果评价方法 分析和对比我们的技术服务水平 0+6+0 1+1+0 0+0+1 色情 0+0+1 音频 1+4+0 0+1+0 视频 0+4+0 0+0+1 财经 品牌 0+2+4 0+0+1 商品/商业 5+4+0 1+0+0 人名 4+3+3 0+0+2 公司/机构/组织 1+2+1 1+1+0 0+0+1 文学 域名 1+0+0 8+7+3 网站 其他 图片 URL 在线 下载 资料/信息 效果评价方法 分析和对比我们的技术服务水平 好好爱国事迹 好 安徽卫视节目主持人 好 安莉芳内衣加盟 好好白塔寺 地图 好 白云机场大巴时刻表 好 办房产证 期限 好 安徽2009高考方案 好好春季皮肤保养 好 大与小作文 好 电子表格不显示0值好好好读 昆虫记 有感 谷歌 百度 搜狗 关键词 效果评价方法 了解用户的搜索目的影响用户满意度的几个主要方面分析和对比我们的技术服务水平如何将用户的感受目标变成开发工作 效果评价方法 如何将用户的感受目标变成开发工作产品人员用在第三步中得出的大量实例Case进行问题的定位与分类整理以同类型Case作为样本,抽样提交给开发人员修复在算法改进结束后,小规模的以同类型Case评估改进效果上线前,产品人员按照实际Query分布比例,模拟用户查询对改进进行全面性评估,以保证改进过程中没有影响到其他类型的查询词的效果 效果评价方法 附:以相关性为例,产品人员整理分析Query后,给出的搜索效果总结表 3.4% 1.搜索结果完全不相关2. 搜寻结果虽有符合的搜索词出现,但是上下文完全无关 ,对网友一点用处也没有,可评断为Bad … 0分 不能接受 24.7% 1.搜索结果相关度较低2.搜索结果的内容品质很差… 2分 不满意 52.3% 1.满足了用户的部分需求2.搜索结果内容质量中等 4分 满意 19.6% 搜索词是官网类搜索词, 通常会有官方网站.如果是官网类搜索词,相关性需要评判为5分,意思就是满足了用户的需求,而且命中了官方网站… 5分 非常满意 评分 满意度 分布比例 定义 相关性问题分类 效果评价方法 附:开发对应的问题分类与总结 2.1% 金世彬白塞氏病图片… rank(需要考虑title的summary Rank) 4.7% 包身工中为什么用蠕动代替起床山东造纸厂… 分词,垃圾词 8.5% 齐齐哈尔师范高等专科学校今年录取怎样白居易在怎样的情况下写出忆江南保定贴吧… 抓取or索引问题 0.6% 王国强… 内部数据填充有问题 分布比例 具体Case 问题分类 效果评价方法 附:评测词的查询分布(1) 52% 53% 52% 33% 45% 43% 49% 47% s/(s+b)