“推荐系统评测方法及指标 ”详解 我要去应聘手机软件测试,面试官问为什么想

“好的推荐系统不仅仅能够准确预测用户的行为,而且能够扩展用户的视野,帮助用户 发现那些他们可能会感兴趣,但却不那么容易发现的东西。同时,推荐系统还要能够帮助商家将...

“推荐系统评测方法及指标 ”详解

我们精选了一下网友答案:

···································^^····································


“好的推荐系统不仅仅能够准确预测用户的行为,而且能够扩展用户的视野,帮助用户 发现那些他们可能会感兴趣,但却不那么容易发现的东西。同时,推荐系统还要能够帮助商家将 那些被埋没在长尾中的好商品介绍给可能会对它们感兴趣的用户。”项亮在其《推荐系统实践》一书中如是说。

然而,明白一个好的推荐系统长什么样子还远远不够,有一套能与之对应的测评方法和指标才是关键!于是,小编在借鉴项亮论述的基础上,特此整理了相关的测评方法及测评指标,以供大家学习和借鉴。

三种推荐系统实验方法


1、离线实验(offline experiment)

实施步骤:

(1)将从日志系统收集来的用户行为数据,生成为一个标准的数据集;

(2)按照一定的规则,将数据集分成训练集和测试集两个部分;

(3)在训练集上训练用户兴趣模型,在测试集上进行测试;

(4)利用定义好的离线指标评测算法,在测试集上进行结果预测。

优点:所有实验在数据集(从系统日志中提取而来)上完成,对实际系统和用户参与依赖度低,方便快捷;

缺点:对商业上关注的指标获取能力弱;


2、用户调查(user study)

用户调查,是一种通过分析被调查用户(真实的用户),在被测推荐系统上完成任务时的行为和回答问题的情况,来了解测试系统性能的一种实验方法。它旨在为上线测试提供准备工作,以防范上线测试所潜在的降低用户满意度的问题。

优点:在离线测试解决不了的“用户主观感受相关指标”的获取上,有着优越的性能;风险易控。

缺点:实验成本高,难组织大规模测试;双盲实验设计困难,影响测评结果。


3、在线实验(online experiment)

这里的在线实验方法,偏指AB测试方法。

实施步骤:

(1)通过一定规则将用户随机分组;

(2)对不同组的用户采用不同算法;

(3)统计不同组用户的不同评测指标,以比较不同的算法。

优点:公平获得不同算法实际在线的性能指标,包括商业上关注的指标。

缺点:试验周期较长;设计AB测试系统的工程量大,且流量切分设计一般必不可少。


十个推荐系统测评指标


1、 用户满意度

“用户满意度”测评指标,适用的实验方法为用户调查法与在线测试法。

用户调查法设计要点:将用户对被测推荐系统的满意程度分为多个层次,并照顾到用户各方面感受,为用户给出准确答案创造环境。

在线测试法设计要点:根据不同情境,区别“购买率”“用户反馈按钮统计”“用点击率”“停留时间”“转化率”等统计指标的设计,以度量用户满意度。


2、 预测准确度

预测准确度,是一个最重要、也存在时间最长的,度量推荐系统或者推荐算法预测用户行为能力的,在线测试指标,并严格遵循离线测试实验的实施方法。

根据研究方向不同,预测准确度可细分为“ 评分预测 ”“ TopN推荐 ”两类实现方式,且后者更符合实际应用需求。


3、 覆盖率

覆盖率,一种衡量推荐结果多大程度覆盖全部商品的度量指标,对于长尾发掘具有重要的意义。

常用度量方法有三种:

(1)计算所有被推荐商品占商品总数的比重

(2)信息熵

(3)基尼系数


4、 多样性

多样性,即推荐算法在兼顾用户长期稳定兴趣的同时,覆盖某一刻用户不同兴趣的能力,描述了推荐列表中物品两两之间的不相似性。

一个好的推荐系统,要求能同时兼顾多样性的要求,以及用户的主要兴趣。比如,爱看文艺片的我,你也识别我个别时候想看鬼故事的冲动。


5、 新颖性

新颖性,推荐用户没听说过的物品的能力。

在网站中实现新颖性的最简单办法是,把那些用户之前在网站中对其有过行为的物品从推荐列表中过滤掉。


6、 惊喜度

惊喜度,新颖推荐得到用户好评的测评指标。它基于新颖性,却高于新颖性。

惊喜度,通过定义推荐结果和用户历史偏好的相似度,及其用户对推荐结果的满意度得以实现。


7、 信任度

信任度,基于信任关系而使相同推荐结果获得不同反应的测评指标。比如,好友推荐比广告推荐更值得信赖。

度量系统的信任度,只能通过问卷调查的方式得以实现;提高系统的信任度,则可以通过增加推荐系统的透明度,以及利用用户社交网络中的好友信息构建推荐得以实现。


8、 实时性

时效性,度量在规定时间内将时效性强的物品及时推荐给用户的评测指标。


9、 健壮性

健壮性,度量推荐系统抗攻击能力的评测指标。


10、 商业目标

商业目标,度量推荐系统服务商业盈利目标的能力的评测指标。


来自公众号(ID:9z营销大数据)

·······································································

我要去应聘手机软件测试,面试官问为什么想进软件测试,我该怎么回答

我们精选了一下网友答案:

那你就问他,你问什么活着?为什么吃饭?为什么买房子?为什么娶媳妇?为什么挣钱?为什么养孩子?这都一个道理?没法回答。

···································^^····································


这个你不会?
面试就像恋爱是一样的,你女友问你为什么要准求她你不知道?
首先,面试官是为你对于“软件测试行业”的认知,其次是考核你对于未来职业发展方向的看法,如果你回答只是简单的这个行业简单、容易、工资高,这显然不是面试官想要得到的。
你应该从一下几点回答:(围绕ste基本素质阐述)
1 自身兴趣,喜欢软件测试工作,喜欢找bug。
2 行业发展,测试行业属于朝阳行业,可持续发展。
3 缺口大,目前行业内人较少,按照黄金比例国内严重不足。
4 未来发展,随着国内对于软件质量越来越重视,发展将非常广阔。
5 职业寿命长,积累行业经验。
6 薪酬,目前测试薪酬已经可以跟开发持平了。

···································^^····································


···································^^····································


·······································································

吓死宝宝了!近日呼市侯女士收到这样一条恐吓短信…大家小心

我们精选了一下网友答案:

···································^^····································



今日热点2016年内蒙古地区最新公务员、事业单位招聘信息请回复“人事考试”获取!


恐吓短信有诈 侯女士提醒大家别上当


北方新报热线(记者 刘晓君) “吓死宝宝了!今天上午9点,我和我的十几位同学都接到一条内容相同的恐吓短信,而且短信开头直呼我们各自的名字。短信内容为:侯某某你以为你干的这些事情我不知道,自己看pbnumbe.com/DXG.apk我弄死你。我和同学分别用百度就发短信的手机电话号码进行了查找,其号段显示为辽宁大连。我们认为这是一条诈骗短信,希望通过《北方新报》给人们提个醒,收到这样的短信,不要出于好奇点击链接网址,避免给自己造成不必要的损失。”2月29日,首府市民侯女士向本报记者反映道。


记者随后采访了呼和浩特市公安局网络安全保卫支队二大队队长彭军,彭军说:“这绝对是一条诈骗短信,如果当事人出于好奇点击了短信中的链接网址,其手机中的通讯录、与手机绑定的各类银行卡或支付宝的信息就会被黑客盗取,届时造成的损失将不可预见。”


彭军提醒广大市民,如果手机收到一些莫名其妙的含有网址链接的短信时,千万不要随意点击。另外,建议广大市民在手机上下载一款安全防护软件,这样可以屏蔽拦截一些恶意骚扰短信。


无独有偶,市民刘先生当日也向本报记者反映:“我也收到一条含有链接网址的短信,内容是:我们吃饭的合照,分一份给你,hdjgb.pw/07.apk 。我拨打了发短信的手机号码,但是无法接通。我觉得这也是一条诈骗短信。”(来自:呼和浩特新闻网——北方新报  记者 刘晓君)

相关链接

呼市一女士收到艳照短信链接 结果点开手机被黑…


北方新报讯(记者 郝少英) 2015年8月26日,呼和浩特市市民马女士收到有关艳照的不明短信,被诱导打开链接后,手机瞬间死机。


当日15时许,马女士的手机接到一条内容为“马XX你做事敢做不敢当,你真是丢人丢到家了,你的这些艳照就是最好的证据”的短信,短信最后是一个网络链接。马女士看后的第一反应是非常生气,因为自己有生意客户在各地,所以经常在外出差,一定是出差时被人偷拍了,以此要挟。发短信的是一个个人的手机号码。马女士再没有多想,便点击了结尾为“mtw”的链接。很快,马女士的手机出现了死机的情况,重新开机后,手机屏幕底色变蓝,桌面上的快捷不停地点击闪烁,马女士觉察到是病毒短信。因为手机中链接了两个银行卡,马女士立即与银行工作人员电话联系进行了挂失,随后报了警。警方110工作人员提示,近日,首府很多人都接到了此类短信,这是一种病毒,如果点击了,一定要及时挂失并报警。


内蒙古信息系统安全等级测评中心的李姓工作人员说,此类短信一般多为伪基站发布的信息,带有“apk”、“mtw”的链接基本都是病毒,千万不要打开。病毒一旦成功侵入手机,个人银行等信息会被盗取。(来自:北方新报 记者 郝少英)

妻子点开丈夫的开房视频链接,结果万万没想到…

骗子太狡猾!告知身边人,提醒大家日后收到类似这样带链接的短信一定要谨慎点开!扩展周知

  • 发表于 2020-11-22 12:48
  • 阅读 ( 650 )
  • 分类:软件测评

你可能感兴趣的文章

相关问题

0 条评论

请先 登录 后评论
admin
admin

0 篇文章

作家榜 »

  1. xiaonan123 189 文章
  2. 汤依妹儿 97 文章
  3. luogf229 46 文章
  4. jy02406749 45 文章
  5. 小凡 34 文章
  6. Daisy萌 32 文章
  7. 我的QQ3117863681 24 文章
  8. 华志健 23 文章

推荐文章

联系我们:uytrv@hotmail.com 问答工具