Kaggle:大数据制造大富翁

【编者按:数据科学家如今是被硅谷热捧的新兴职业,数据分析竞赛网站Kaggle让我们看到一种趋势:优秀的数据科学家将和高尔夫球星和摇滚巨星挣得一样多!】

 

Anthony Goldbloom

Kaggle首席执行官 Anthony Goldbloom

 

但一个常见误区是:只有数据库技术和数据分析专家才称得上是“数据科学家”。实际上一位英文专业的大学生曾经在Kaggle上赢得一次关于艾滋病研究的Kaggle大赛,当他的名字出现在《科学杂志》上时,他妈妈被惊呆了。

数据分析致富的最经典的案例是2006年,在线电影租赁公司Netflix曾经用百万美元悬赏,奖励能够将其电影推荐算法准确性提高至少10%的人。

三年后,一个拥有AT&T工程师的团队BellKor’s Pragmatic Chaos实现了这一目标,提供了一个比Netflix专家还要精确10.05%的推荐算法,拿走百万美元奖金的同时书写了大数据百万富翁童话。事实上,Netflix电影推荐引擎的算法是Netflix击败Blockbuster等传统影视租赁公司的看家法宝,将其推荐精度提高10%带来的消费体验提升和商业价值远远不止百万美元。

Netflix的百万悬赏催生了一个数据分析竞赛网站——Kaggle。Kaggle的首席执行官Anthony Goldbloom认为,Netflix算法大赛中的预测模型也是银行、保险、考试服务企业所迫切需要的,考虑到全球企业都面临数据分析人才荒,Goldbloom于是将Netflix悬赏模式应用于各行各业,将Kaggle打造成数据科学家的竞技场。

任何需要解决数据分析问题的企业都可以在Kaggle上公布相关数据进行悬赏。任何人都能够参与并提出自己的解决方案,整个竞赛期间通过公告板展示参赛选手的实时排名。目前总计约3万人至少在比赛中提交过数据模型。

Kaggle上的悬赏奖金数额从1000美元(例如将文档与作者匹配的算法)到300万美元(例如预测病人下一年将在医院呆上多少天的算法)不等,大多数竞赛的时间期限在2-3个月之间。在IT经理网之前报道过的案例中,一个此前对汽车行业一无所知的小型数据分析团队将不同型号汽车的人身伤害责任险的预测精度提高了340%。显然,这也是一个百万美元级别的成就。

Glodbloom最后这样总结他和他的企业的愿景:但愿更多的聪明孩子大学毕业后选择做数据科学家,而不是什么对冲基金操盘手。

第一时间获取面向IT决策者的独家深度资讯,敬请关注IT经理网微信号:ctociocom

   

除非注明,本站文章均为原创或编译,未经许可严禁转载。

相关文章:


关于作者

        在TMT领域具有十余年的咨询和创业经验。 目前主要关注信息安全,同时密切关注云计算、社会化媒体、移动、企业2.0等领域的技术创新和商业价值。拥有美国麻省理工学院MBA学位和清华大学经济管理学院学士学位,曾任BDA中国公司高级顾问,服务过美国高通、英特尔、中国网通、SK电讯、及沃达丰等公司。联系邮件:wangmeng@ctocio.com