这几天,一个从来名不见经传的乎睿数据有限公司捅了“马蜂窝”,用一篇瞬间赢得10万加的文章第一击《独家|估计175亿的旅游独角兽,是一座僵尸和水军构成的鬼城?》捅了“马蜂窝”,数据说明融资了十多亿美金的旅游业知名的APP马蜂窝数据造假,指出其抄袭1800万条点评,让原本互联网潜规则水军站在风口浪尖,揭露丑恶现象大快人心。
什么样的团队可以让一个体量如此之大的企业瑟瑟发抖,在互联网上被网友唾骂?自媒体作者“小声比比”自曝其名:美国藤校程序员自曝专业:数据挖据,语义分析
三个程序猿分别毕业于宾大、康奈尔、伊利诺伊香槟分校等美国知名大学。
马蜂窝只是不小心被他们撞上了拿来练手,再把底子抖了出来。告知人们这个企业至少9成的核心竞争力是带虚假欺骗性质的。马蜂窝本来是我比较喜欢的一个APP,外出旅游必然会下载几篇攻略,但是大量灌水,误导人们消费来增加流量就太不厚道了。1个文案加上3个程序猿对抗整个马蜂窝,颇有一夫当关万夫莫开的架势。这事情让他们折腾去,肃清下目前乱草丛生的变态互联网评论市场也好。
不过今天不想讨伐马蜂窝及很多同类型网站水军这么个不厚道的行为,我倒是对藤校的学生学的专业比较感兴趣。
数据挖掘是干什么的?语义分析又是干什么的?这年头,技术真的是撕X的第一生产力。
首先,先讲讲啥是数据挖掘:
数据挖掘归属于数据分析统计学(DataAnalyticsanStatisticalComputing),让学习者掌握如何在海量数据中抓取不易被发现的规律,通过探究其背后的原因,得出最终结论。这是一门集大数据分析、语言处理、人工智能等多项高新技术于一体的学科。
掌握这门技术,就能在马蜂窝成百上千万的评论数据中发现有多少个抄袭账号、合计抄袭了多少条点评以及这些抄袭的内容在官网数据中占比多少。
今年3月,一个名为CambrigeAnalytica(剑桥分析)的公司,就是使用了数据挖掘技术,获取了Facebook网站上8700万用户的数据,随即被用于多个国家选举中的选民分析。
2016年美国总统选举曾经引发了一波关于数据操纵结果的舆论风波,在当时美国政商界引起广泛关注,直接质疑选举的公正与合法性。
而在那一年当选总统的特朗普,雇佣的就是CambrigeAnalytica这家公司。
接下来,那语义分析又是做什么的呢?
语义分析是数据挖掘领域中语言应用的分支,通过分析文字或语音中的内容,让机器发现人类语言的规律,并给出特定回复。
太官方?简单来说就是,给机器设定好指令,发现“好”字就回复“谢谢”,出现“差评”二字自动回复“抱歉”……
马蜂窝从竞争对手那里抄过来的“真实点评”,使用的就是语义分析技术。
先用数千个“抄袭账号”从其他地方搬运点评内容,一字不差地复制到系统中,在自己的评论区进行机械回复。
如此一来,当有人问“某某饭店的饭菜怎么样”或者“某某酒店价格便宜吗”的时候,机器人就可以识别问题中的关键字,并在无数个搬运来的评论中,立刻搜索到符合问题的答案,发布到评论区。
只不过,现在的机器还没有那么“智能”,以至于在搬运外国人的点评内容时,直接使用谷歌翻译接口,闹出了“简明英汉词典”这样的乌龙。
现如今,基于人工智能技术的大数据分析、识别抓取技术已经无处不在。
数据科学在美国到底有多火爆?!
•至2018年,美国在拥有150万分析人员的情况下,依然有14万-19万的人员缺口,预测对资深分析员的需求将超出现有供应量的50%-60%;
•数据科学家被誉为“21世纪最性感的工作”;
•在美国,数据科学家排在最佳工作榜首位,主要因为其潜在的高收入、大量的工作计划和良好的职业发展;
•五年内相关的研究需求增长了六倍;
因此,为了满足社会对人才的需求,美国多所大学也陆续开设数据科学专业或课程。
•UCBerkeley报名数据科学课程的学生从300名增长到1000多名,因此学校决定增设数据科学本科专业,这也是学校CollegeofLettersanScience在过去的16年里首次增设新专业;
•而加州大学系统的其他学校也纷纷追随,UCSD增设数据科学本科专业和双专业,UCSC甚至专门设立了一个全新的D3中心,即Data,Discovery和Decisions的缩写,用于培养训练学生的数据分析能力;
•耶鲁大学也在2017年新增本科专业——统计与数据科学(DepartmentofStatisticsanDataScience),又称DSsquare或DS2。计划在未来几年里,招募至少9名新教研人员和学者,为DS2壮大师资力量。
美国数据科学专业的院校前十名:
1.哥伦比亚大学
2.斯坦福大学
3.西北大学
4.加州大学伯克利分校
5.卡内基梅隆大学
6.纽约大学
7.弗吉尼亚大学
8.普渡大学
9.亚利桑那州立大学
10.康涅狄格大学
美国其他开设数据科学相关硕士项目的名校推荐:
•芝加哥大学
•约翰霍普金斯大学
•乔治华盛顿大学
•罗切斯特大学
•伦斯勒理工学院
•伊利诺伊大学香槟分校
•德克萨斯大学奥斯汀分校
正是因为增长如此之快,企业们常常需要苦苦寻觅各个层次的优秀数据科学家,这也为学生毕业之后提供了发展技能的新机会。
同学们在考虑名校的同时,不妨在专业方面多下功夫,选择一个未来极具前景的专业,同样能使自己的留学之路不虚此行。