登陆后访问



H
I
S
T
O
R
Y

大数据对数学建模人带来的机遇和挑战

摘要:本文是作者在看完《大数据时代》后和看到许多公司案例后自己的一点启发,他将陈述大数据时代给数模人带来的机遇和挑战,以下是原文。
一、前言
休假1个多月了,很长时间没写文章和大家分享了,趁着近期还在休假有时间,写一篇文章吧,也是在看完《大数据时代》后自己的一点启发,这些启发均是机遇很多公司的发展案例的,具有很高的借鉴性。
原本计划将该思路用于大数据创业项目,无意间发现其对数学建模行业的发展会起到很大的促进作用,故而在此跟各位数模行业人士、数模爱好者予以分享,也希望大家能够发表自己的观点,共同碰撞提高。这次探讨,我将从大数据时代给数模行业带来的机遇和挑战。
二、机遇
大数据行业的现状:对大数据复合型人才需求很大,这种人需要具备的能力是技术能力、市场分析能力、数据分析能力,但是现阶段大数据人才十分匮乏。同时具备这三者能力的人才只有公司的总经理,然而具备这三种能力的潜在人才是数模人才,故而数模人能够通过必要的训练成为大数据人才,从而在数据分析、数学建模的道路上驰骋。
下面来谈一谈数模人如何成为大数据人才:
1. 技术能力
现阶段大数据处理均使用hadoop技术(阿里巴巴、盛大、腾讯、百度等均使用该技术,因为其强大的并行数据存贮和处理能力),而非我们通常熟悉的SAS(因为其比较倾向于数据处理层,不能解决现阶段的并行处理的难题,也就是用并行计算代替超级计算机的难题)。
hadoop技术的出现使得基于x86的计算机集群处理TB级乃至更大数据成为了可能,这就解决了没有超级计算机(比如天河之类的)的资源难题——实现了用普通计算机集群就可以进行TB级数据处理的资源难题。
该技术是革命性的,主要有3点:
(1) 让数据处理从抽样样本处理走向了全部样本处理;
(2) 从追求精准走向了追求效率;
(3) 从追求因果关系走向了追求相关关系(比如啤酒和尿布的故事)。
启发
数模人目前面临的困境是没有经验,主要原因为时间、空间成本原因。hadoop技术的出现使得实践成本降低,从而为数模人实践提供了机遇,下面就看大家是否能够抓得住。
目前据调查,大数据行业人才的薪资均在年薪15-50W之间。此外,还有很多人利用大数据技术创业,比如孔明科技、皮皮数据挖掘等社会化媒体营销,就是充分利用大数据技术、数据分析技术、市场分析技术、竞争分析技术、舆情分析技术等挖掘目标客户。
2. 市场分析能力
这块我不做过多的解释,这块的主要目的是为了发现目标客户。比如,孔明科技社会化营销平台,通过微信、微博、人人公共主页等社交化媒体平台获得数据源,然后为企业提供数据分析解决方案,从而让企业明确自己该重点关注哪些客户、重点关注哪些竞争对手、重点关注哪些营销内容等。比较风趣的是,孔明科技团队虽是做营销的团队,然而所有人员均是技术人才,跟数模人很像啊。
启示:大数据未来将会革新各个行业的渠道,从而使得营销可以流程化、技术化处理,而我们数模人的机遇就在此。
3. 数据分析能力
可能说道这个,大家都比较熟悉,然而就业后使用的时候就感觉很陌生了,主要原因是什么?数模人重理论的通病。目前大数据中的数据分析主要基于hdfs文件系统(hadoop技术的文件系统),利用mapreduce技术对hdfs抽象出的数据集进行处理。现阶段,该方面需要能够将数据分析转化为hadoop平台上实实在在应用的人,从而实现智能化操作。
启示:数模人如何学会hadoop技术,加上数据分析和数学建模能力,将会是抢手人才。如果你有这方面能力或者案例,我可以帮你推荐工作,年薪在20W+。
通过以上三个方面的总结,大数据时代的机遇有:hadoop运维人才、hadoop数据分析应用人才、大数据创业人才(因为大虎山局会发现新的关系,从而催生了新的商机,只要留心就会发现)。但是,hadoop只是一个阶段性产物,大数据技术一直在革新,假如某一天超级计算机进入了大家的生活,那么hadoop技术可能就会随之消失,那个时候或许sas就会派上用场了(今年有个数据,sas软件的全球使用排行很靠前)
三、挑战
大数据时代带来了机遇,同时也带来了挑战,该行业会逐渐吞噬数学建模行业,逐步将数学建模行业划归为数据分析行业,这是很可悲的。如果数模人不能行动起来,抓住这一机遇,可能未来将会被视为鸡肋行业,如果破局还要数模人共同努力,共同创造美好的明天。

 

声明:文章转自【数学中国】微信公众号,版权归原作者所有,转载仅供学习使用,不用于任何商业用途,如有侵权请联系删除,谢谢。

相关文章

解释离婚的情感动态的数学模型

Posted by - November 08, 2017 1006
我们在一个简化的第二定律的基础上用最优控制理论作为描述情感动态的一个新模型:如果双方有类似的情感属性,存在一种最优的努力策略使得婚姻长久...

数学模型告诉你,减肥为何频频失败

Posted by - January 16, 2018 1268
这个真实的模型告诉我们,一般人无法达到减肥计划,不是计划的错,而是传统线性模型的错。遗憾的是因为线性模型够简单,所以被广泛使用,结果正确...

想追她?先算算你要等多久

Posted by - January 17, 2018 1061
一个女孩从第一次被人追求到结婚,平均会有多少人去追她?她又会谈几次恋爱?其实,我们可以建立一个简化的模型估算出来。

男生追女生的数学模型

Posted by - November 08, 2017 1298
考虑了同性竞争因素和家长的影响因素下的男生追女生的问题,通过建立微分方程模型,深入分析了男生与女生的关系以及男生的学业成绩在时间上满足局...