大数据处理需要用到的九种编程语言

大数据处理需要用到的九种编程语言

随着大数据的热潮不断升温，几乎各个领域都有洪水倾泻般的信息涌来，面对用户成千上万的浏览记录、记录行为数据，如果就单纯的Excel来进行数据处理是远远不能满足的。但如果只用一些操作软件来分析，而不怎么如何用逻辑数据来分析的话，那也只是简单的数据处理。

替代性很高的工作，而无法深入规划策略的核心。

当然，基本功是最不可忽略的环节，想要成为数据科学家，对于这几个程序你应该要有一定的认识：

R

若要列出所有程序语言，你能忘记其他的没关系，但最不能忘的就是R。从1997年悄悄地出现，更大的优势就是它免费，为昂贵的统计软件像是Matlab或SAS的另一种选择。

但是在过去几年来，它的身价大翻转，变成了资料科学界眼中的宝。不只是木讷的统计学家熟知它，包括WallStreet交易员、生物学家，以及硅谷开发者，他们都相当熟悉R。多元化的公司像是Google、Facebook、美国银行以及NewYorkTimes通通都使用R，它的商业效用持续提高。

R的好处在于它简单易上手，透过R，你可以从复杂的数据集中筛选你要的数据，从复杂的模型函数中操作数据，建立井然有序的图表来呈现数字，这些都只需要几行程序代码就可以了，打个比方，它就像是好动版本的Excel。

R最棒的资产就是活跃的动态系统，R社群持续地增加新的软件包，还有以内建丰富的功能集为特点。目前估计已有超过200万人使用R，最近的调查显示，R在数据科学界里，到目前为止更受欢迎的语言，占了回复者的61%（紧追在后的是39%的Python）。

它也吸引了WallStreet的注目。传统而言，证券分析师在Excel档从白天看到晚上，但现在R在财务建模的使用率逐渐增加，特别是可视化工具，美国银行的副总裁NiallO’Conno说，「R让我们俗气的表格变得突出」。

在数据建模上，它正在往逐渐成熟的专业语言迈进，虽然R仍受限于当公司需要制造大规模的产品时，而有的人说他被其他语言篡夺地位了。

“R更有用的是在画图，而不是建模。”顶尖数据分析公司Metamarkets的CEO，MichaelDriscoll表示，

“你不会在Google的网页排名核心或是Facebook的朋友们推荐算法时看到R的踪影，工程师会在R里建立一个原型，然后再到Java或Python里写模型语法”。

举一个使用R很有名的例子，在2010年时，PaulButler用R来建立Facebook的世界地图，证明了这个语言有多丰富多强大的可视化数据能力，虽然他现在比以前更少使用R了。

“R已经逐渐过时了，在庞大的数据集底下它跑的慢又笨重”Butler说。

所以接下来他用什么呢?

Python

如果说R是神经质又令人喜爱的Geek，那Python就是随和又好相处的女生。

Python结合了R的快速、处理复杂数据采矿的能力以及更务实的语言等各个特质，迅速地成为主流，Python比起R，学起来更加简单也更直观，而且它的生态系统近几年来不可思议地快速成长，在统计分析上比起R功能更强。

Butler说，“过去两年间，从R到Python地显著改变，就像是一个巨人不断地推动向前进”。

在数据处理范畴内，通常在规模与复杂之间要有个取舍，而Python以折衷的姿态出现。IPythonNotebook（记事本软件）和NumPy被用来暂时存取较低负担的工作量，然而Python对于中等规模的数据处理是相当好的工具；Python拥有丰富的资料族，提供大量的工具包和统计特征。

美国银行用Python来建立新产品和在银行的基础建设接口，同时也处理财务数据，“Python是更广泛又相当有弹性，所以大家会对它趋之若鹜。”O’Donnell如是说。

然而，虽然它的优点能够弥补R的缺点，它仍然不是更高效能的语言，偶尔才能处理庞大规模、核心的基础建设。Driscoll是这么认为的。

Julia

今日大多数的数据科学都是透过R、Python、Java、Matlab及SAS为主，但仍然存在着鸿沟要去弥补，而这个时候，新进者Julia看到了这个痛点。

Julia仍太过于神秘而尚未被业界广泛的采用，但是当谈到它的潜力足以抢夺R和Python的宝座时，数据黑客也难以解释。原因在于Julia是个高阶、不可思议的快速和善于表达的语言，比起R要快的许多，比起Python又有潜力处理更具规模的数据，也很容易上手。

“Julia会变的日渐重要，最终，在R和Python可以做的事情在Julia也可以”。Butler是这么认为的。

就现在而言，若要说Julia发展会倒退的原因，大概就是它太年轻了。Julia的数据小区还在初始阶段，在它要能够和R或Python竞争前，它还需要更多的工具包和软件包。

Driscoll说，它就是因为它年轻，才会有可能变成主流又有前景。

Java

Driscoll说，Java和以Java为基础的架构，是由硅谷里更大的几家科技公司的核心所建立的，如果你从Twitter、Linkedin或是Facebook里观察，你会发现Java对于所有数据工程基础架构而言，是非常基础的语言。

Java没有和R和Python一样好的可视化功能，它也不是统计建模的更佳工具，但是如果你需要建立一个庞大的系统、使用过去的原型，那Java通常会是你最基的选择。

Hadoop and Hive

为了迎合大量数据处理的需求，以Java为基础的工具群兴起。Hadoop为处理一批批数据处理，发展以Java为基础的架构关键；相较于其他处理工具，Hadoop慢许多，但是无比的准确和可被后端数据库分析广泛使用。和Hive搭配的很好，Hive是基于查询的架构下，运作的相当好。

Scala

又是另一个以Java为基础的语言，和Java很像，对任何想要进行大规模的机械学习或是建立高阶的算法，Scala会是逐渐兴起的工具。它是善于呈现且拥有建立可靠系统的能力。

“Java像是用钢铁建造的；Scala则是让你能够把它拿进窑烤然后变成钢的黏土”Driscoll说。

Kafka andStorm

说到当你需要快速的、实时的分析时，你会想到什么?Kafka将会是你的更佳伙伴。其实它已经出现五年有了，只是因为最近串流处理兴起才变的越来越流行。

Kafka是从Linkedin内诞生的，是一个特别快速的查询讯息系统。Kafka的缺点呢?就是它太快了，因此在实时操作时它会犯错，有时候会漏掉东西。

鱼与熊掌不可兼得，「必须要在准确度跟速度之间做一个选择」，Driscoll说。所以全部在硅谷的科技大公司都利用两个管道：用Kafka或Storm处理实时数据，接下来打开Hadoop处理一批批处理数据系统，这样听起来有点麻烦又会有些慢，但好处是，它非常非常精准。

Storm是另一个从Scala写出来的架构，在硅谷逐渐大幅增加它在串流处理的受欢迎程度，被Twitter并购，这并不意外，因为Twitter对快速事件处理有极大的兴趣。

Matlab

Matlab可以说是历久不衰，即使它标价很高；在非常特定的利基市场它使用的相当广泛，包括密集的研究机器学习、信号处理、图像辨识等等。

Octave

Octave和Matlab很像，除了它是免费的之外。然而，在学术信号处理的圈子，几乎都会提到它。

GO

GO是另一个逐渐兴起的新进者，从Google开发出来的，放宽点说，它是从C语言来的，并且在建立强大的基础架构上，渐渐地成为Java和Python的竞争者。

这么多的软件可以使用，但我认为不见得每个都一定要会才行，知道你的目标和方向是什么，就选定一个最适合的工具使用吧!可以帮助你提升效率又达到精准的结果。

以上是小编为大家分享的关于大数据处理需要用到的九种编程语言的相关内容，更多信息可以关注环球青藤分享更多干货

Julia是指?

Julia 是一个面向科学计算的高性能动态高级程序设计语言。其语法与其他科学计算语言相似。在许多情况下拥有能与编译型语言相媲美的性能。[2]

一群拥有各种语言丰富编程经验的Matlab高级用户，对现有的科学计算编程工具感到不满——这些软件对自己专长的领域表现得非常棒，但在其它领域却非常糟糕。他们想要的是一个开源的软件，它要像C语言一般快速而有拥有如同Ruby的动态性；要具有Lisp般真正的同像性（Homoiconicity）而又有Matlab般熟悉的数学记号；要像Python般通用、像R般在统计分析上得心应手、像Perl般自然地处理字符串、像Matlab般具有强大的线性代数运算能力、像shell般胶水语言的能力，易于学习而又不让真正的黑客感到无聊；还有，它应该是交互式的，同时又是编译型的……

该项目大约于2009年中开始，目前（2012年2月）距离1.0版的发布已经进展到90%。在源码主页上可下载试用。

目前，Julia中文社区正在迅速成长，Julia语言编程开发等问答平台已经建立。[3]

tvb里演那个女医生的是谁

陈自瑶

Yoyo Chan

昵称：瑶瑶[9],Yoyo ，阿YO

生日：1981年8月27日

星座：处女座

血型：A

身高：165CM

体重：43kg

三围：32" 23" 33"

腿长：39"

籍贯：香港

技能：唱歌、舞蹈、表现自己

性格：天真、活泼、清纯

求学经历：中学——宝觉女子中学

家庭状况：父母、一兄

所属公司：香港电视广播有限公司（TVB）

入行原因：参加 2000年天网娱乐的主办的「 Cyber Girl」选举得冠军而入行

出版 *** ：《Narcissistic.YoYo恋自瑶》（2001）

儿时自愿：帮人，想做社工

擅长的语言：粤语、英语、普通话

擅长的运动：游泳

喜欢的艺人：梁朝伟、张曼玉、Julia Roberts

喜欢的歌星：王菲、萧亚轩、林忆莲

喜欢的歌曲：不了情、心动

喜欢的电影：风月俏佳人、摘星奇缘

喜欢的食物：生果、雪糕、烧味鸡翼

喜欢的颜色：白、蓝、红

喜欢的游戏类型：动作、射击、智力、模拟 电脑游戏

喜欢的休闲活动：阅读、听音乐、羽毛球、影相、跑步、唱歌

深入了解：YoYo自小喜欢宠物，但因妈妈的反对，求学时期即使哥哥先斩后奏拿了一头狗回家，最终仍被迫让给朋友[8]

YoYo在自己开设的服装店裏养了三只流浪猫[8]

求julia81部

我有资源可分享~！

采纳后发送。

速速采纳。

p.s.需要其他更多资源请追问。

如若发现上传附件与提问不相符，无碍！那只是挣外快随便一个福利附件，而已。并非所答非所问！请放心。即参与的答题就有货真价值的正确资源提供！

p.s.2.友情提示：你是手机登陆提问的，但是手机提问是看不到答题者上传分享的资源附件。请用电脑登录百度知道，下载种子（附件，资料）。看电影（查阅资源，资料，附件）。

【注~！】我的百度知道从8.30日突然抽了= =。不再提示采纳信息了……只提示追问，求助，赞同……不晓得为什么= =。所以需要解码的附件答题采纳者请稍等~！我只能“全自动查看”——即“全得自己手动查看”= =。呃……耐心等待，稍等ing.....

呃……因为都是资源分享类的答题。所以也没有什么太重要的信息价值可言……所以都是模块、预制版复制模式答题= =。请自取所需。根据自己的情况查看答题内容。

谢谢合作！

黑客中演尼奥那个人还演过谁？

Keanu Reeves

生日：1964年9月2日

星座：处女座

出生地：黎马嫩贝鲁特

身高：185厘米 体重：77公斤

学历：高中辍学

家庭：父亲是半中国半夏威夷混血，母亲是英国人，两个妹妹Kim、Karina

嗜好： 机车、曲棍球、冲浪、戏剧（莎士比亚）、西洋棋、摇滚乐、骑马、跳舞

用手习惯：左撇子（签名用左手），但弹贝斯用右手

之一支广告：可口可乐

之一次舞台表演：Wolf boy（1984）（加拿大）

之一部电影：《Flying》（后更名《Dreams to Believe》美梦成真

更爱电影：《2001：A Space Odyssey》2001年太空漫游

更爱导演：Stanley Kubrick

最喜欢的合唱团：Joy Division、Sonic Youth Keanu的影片全部英文档案

电影名 …… （上映时间） ……角色 ……国度

Stompanato (2007) (announced) .... Johnny Stompanato

The Night Watchman (2006) (pre-production)

Fishing for Moonlight (2006) (pre-production)

The Lake House (2006)(美版触不到的恋情) (post-production) .... Alex Burnham...美国

A Scanner Darkly(黑暗扫描仪) (2006.7.) .... Fred/Bob Arctor.....美国

Constantine康斯坦丁/地狱神探/驱魔神探（2005、2、3香港首映）……Constantine…

…【美国】

Thumbsucker吸拇指的人 （2005圣丹斯电影节上映）…… Dr. Perry Lyman【美国】 （本片获柏林电影节银熊奖）[配角]

Something's Gotta Give爱是妥协 /玩转男人心/爱你在心眼难开(2003) .... Julian Mercer 【美国】[配角]

Matrix Revolutions, The黑客帝国3：矩阵革命 骇客任务完结篇：最后战役/22世纪

杀人 *** 3:惊变世纪 (2003) .... Neo ... aka Matrix Revolutions: The IMAX Experience, The (2003) (USA: IMAX version (promotional title)) 【美国】

Kid's Story (2003) (voice) .... Neo 【美国】（配音）

... aka Animatrix: Kid's Story, The (2003) (USA: series title) 【美国】

Enter the Matrix进入矩阵 (2003) (VG) .... Neo 【美国】（配音）

Matrix Reloaded, The 黑客帝国2：重装上阵/骇客任务2//二十二世纪杀人 *** 2/22世

纪杀人 *** 2/ (2003) .... Neo 【美国】

... aka Matrix Reloaded: The IMAX Experience, The (2003) (USA: IMAX version (promotional title)) 【美国】

Animatrix, The 骇客帝国动画版(2003) (V) (voice) .... Neo (segment "Kid's Story") 【美国】（Keanu配音）

Hard Ball 追梦高手/棒球教练(2001) .... Conor O'Neill……aka Hardball (2001) (Germany) (USA: alternative spelling)【美国/德国】

Sweet November甜蜜十一月 /偷心之约/深秋生死恋(2001) .... Nelson Moss 【美国

】

Gift, The 惊魂眼/灵异大逆转/天赋(2000) .... Donnie Barksdale 【美国】[配角]

Watcher, The 偷窥杀手/凶手正在看着你/正义守望者(2000) .... David Allen Griffin 【美国】（反派角色）[配角]

Replacements, The 后备天王/十全大补男/替补队员/ (2000) .... Shane Falco【美

国】

Me and Will我和维尔 (1999) .... Dogstar/Himself 【美国】（天狼星乐队出动）[

配角]

Matrix, The 骇客任务/2020杀人 *** /二十二世纪杀人 *** /22世纪杀人 *** / (1999) .... Neo (Thomas A. Anderson) 【美国】（本片获奥斯卡两个技术奖项和MTV大奖）

Devil's Advocate, The魔鬼代言人/追魂交易/火速大行动/ (1997) .... Kevin Lomax 【美国】

... aka Im Auftrag des Teufels (1998) (Germany) 【美国】

Last Time I Committed Suicide, The我最后一次自杀/意气风发/相恋不如偶遇 (1997) .... Harry 【美国】[配角]

Feeling Minnesota感觉明尼苏达/ 爱上明尼苏达/不羁的感觉(1996) .... Jjaks Clayton 【美国】

Chain Reaction 连锁反应/连锁反击(1996) .... Eddie Kasalivich 【美国】

Walk in the Clouds, A 云中漫步/漫步在云端/真爱的风采(1995) .... Paul Sutton 【美国】

Johnny Mnemonic非常特务/捍卫机密/约翰尼记忆术/非常任务 (1995) ... aka Johnny Mnémonique (1995) (Canada: French title) 【美国/加拿大】

Speed生死时速/捍卫战警 (1994) .... Officer Jack Traven 【美国】

Little Buddha小活佛 (1993) .... Siddhartha 】（释迦牟尼啊！！）【英国/法国

... aka Little Buddha (1993) (France) 【美国】

Even Cowgirls Get the Blues蓝调牛仔妹/叻女站起来/蓝调女牛仔(1993) .... Julian Gitche 【美国】[配角]

Freaked 怪人集团 (1993) (uncredited) .... Ortiz the Dog Boy ... aka Hideous Mutant Freekz (1993) 【美国】[配角]

Much Ado About Nothing 都是男人惹的祸/抢得有情郎/无事生非/庸人自扰/抱得有情

郎(1993) .... Don John 【美国/英国】 （反派角色）[配角]

Dracula德古拉/吸血惊情四百年/吸血僵尸惊情四百年/吸血鬼(1992) .... Jonathan Harker 【美国】（本片获奥斯卡更佳服装、化妆和音效奖 ）[配角]

.... aka Bram Stoker's Dracula (1992) (USA: complete title) 【美国】

Captivated '92: The Video Collection (1991) (V) .... Jim (segment "Rush, Rush") （出演MTV）

Providence天意 (1991) .... Eric 【美国】

My Own Private Idaho男人的一半还是男人/不羁的天空/我私人的爱达荷/我自己的爱

达荷(1991) .... Scott Favor 【美国】（本片获威尼斯电影节男主角奖）

Bill Ted's Bogus Journey 阿比阿弟畅游鬼门关/比尔和泰德畅游鬼门关(1991) .... Ted Logan/Evil Ted 【美国】

Point Break惊暴点/终极豪情 (1991) .... FBI Special Agent Johnny 'John' Utah 【美国】

Bill Ted's Excellent Adventures 阿比阿弟的冒险/超时空历险记/比尔与泰德历险

记(1990) TV Series (voice) .... Ted Logan【美国】

Tune in Tomorrow 情人有约/迎接明天（1990) .... Martin Loader 【美国】

.... aka Aunt Julia and the Scriptwriter (1990) 【美国】

I Love You to Death 我真的爱死你 (1990) .... Marlon James【美国】[配角]

Life Under Water 水下的生活(1989) (TV) .... Kip 【美国】（电视肥皂剧）[？]

Parenthood温馨家族/茶煲爹地(1989) .... Tod Hawkes 【美国】[配角]

Dangerous Liaisons 危险关系/危险的关系/孽网焚情/危险联络（1988） .... Chevalier Danceny 【美国】[配角]

Prince of Pennsylvania, The 魔鬼小霸王/宾西法尼亚王子(1988) .... Rupert Marshetta 【美国/英国】

Permanent Record永久的记忆/高校的血 (1988) .... Chris Townsend 【美国】

Night Before, The 昨夜(1988) .... Winston Connelly 【美国】

Brotherhood of Justice 正义兄弟会 (1986) (TV) .... Derek 【美国】

Flying (1986)飞翔/划地彩虹/梦想成真 .... Tommy 【加拿大】

... aka Dream to Believe (1986) 【美国】（后改名为《梦想成真》）

... aka Teenage Dream (1986) (video title)

Babes in Toyland (1986) (TV) .... Jack/Jack-be-Nimble 【美国】（电视电影）

Under the Influence (1986) (TV) .... Eddie Talbot 【美国】（电视电影）

River's Edge大河边缘/河畔(1986) .... Matt 【美国】

Young Again血性小子/神威小虎队/热血男儿(1986) (TV) (as K.C. Reeves) .... Michael Riley, Age 17 【美国】[配角]

Act of Vengeance报复行动 (1986) (TV) .... Buddy Martin 【美国】（电视电影）

Youngblood 高校的血(1986) .... Heaver 【美国】

One Step Away (1985) 【美国】

Letting Go 解雇(1985) (TV) .... Client 【美国】

Going Great 走向伟大(1982) TV Series .... Co-Host (season 3 only)【美国】（

加拿大）

经典角色

在奇洛的从影经历里（拍了不下于50部片子）有四个里程碑式的角色，四个让世界疯狂

的角色。

泰德 西奥多 罗根 1989年 《比尔和泰德历险记》

这部他早期参演的科幻喜剧片让他在影坛崭露头角。

特工约翰尼 尤塔 1991年《终极豪情》

在剧中一个处于内心世界充满矛盾挣扎的卧底，最后他还是战胜自我伸张正义。这部影

片使他进一步得到观众认可。

警官杰克 特拉文 1994《《生死时速》

这是他进入之一个真正意义上事业高峰期的代表作，使他迅速成为炙手可热的偶像。

尼奥（Neo）1999《黑客帝国》系列

黑客三部曲最终确定了他世界超级明星的地位