什么是大数据技术? 现在发展怎样?

广告位

想要了解这个问题,那么首先设想这样一个情景,10年前和现在, 当你在思考一个问题,请问你会怎么办?  如果在1…

想要了解这个问题,那么首先设想这样一个情景,10年前和现在, 当你在思考一个问题,请问你会怎么办?  如果在10年前,你会去翻书,会去百般周折问专家,又或者不知所措。但是现在,你只需要通过一个神奇的工具来作为核心达到这个目的—网络和背后的数据。

我所希望传达的意思,是在我们现在进入了一个时代,这个时代绝对不缺乏技术,不缺乏专家,做技术做专家的人太多的。 网络的产生,让无数的专业和业余爱好者在主动的传播着自己的知识和技术,也同时留下了自身的很多行为信息。 这些信息,零零散散。如果设想,我们可以把这些信息组合起来,他们不就是 每一种技术,每一个人,每一个事物的DNA和血液吗,如果掌握了DNA,我们不就能掌握这个人/技术/事物了吗???这个想法放在过去,实际操作中我们是无法实现的,因为信息每天在产生,无法采集,再说我们也没有那么多科学家去处理和分析这些数据。 但是,当我们进入了科学发展的第四个领域—资料时代,这个想法依赖科技的进一步变革,将被实现。

什么是第四个阶段?这里引用到一个IT精英的话语。Jim Gray 是一位著名資料庫專家,曾經獲得有電腦界諾貝爾獎之稱的圖靈獎 (Turing Award),他的个人传记中写到一句话:‘’科學發展已經走過了「實驗、理論、計算」三個階段,而進入了第四個以「資料」為重點的階段,也就是他所稱的第四典範。過去幾十年來是計算科學大行其道的時代,各種重要的資料庫技術和演算法,都在過去幾十年漸漸成熟;而現在由於全世界物聯化 (instrumented) 以及互連化 (inter-connected) 的關係,讓全世界的資料在任何領域都以非常快的速度在累積,而且累積的速度遠遠超過現在所有企業所能處理的速度。由於資料累積的量和速度都是前所未見,而且其中的確蘊含寶貴的資訊金礦,因此在科學研究或是其他各種領域,大家都轉而以資料分析來為科學研究或是企業組織提供發展方向、尋求突破。‘’  资料的全面分析,给我们所想要了解的事物一个全貌的解释。

当然,‘通过数据了解某个 人或者技术或者事物’,这样的想法还不能驱使  微软,IBM,高盛等等这样的全球领衔的以商业至上的企业大肆鼓舞。 他们真正感兴趣的,是大数据时代下,依托云计算的计算机通过解析人/技术/事物的过去和现在的特质,所能实现对未来的“预测功能”: 一家英國倫敦基金公司 Derwent Capital Markets 在去年五月的時候,推出了世界第一支基於 twitter 上公眾情緒來進行投資的對沖基金,並且承諾每年 15 ~ 20% 的高報酬率。相較於最近台灣的投信還在聯合公司派炒股票被抓包,人家顯然進步得多 (無誤)。雖然這一支對沖基金僅僅一個月後就清算不做了,(月報酬率有 1.86%,以對沖基金來說算不錯了),我們在這個特別的基金當中,卻明顯看到了 big data 帶來的威力以及我們對未來的想像。實際上,美國一位教授 Johan Bollen 就因為發現 Twitter 對於股市的預測效用,竟然因此在上個月獲得了一項專利。Twitter 自然也知道自己的平台有這樣的預測和分析作用,所以也推出了 Twindex 這項即時分析政治情勢和總統大選的服務。

仅仅拥有单一数据渠道来源(也就是只有本公司的)的facebook,google, 基金公司,twitter公司通过数据已经实现了如此震撼我们的预测,那么当我们努力实现让所有类型的数据都整合在一起,交给计算机,他将带来多大的小宇宙力量!那么关于人类,国家资源调配,商业活动趋势,自然灾害预测,所有问题虽然不能在短时间内完全掌握,但是可以确保的是,他一定能—-优化现有所有的资源,协助解决一切我们想解决的问题。背后蕴藏的,是无限的可能,不论是政治,文化,还是商业。

这就是为什么,一呼百应,所有企业都在呼吁的原因。

上面的话可能太繁琐了,那么我们简单化一点来看这个问题, 数据一定是人类最终追求的终点,why?
比如你问我,     知乎这个网站专业么?
1.我说,专业。不管你信不信,反正我信了—-  我这样回答,估计也说服不了你。
2.我拿出一大报告,指着上面的‘数据’说,据我调查,知乎上95%的人都是受过高等教育的学者和专业领域爱好者。所以, 他专业。———–这样的回答,你会相信知乎专业了么?

数据,代表了信心,给了我们想要理解但不了解事物的信心。

如果你对大数据开发感兴趣,想系统学习大数据的话,可以加入大数据技术学习交流扣扣君羊:522189307,欢迎添加,私信管理员,了解课程介绍,获取学习资源。

大数据小光头

关于作者: 大数据小光头

为您推荐