大資料(big data),指無法在一定時間範圍內用常規軟體工具進行捕捉、管理和處理的資料集合,是需要新處理模式才能具有更強的決策力、洞察發現力和流程優化能力的海量、高增長率和多樣化的資訊資產。目前,大資料算是非常火的專業,下面我將和大家談談大資料專業學什麼?
大資料專業分為兩種,其一是大資料開發,其二是資料分析與挖掘。
1、大資料開發:ja-va、大資料基礎、hadoop體系、scala、kafka、spark等內容;
2、資料分析與挖掘:python、關係型資料庫mysql、文件資料庫mongodb、記憶體資料庫redis、資料處理、資料分析等。
大資料需要學什麼
一般處理t 1資料,這裡的t可以代表一天,一周 乙個月以及一年等。這裡我用的hadoop的版本是hadoop 2.x,它有四個模組 common hdfs mapreduce yarn 下面是hadoop的四個模組的詳細介紹 模組介紹 hadoop common 支援其他模組的工具模組 hadoop...
為什麼應該保護雲中的大資料
將大資料和雲計算結合是企業滿足計算需求的完美解決方案。企業的資料通常需要乙個計算環境,快速有效地發展,並具有更大靈活性,自動適應大量資料。在在雲計算環境下可以做到這一點。然而討論雲計算時不斷出現的一些問題。雲計算如何保持安全?保護資料,尤其是大資料是乙個重要問題。公司預計,儲存在雲中的任何資料都將被...
學習,學什麼
學習,我們要學什麼?學要學會,學會是什麼,學會是學懂,學東並不是記憶。也不需要記憶,所以,再我們這個行業,面對日新月異的技術革新。我們要提高理解力,提高對整個行業的理解力。這樣我們面對任何一門技術都能迅速的看清他的原理。乙個框架,一門語言,一種思想。其實一百種語言不會比一種語言的知識元素高出多少。所...