大數(shù)據(jù)要學(xué)哪些東西

大數(shù)據(jù)要學(xué)哪些東西

大數(shù)據(jù)要學(xué)哪些東西？大數(shù)據(jù)目前這個詞很火，作為編程人員是必須學(xué)習(xí)的基礎(chǔ)知識之一，對于其它行業(yè)的同時，了解一下大數(shù)據(jù)也是非常有必要的，也許你們公司將來有一天就會使用大數(shù)據(jù)技術(shù)來分析你們公司的發(fā)展方向，畢竟這是一個大數(shù)據(jù)時代。以下是小編為你整理的大數(shù)據(jù)要學(xué)哪些東西

首先簡介一下大數(shù)據(jù)能夠干什么：首先舉個例子，大家都喜歡上淘寶買東西，淘寶網(wǎng)站會記錄每個人在它網(wǎng)站上都買了什么，瀏覽了什么。。。等等一系列信息。然后分析什么產(chǎn)品賣的火爆，哪個客戶喜歡買什么，那個商家盈利高等等，挖掘一系列有潛在價值

其次分析一下大數(shù)據(jù)的含義，大數(shù)據(jù)既然含有數(shù)據(jù)這個詞匯，就表明他是和數(shù)據(jù)相關(guān)的，而數(shù)據(jù)無非就是如何存儲數(shù)據(jù)和如何使用存儲的數(shù)據(jù)這兩個問題

首先說一下如何存儲：傳統(tǒng)的數(shù)據(jù)都是保存在關(guān)系型數(shù)據(jù)庫，比如oracle和mysql等，這些數(shù)據(jù)庫存儲空間是有限的，并且數(shù)據(jù)庫的東西多了之后，查詢存取的速度會變得很慢，根本做數(shù)據(jù)分析等。此外傳統(tǒng)數(shù)據(jù)都安裝在一臺服務(wù)器上，一旦服務(wù)器宕機(jī)了，數(shù)據(jù)庫的內(nèi)容就全部銷毀了，無法恢復(fù)

大數(shù)據(jù)的含義就是說數(shù)據(jù)量很大，數(shù)據(jù)量達(dá)到pb級別，大公司也許需要幾千臺服務(wù)器才能存儲，用的是分布式存儲技術(shù)。所謂的分布式存儲技術(shù)是指，同樣一份文件，分別存儲在3臺不同的服務(wù)器上，假設(shè)其中服務(wù)器掛機(jī)了，還有另外兩臺服務(wù)器工作，并且迅速備份一份文件，始終保證相同文件有3臺服務(wù)器提供工作

大數(shù)據(jù)的使用主要是指根據(jù)公司需求，對現(xiàn)有的數(shù)據(jù)進(jìn)行挖掘分析。而挖掘分析做的最多的就是查詢數(shù)據(jù)，大數(shù)據(jù)的查詢速度是非常快的，因為底層用的是類似于lucene技術(shù)。但是大數(shù)據(jù)不適合修改存儲的文件。因為大數(shù)據(jù)存儲數(shù)據(jù)是以文件的形式存儲的，如果想修改數(shù)據(jù)，它會把原先的文件刪掉，然后重新寫入。

最后什么人適合學(xué)習(xí)大數(shù)據(jù)：一般做數(shù)據(jù)的公司通常都會要求你會大數(shù)據(jù)，其次互聯(lián)網(wǎng)行業(yè)也用到了大數(shù)據(jù)相關(guān)的部分技術(shù)，比如：zookeeper，但是你要想找到一份好的工作，大數(shù)據(jù)知識是必須有所了解。