長沙Python處理大數(shù)據(jù)的劣勢和優(yōu)勢是什么

       Python處理大數(shù)據(jù)的劣勢和優(yōu)勢是什么？python能處理數(shù)以百萬行級的大數(shù)據(jù)，但是也有它的優(yōu)勢與劣勢。而對于現(xiàn)在的大數(shù)據(jù)量，百萬行級并不算多，而其起點一般都是在10億以上。python的優(yōu)勢不在于運行效率，而在于開發(fā)效率和高可維護性。針對特定的問題挑選合適的工具，本身也是一項技術(shù)能力。下面我們來看看Python處理大數(shù)據(jù)的劣勢和優(yōu)勢是什么。

       Python處理大數(shù)據(jù)的劣勢：

       1、python線程有g(shù)il，通俗說就是多線程的時候只能在一個核上跑，浪費了多核服務(wù)器。在一種常見的場景下是要命的：并發(fā)單元之間有巨大的數(shù)據(jù)共享或者共用(例如大dict)，多進程會導致內(nèi)存吃緊，多線程則解決不了數(shù)據(jù)共享的問題，單獨的寫一個進程之間負責維護讀寫這個數(shù)據(jù)不僅效率不高而且麻煩

       2、python執(zhí)行效率不高，在處理大數(shù)據(jù)的時候，效率不高，這是真的，pypy(一個jit的python解釋器，可以理解成腳本語言加速執(zhí)行的東西)能夠提高很大的速度，但是pypy不支持很多python經(jīng)典的包，例如numpy(順便給pypy做做廣告，土豪可以捐贈一下PyPy - Call for donations)

       3、絕大部分的大公司，用java處理大數(shù)據(jù)不管是環(huán)境也好，積累也好，都會好很多

       Python處理數(shù)據(jù)的優(yōu)勢(不是處理大數(shù)據(jù))：

       1、異�？旖莸拈_發(fā)速度，代碼量巨少

       2、豐富的數(shù)據(jù)處理包，不管正則也好，html解析啦，xml解析啦，用起來非常方便

       3、內(nèi)部類型使用成本巨低，不需要額外怎么操作(java，c++用個map都很費勁)

       4、公司中，很大量的數(shù)據(jù)處理工作是不需要面對非常大的數(shù)據(jù)的

       5、巨大的數(shù)據(jù)不是語言所能解決的，需要處理數(shù)據(jù)的框架雖然小眾，但是python還是有處理大數(shù)據(jù)的框架的，或者一些框架也支持python

       6、編碼問題處理起來太方便了

       Python處理大數(shù)據(jù)的劣勢和優(yōu)勢是什么？通過上面的介紹大家應(yīng)該有所了解了，希望能給熱愛大數(shù)據(jù)開發(fā)的同學帶來幫助。

      注：尊重原創(chuàng)文章,轉(zhuǎn)載請注明出處和鏈接 http://www.elsolbar.com/news-id-49859.html 違者必究！部分文章來源于網(wǎng)絡(luò)由培訓無憂網(wǎng)編輯部人員整理發(fā)布,內(nèi)容真實性請自行核實或聯(lián)系我們，了解更多相關(guān)資訊請關(guān)注數(shù)據(jù)庫工程師頻道查看更多，了解相關(guān)專業(yè)課程信息您可在線咨詢也可免費申請試課。關(guān)注官方微信了解更多：150 3333 6050