基于Spark計(jì)算的數(shù)據(jù)分析應(yīng)用研究

打開文本圖片集

關(guān)鍵詞：Spark;大數(shù)據(jù)；分析管理；應(yīng)用研究

1引言

隨著互聯(lián)網(wǎng)、云計(jì)算和人工智能的快速發(fā)展，人們的日常生活和工作中會(huì)產(chǎn)生大量的小文件，如圖片、信息等數(shù)據(jù)文件。這些小文件數(shù)據(jù)規(guī)模越來越大，因此，高效地管理海量小文件數(shù)據(jù)是非常重要的應(yīng)用需求。數(shù)字?jǐn)?shù)據(jù)的數(shù)量爆炸使得研究人員和開發(fā)人員尋找更加科學(xué)合理的新方法，“大數(shù)據(jù)”應(yīng)運(yùn)而生。（剩余3649字）