• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于Spark的遙感數(shù)據(jù)分析方法

    2015-07-26 02:29:50陳峰科孫眾毅池明旻
    微型電腦應(yīng)用 2015年8期
    關(guān)鍵詞:分布式計算內(nèi)存集群

    陳峰科,孫眾毅,池明旻

    基于Spark的遙感數(shù)據(jù)分析方法

    陳峰科,孫眾毅,池明旻

    隨著遙感技術(shù)的快速發(fā)展,遙感數(shù)據(jù)呈爆炸式增長,給遙感數(shù)據(jù)計算帶來巨大的挑戰(zhàn)。采用基于內(nèi)存計算的Spark分布式計算框架以克服該問題,并選擇YARN作為資源調(diào)度系統(tǒng)和采用HDFS為分布式存儲系統(tǒng)。Spark是一個開源的分布式計算框架,基于彈性分布式數(shù)據(jù)集(RDD)概念,采用先進(jìn)的有向無環(huán)圖執(zhí)行機(jī)制以支持循環(huán)數(shù)據(jù)流操作,通過一次數(shù)據(jù)導(dǎo)入內(nèi)存就可以完成多次迭代運(yùn)算。因而,特別適合基于多次迭代的大數(shù)據(jù)計算分析方法,相較于每輪迭代需把數(shù)據(jù)導(dǎo)入內(nèi)存的MapReduce有更大的優(yōu)勢。將該計算框架應(yīng)用于海量遙感數(shù)據(jù)分析,驗證需要多次迭代的奇異值分解(SVD)算法在該數(shù)據(jù)分析中的有效性。實(shí)驗表明,隨著迭代次數(shù)增加,基于Spark的SVD運(yùn)算效率相對于MapReduce有明顯提高,通??商岣咭粋€數(shù)量級。

    大數(shù)據(jù)計算;遙感數(shù)據(jù);Hadoop;Spark;MapReduce

    0 引言

    目前,世界上有超過1000個正在工作的衛(wèi)星實(shí)現(xiàn)對地觀測的任務(wù)[1]。其中,大量的衛(wèi)星用于民用工程,數(shù)據(jù)全球可共享,為科學(xué)研究提供有力的數(shù)據(jù)保障。隨著遙感技術(shù)的飛速發(fā)展,遙感圖像的空間和光譜分辨率也越來越高,可以獲取的遙感數(shù)據(jù)量也迅猛增長。通常,機(jī)器學(xué)習(xí)、模式識別和數(shù)據(jù)挖掘方法用來分析和理解遙感圖像。其中,大量的算法需要大量迭代運(yùn)算,比如用于分類的邏輯回歸方法、用于特征提取的SVD(Singular Value Decomposition)等。而遙感數(shù)據(jù)爆炸性增長給這類方法帶來巨大的計算挑戰(zhàn)。為了解決該問題,目前常用的方法有基于GPU加速的高性能計算系統(tǒng)和基于Hadoop的分布式集群。

    CUDA[2]和OpenCL[3]是基于圖形處理器(GPU)的并行計算編程模型,適合需要大量計算的應(yīng)用,以此為基礎(chǔ)的傳統(tǒng)高性能計算系統(tǒng)被廣泛用于研究領(lǐng)域。GPUs在浮點(diǎn)運(yùn)算和并行計算方面相對于 CPUs有著巨大的優(yōu)勢,使得使用GPU可以大幅提高計算速度。深度學(xué)習(xí)是一種需要大量計算的多次迭代算法,英偉達(dá)在[4]中提出了基于CUDA的深度神經(jīng)網(wǎng)絡(luò)包CUDNN(CUDA Deep Neural Network library),實(shí)驗結(jié)果顯示深度學(xué)習(xí)框架利用cuDNN加速后獲得了36%的速度提升。但是,雖然GPU加速能提高計算速度,卻對于數(shù)據(jù)密集型計算效率不高,而且代碼編寫調(diào)試復(fù)雜。

    Hadoop[5,6]的核心分為兩部分:HDFS分布式文件系統(tǒng)[4]和MapReduce計算框架[5]。在處理大量文件時,相對于傳統(tǒng)的本地文件系統(tǒng),HDFS在吞吐率和穩(wěn)定性方面有很大的優(yōu)勢。除此之外,[7-8]中工作證明,基于 MapReduce實(shí)現(xiàn)的分布式算法能夠在批量處理數(shù)據(jù)的任務(wù)中相對于單機(jī)實(shí)現(xiàn)的算法有極大的性能優(yōu)勢。然而,在許多迭代進(jìn)行的計算任務(wù)中因為在每一輪迭代過程中,中間數(shù)據(jù)集都需要從硬盤中加載,如此的 IO操作會消耗大量的時間,限制了基于MapReduce在如機(jī)器學(xué)習(xí)等多次迭代算法上的速度性能優(yōu)勢。Hadoop和 GPU加速技術(shù)的結(jié)合(CUDA+Hadoop[9], OpenCL + Hadoop[10]),在一定程度上能夠提高計算速度,但在涉及多次迭代機(jī)器學(xué)習(xí)算法時候,依然受 MapReduce每輪中間數(shù)據(jù)集讀寫時間的掣肘。Mahout是基于MapReduce的機(jī)器學(xué)習(xí)包,2014年4月份Mahout社區(qū)宣布,Mahout不再接受基于MapReduce實(shí)現(xiàn)的算法,轉(zhuǎn)向Spark[11]。Spark是一個基于內(nèi)存計算的開源分布式計算框架,其是一個快速且易于使用的計算框架,核心數(shù)據(jù)結(jié)構(gòu)為彈性分布式數(shù)據(jù)集(RDD),擁有先進(jìn)的有向無環(huán)圖(DAG,Directed Acyclic Graph)執(zhí)行引擎,能夠有效處理循環(huán)數(shù)據(jù)流。當(dāng)集群內(nèi)存充足時,基于Spark的多次迭代機(jī)器學(xué)習(xí)算法只需要在第一次迭代時將數(shù)據(jù)從硬盤中導(dǎo)入內(nèi)存,相對于基于MapReduce的多次迭代算法來說,節(jié)省了中間數(shù)據(jù)集硬盤讀寫的時間。這些特有的性質(zhì),使得Spark特別適用于機(jī)器學(xué)習(xí)與數(shù)據(jù)挖掘算法,基于Spark的多次迭代算法能夠在保持高可靠性和容錯性的情況下相對于基于MapReduce算法擁有更強(qiáng)的速度性能優(yōu)勢。在許多實(shí)際任務(wù)中,基于Spark的多次迭代算法比基于MapReduce實(shí)現(xiàn)的算法在時間上可以快10倍以上。

    本文提出了一個基于Spark的遙感數(shù)據(jù)處理平臺,能夠有效應(yīng)對遙感數(shù)據(jù)日益增長對于相關(guān)算法處理數(shù)據(jù)帶來的挑戰(zhàn)。該平臺由兩部分組成:分布式存儲系統(tǒng)和分布式計算框架。在該平臺中,選擇了Hadoop的分布式文件系統(tǒng)(HDFS)作為分布式存儲。分布式計算框架由傳統(tǒng)的MapReduce和基于內(nèi)存的Spark組成,其中Spark由于其能高效實(shí)現(xiàn)機(jī)器學(xué)習(xí)等多輪迭代算法而被選為平臺核心框架?;贛apReduce實(shí)現(xiàn)的機(jī)器學(xué)習(xí)包Mahout和基于Spark實(shí)現(xiàn)的機(jī)器學(xué)習(xí)包MLlib在該平臺上都可以使用,里面包含了大部分主流的機(jī)器學(xué)習(xí)算法,可以為遙感大數(shù)據(jù)的處理提供支撐。為驗證平臺的有效性,并評估不同計算框架的性能,本文在構(gòu)建的平臺上對于兩個公開數(shù)據(jù)集,分別基于 Spark和MapReduce實(shí)現(xiàn)了奇異值分解(SVD)。SVD是一種多次迭代算法,是許多遙感數(shù)據(jù)處理算法的重要組成部分。實(shí)驗結(jié)果顯示,隨著迭代次數(shù)的增加,Mahout中基于MapReduce實(shí)現(xiàn)的SVD和MLlib中基于Spark實(shí)現(xiàn)的SVD運(yùn)行速度上的差距逐漸增大。當(dāng)?shù)啍?shù)到達(dá)一定數(shù)量之后,基于Spark實(shí)現(xiàn)的SVD比基于MapReduce實(shí)現(xiàn)的SVD有十倍以上的性能優(yōu)勢。

    1 數(shù)據(jù)處理平臺介紹

    隨著可利用的遙感數(shù)據(jù)量日益增長,即使是使用GPUs加速,單機(jī)也越來越難滿足需要。開發(fā)能夠快速有效處理遙感數(shù)據(jù)的分布式平臺顯得愈發(fā)緊迫與重要。數(shù)據(jù)處理平臺通常分為兩個部分:分布式存儲系統(tǒng)和分布式計算框架。以HDFS、Hbase為代表的分布式存儲系統(tǒng)已經(jīng)被廣泛應(yīng)用于各個領(lǐng)域的大數(shù)據(jù)存儲系統(tǒng)之中。MapReduce因其在數(shù)據(jù)密集型計算方面的巨大優(yōu)勢,是目前大部分應(yīng)用中分布式平臺的最主要選擇。在本文提出的平臺中,分布式存儲系統(tǒng)采用了以GFS[12]為基礎(chǔ)的HDFS分布式文件系統(tǒng)。在使用平臺對數(shù)據(jù)進(jìn)行處理之前,遙感數(shù)據(jù)需要首先導(dǎo)入到HDFS中。基于內(nèi)存計算的Spark,被選擇作為主要的分布式計算框架。平臺同時整合了Hadoop的MapReduce計算框架。Apache YARN被選擇作為平臺的任務(wù)調(diào)度系統(tǒng),YARN位于HDFS和分布式計算框架之間,為多個運(yùn)行中的應(yīng)用分配資源。YARN能夠支持Spark和MapReduce等多種計算框架,使得在平臺上,基于Spark的機(jī)器學(xué)習(xí)包MLlib和基MapReduce的機(jī)器學(xué)習(xí)包Mahout里面的算法皆可使用。本文提出的平臺,在滿足一般分布式平臺具有的存儲和批量處理遙感數(shù)據(jù)功能之外,還能實(shí)現(xiàn)迭代運(yùn)算對數(shù)據(jù)的快速處理。在這一章剩下的部分,我們將對我們工作中涉及到的分布式技術(shù)做進(jìn)一步的介紹。

    1.1 Hadoop

    Hadoop包含一系列分布式存儲和處理數(shù)據(jù)技術(shù),是一個由Apache基金會支持的開源項目,同時滿足容錯、可伸縮,并且易于擴(kuò)展,易于學(xué)習(xí)。Hadoop的核心分為兩部分:分布式文件系統(tǒng) HDFS和分布式計算框架 MapReduce。Hadoop的完善與普及,使得原本需要昂貴的超級計算機(jī)才能解決的數(shù)據(jù)任務(wù)在使用一般的服務(wù)器組成的集群中就能得到高效解決。通常情況下,隨著集群規(guī)模變大,硬件損壞頻率會越來越高,Hadoop容錯機(jī)制都能夠保證任務(wù)在一般硬件損壞情況下成功執(zhí)行。如今,Hadoop已經(jīng)能夠管理數(shù)千臺機(jī)器,對PB級別的數(shù)據(jù)進(jìn)行存儲和處理。

    1.2 Mahout

    ApacheMahout是一個可擴(kuò)展機(jī)器學(xué)習(xí)包,在ApacheHadoop項目的基礎(chǔ)上,基于MapReduce編程模型實(shí)現(xiàn)的。Mahout能從多個數(shù)據(jù)源中讀取數(shù)據(jù),利用數(shù)據(jù)科學(xué)的工具分析挖掘數(shù)據(jù)。Mahout的目的在于使得算法處理過程速度更快,數(shù)據(jù)規(guī)模更加容易擴(kuò)展。到目前為止,Mahout支持四種數(shù)據(jù)處理應(yīng)用:協(xié)同過濾,聚類,分類和頻繁項集挖掘。大部分經(jīng)典的機(jī)器學(xué)習(xí)算法在Mahout中都有實(shí)現(xiàn)。

    1.3 Spark

    ApacheSpark是一個Scala語言實(shí)現(xiàn)的基于內(nèi)存計算用于處理大規(guī)模數(shù)據(jù)的快速通用引擎。雖然MapReduce模型在分布式批量處理任務(wù)的現(xiàn)實(shí)應(yīng)用中取得巨大的成功,但卻不能滿足涉及到循環(huán)數(shù)據(jù)流應(yīng)用的需要,而這種應(yīng)用在機(jī)器學(xué)習(xí)與數(shù)據(jù)挖掘算法中是十分常見的。Spark技術(shù)的提出正因為此,在保證與MapReduce可以媲美的可擴(kuò)展性和容錯性的基礎(chǔ)上,滿足循環(huán)數(shù)據(jù)流應(yīng)用的需要。Spark基于其創(chuàng)造性的彈性分布式數(shù)據(jù)集(RDD)概念,使用先進(jìn)的有向無環(huán)圖(DAG)執(zhí)行機(jī)制,能夠支持循環(huán)數(shù)據(jù)流的應(yīng)用和內(nèi)存計算。在許多機(jī)器學(xué)習(xí)任務(wù)中,Spark能夠在執(zhí)行速度上遠(yuǎn)遠(yuǎn)超越MapReduce。Spark被設(shè)計為可以獨(dú)立地運(yùn)行,其也能夠與其它主流分布式存儲系統(tǒng)與任務(wù)調(diào)度系統(tǒng)合作工作。在本文提出的平臺之中,Spark被作為一種計算框架置于YARN之上,與MapReduce同時運(yùn)行于集群之上。

    1.4 Spark vsMapReduce

    Spark與MapReduce相比,其有如下優(yōu)勢:

    基于內(nèi)存計算。中間數(shù)據(jù)集保存于內(nèi)存之中,無需反復(fù)讀取硬盤,適合于迭代計算任務(wù)。

    DAG 執(zhí)行引擎。Spark執(zhí)行過程中沒有嚴(yán)格的Map/Reduce階段,通過其獨(dú)有的血緣機(jī)制,在保證容錯性下進(jìn)一步減少硬盤讀寫操作。

    容易編程。Spark是由函數(shù)式語言Scala實(shí)現(xiàn)的,可以通過Scala編寫創(chuàng)建任務(wù),代碼編寫更加靈活。

    Spark相比MapReduce更加適合于如機(jī)器學(xué)習(xí)與數(shù)據(jù)挖掘等迭代計算任務(wù),而MapReduce在數(shù)據(jù)密集型計算中仍然保持了強(qiáng)大的競爭力。兩者互補(bǔ)已經(jīng)成為當(dāng)今主流分布式平臺構(gòu)建時的共識。

    2 實(shí)驗數(shù)據(jù)集和實(shí)驗設(shè)置

    隨著遙感技術(shù)和互聯(lián)網(wǎng)技術(shù)的快速發(fā)展,可以獲取的遙感數(shù)據(jù)來源逐漸增多,越來越多的高光譜與高分辨率數(shù)據(jù)被應(yīng)用于各類科學(xué)研究中。如何快速有效地處理遙感數(shù)據(jù)從未像現(xiàn)在一般迫切和重要。在本章的剩余部分,我們簡單我們實(shí)驗中涉及到的遙感數(shù)據(jù)集,并對實(shí)驗設(shè)定做一個詳細(xì)的描述。

    2.1 實(shí)驗數(shù)據(jù)集

    (1)Indian_pines:1992年AVARIS傳感器在IndianPine上空拍攝的高光譜遙感圖像。圖像大小為145*145像素,每個像素點(diǎn)有220個波長,分布在0.36到2.5μm之間的波段中。

    (2)Pavia:由ROSIS-03衛(wèi)星在Pavia上空獲取的高光譜高分辨率(1.3m)圖像,每個像素點(diǎn)有103個波長在0.43到0.86μm之間的波段。分為Pavia和PaviaU兩張圖像,圖像覆蓋地點(diǎn)分別為Pavia市區(qū)和Pavia大學(xué)。

    2.2 集群配置

    本文提出的平臺在實(shí)驗集群上實(shí)現(xiàn)。實(shí)驗集群由5臺服務(wù)器組成,每臺服務(wù)器內(nèi)存為24GB,擁有四核處理器。服務(wù)器操作系統(tǒng)皆使用CentOS6.5,集群使用的分布式系統(tǒng)版本為Hadoop 2.5與Spark 1.0.1。

    2驗設(shè)置

    實(shí)驗在兩個公開遙感數(shù)據(jù)集上對于 Spark實(shí)現(xiàn)的 SVD和基于MapReduce實(shí)現(xiàn)的SVD算法進(jìn)行運(yùn)行時間比較,以證明本文提出的平臺在性能上對于遙感數(shù)據(jù)的處理與傳統(tǒng)分布式平臺有極大提升。SVD是許多遙感數(shù)據(jù)相關(guān)操作的重要組成部分,對于SVD操作的快速計算可以大幅提高有關(guān)算法的性能。由于在實(shí)際情況下,SVD實(shí)驗運(yùn)行時間與集群狀態(tài)擁有關(guān)聯(lián)性,集群內(nèi)存或者集群網(wǎng)絡(luò)的占用都會影響到任務(wù)執(zhí)行時間,單次實(shí)驗結(jié)果有一定隨機(jī)性。為保證實(shí)驗結(jié)果的科學(xué)與嚴(yán)謹(jǐn),每次SVD實(shí)驗都重復(fù)10次,并取平均計算時間作為最終結(jié)果值。

    3 實(shí)驗結(jié)果及分析

    顯示了基于Spark實(shí)現(xiàn)的SVD和基于MapReduce實(shí)現(xiàn)的SVD在IndianPine和 Pavia數(shù)據(jù)集上面隨著奇異值的增大運(yùn)算時間的變化情況。如圖1、圖2所示:

    圖1 :Indian_pines遙感數(shù)據(jù)集上的SVD計算時間

    圖2 :Pavia遙感數(shù)據(jù)集上的SVD計算時間

    在SVD的分布式實(shí)現(xiàn)中,當(dāng)奇異值的個數(shù)小于總的特征數(shù)量的一半時,算法的迭代次數(shù)隨著奇異值數(shù)量的增大而提升。實(shí)驗中使用數(shù)據(jù)集的數(shù)據(jù)規(guī)模(樣本數(shù)量和每個樣本的特征個數(shù))如表1所示:

    表格1:數(shù)據(jù)集規(guī)模

    從圖1、圖2的計算時間結(jié)果中可以看出,當(dāng)奇異值為1時,Spark的SVD比MapReduce的SVD并沒有優(yōu)勢。但是,從所有的數(shù)據(jù)集的實(shí)驗結(jié)果中我們可以看到,隨著奇異值數(shù)量的增大,算法的迭代次數(shù)增多,MapReduce的SVD運(yùn)行時間迅速增加。相對而言,Spark的SVD的運(yùn)行時間卻沒有隨著迭代次數(shù)的增加有快速提升。在相同數(shù)據(jù)集上,當(dāng)奇異值超過30時,MapReduce SVD消耗的時間是Spark SVD消耗的時間的10倍以上。

    無論基于何種計算框架,實(shí)驗數(shù)據(jù)皆需要在第一次迭代之前從硬盤中導(dǎo)入至內(nèi)存中,基于 MapReduce的算法在每一輪迭代中都需要進(jìn)行如第一輪中的硬盤讀寫操作。而對于基于內(nèi)存計算的Spark框架而言,迭代計算的中間數(shù)據(jù)集可以存儲于內(nèi)存中,無需進(jìn)行反復(fù)的硬盤讀寫。這使得由Spark實(shí)現(xiàn)的算法中,后面的迭代相比第一次迭代消耗的時間要短許多。內(nèi)存計算的特性為基于Spark的許多算法提供了無與倫比的性能優(yōu)勢。

    在SVD算法實(shí)際的運(yùn)行過程中,無論是MapReduce還是Spark,每一次計算的時間都遠(yuǎn)遠(yuǎn)小于數(shù)據(jù)導(dǎo)入內(nèi)存的時間,數(shù)據(jù)導(dǎo)入時間對于總體運(yùn)行時間起到了決定性因素然而數(shù)據(jù)導(dǎo)入內(nèi)存的時間因集群狀況,比如內(nèi)存使用和CPU占用等影響很大,這使得數(shù)據(jù)導(dǎo)入時間在一定程度上有很大的隨機(jī)性,甚至可能會出現(xiàn)導(dǎo)入相同的數(shù)據(jù)消耗的時間相差10倍以上的情況。在實(shí)驗結(jié)果中,即使是使用10次實(shí)驗的平均計算時間作比較,也出現(xiàn)了隨著迭代次數(shù)的增加,計算時間反而出現(xiàn)了減少的情況。但是這并沒有影響基于Spark的SVD算法對于基于MapReduce算法的巨大性能優(yōu)勢。

    4 總結(jié)

    本文提出基于Spark的分布式數(shù)據(jù)處理平臺。在該平臺中,HDFS作為分布式文件系統(tǒng),YARN作為資源調(diào)度框架,Spark作為主要分布是計算框架。為了驗證該平臺的計算有效性,實(shí)驗采用需要多次迭代算法SVD提取海量遙感數(shù)據(jù)的特征。實(shí)驗結(jié)果表明,基于Spark的分布式多次迭代算法相對于基于MapReduce實(shí)現(xiàn)的在計算效率上有顯著的提升。與傳統(tǒng)的MapReduce數(shù)據(jù)處理平臺相比,該平臺更適合處理利用多次迭代的數(shù)據(jù)方法處理海量遙感數(shù)據(jù)。

    [1] 姚禹,向晶.全球在軌衛(wèi)星數(shù)量突破1000顆大關(guān)[J].中國無線電,2012, (11):77-77.

    [2] CUDA, http://www.nvidia.com/object/cuda home new.html/.

    [3] Xu J Y. OpenCL–The Open Standard for Parallel Programming of Heterogeneous Systems[J]. 2008.

    [4] Chetlur S, Woolley C, Vandermersch P, et al. cudnn: Efficient primitives for deep learning[J]. arXiv preprint arXiv:1410.0759, 2014.

    [5] Borthakur,D.“The hadoopdistributed file system: Architecture anddesign,” [J]Hadoop ProjectWebsite,2007, 21(11).

    [6] Dean J and Ghemawat. S,“Mapreduce: simplified data processingon large clusters,” [C].Communications of the ACM,51(1):107–113, 2008.

    [7] Golpayegani.N and Halem.M “Cloud computing for satellite dataprocessing on high end compute clusters,” [J] in Cloud Computing, 2009.CLOUD’09. IEEE International Conference on. IEEE, 2009:88-92.

    [8] Pan.X and Zhang.S, “A remote sensing image cloud processingsystem based on hadoop,” [J] in Cloud Computing and Intelligent Systems(CCIS), 2012 IEEE 2nd International Conference on, vol. 1. IEEE,2012, pp. 492-494.

    [9] Grossman M, Breternitz M, Sarkar V. HadoopCL: MapReduce on Distributed Heterogeneous Platforms through Seamless Integration of Hadoop and OpenCL[J]. Parallel and Distributed Processing Symposium Workshops & PhD Forum (IPDPSW), 2013 IEEE 27th International, 2013:1918-1927.

    [10] Wang Z, Lv P, Zheng C. CUDA on Hadoop: A Mixed Computing Framework for Massive Data Processing[M]//Foundations and Practical Applications of Cognitive Systems and Information Processing. Springer Berlin Heidelberg,2014:253-260.

    [11] Zaharia.M, Chowdhury.M, M. J. Franklin, S. Shenker, and I. Stoica,“Spark: cluster computing with working sets,” [C] in Proceedings of the2nd USENIX conference on Hot topics in cloud computing, 2010:10.

    [12] Ghemawat S, Gobioff H, Leung S T. The Google file system[C]//ACM SIGOPS operating systems review. ACM, 2003, 37(5):29-4

    V249 文獻(xiàn)標(biāo)志碼:A

    2015.01.21)

    1007-757X(2015)08-0065-03

    國家自然科學(xué)基金,(71331005)

    陳峰科(1990-),男,江西,復(fù)旦大學(xué)計算機(jī)科學(xué)技術(shù)學(xué)院,上海市數(shù)據(jù)科學(xué)重點(diǎn)實(shí)驗室,碩士研究生,研究方向:數(shù)據(jù)科學(xué)、大數(shù)據(jù)上海,201203孫眾毅(1992-),男,上海,復(fù)旦大學(xué)計算機(jī)科學(xué)技術(shù)學(xué)院,上海市數(shù)據(jù)科學(xué)重點(diǎn)實(shí)驗室,碩士研究生,研究方向:數(shù)據(jù)科學(xué)、大數(shù)據(jù),上海,201203池明旻(1977-),女,福建,復(fù)旦大學(xué)計算機(jī)科學(xué)技術(shù)學(xué)院,上海市數(shù)據(jù)科學(xué)重點(diǎn)實(shí)驗室,電磁波信息科學(xué)教育部重點(diǎn)實(shí)驗室,副教授,研究方向:數(shù)據(jù)科學(xué)、大數(shù)據(jù), 上海,201203

    猜你喜歡
    分布式計算內(nèi)存集群
    海上小型無人機(jī)集群的反制裝備需求與應(yīng)對之策研究
    “春夏秋冬”的內(nèi)存
    一種無人機(jī)集群發(fā)射回收裝置的控制系統(tǒng)設(shè)計
    電子制作(2018年11期)2018-08-04 03:25:40
    Python與Spark集群在收費(fèi)數(shù)據(jù)分析中的應(yīng)用
    勤快又呆萌的集群機(jī)器人
    基于云計算的移動學(xué)習(xí)平臺設(shè)計與實(shí)現(xiàn)
    云計算中MapReduce分布式并行處理框架的研究與搭建
    面向異構(gòu)分布式計算環(huán)境的并行任務(wù)調(diào)度優(yōu)化方法
    基于內(nèi)存的地理信息訪問技術(shù)
    上網(wǎng)本為什么只有1GB?
    一个人观看的视频www高清免费观看| 国产一级毛片在线| 大又大粗又爽又黄少妇毛片口| 国产精品1区2区在线观看.| 2021天堂中文幕一二区在线观| 波多野结衣高清作品| 欧美xxxx黑人xx丫x性爽| 久久草成人影院| 免费av观看视频| 亚洲经典国产精华液单| 五月伊人婷婷丁香| 青青草视频在线视频观看| 国产亚洲精品久久久com| 国产精品美女特级片免费视频播放器| 亚洲欧美日韩卡通动漫| www.av在线官网国产| 欧美一区二区精品小视频在线| 国产三级中文精品| 五月伊人婷婷丁香| 日韩三级伦理在线观看| 日韩成人av中文字幕在线观看| 毛片一级片免费看久久久久| 我要搜黄色片| 日日干狠狠操夜夜爽| 久久久久久大精品| 狠狠狠狠99中文字幕| 一本久久中文字幕| 成人性生交大片免费视频hd| 最近的中文字幕免费完整| 久久草成人影院| 老女人水多毛片| 国产激情偷乱视频一区二区| 欧美高清成人免费视频www| 岛国毛片在线播放| 国产极品精品免费视频能看的| 久久热精品热| 国产一区二区在线观看日韩| 长腿黑丝高跟| 日本av手机在线免费观看| 精品一区二区三区视频在线| 日韩欧美在线乱码| 91av网一区二区| 一级毛片久久久久久久久女| 中文字幕制服av| 女人十人毛片免费观看3o分钟| 毛片女人毛片| 国产欧美日韩精品一区二区| 蜜臀久久99精品久久宅男| 久久久久久大精品| 久久99热6这里只有精品| 中文字幕av在线有码专区| 欧美一区二区精品小视频在线| 亚洲内射少妇av| 国产淫片久久久久久久久| 成人综合一区亚洲| 久久欧美精品欧美久久欧美| 天美传媒精品一区二区| 婷婷色av中文字幕| 三级男女做爰猛烈吃奶摸视频| 久久婷婷人人爽人人干人人爱| 一个人观看的视频www高清免费观看| 国产精品久久电影中文字幕| 亚洲电影在线观看av| 亚洲一级一片aⅴ在线观看| 日韩欧美精品免费久久| 大又大粗又爽又黄少妇毛片口| 国产女主播在线喷水免费视频网站 | 又爽又黄无遮挡网站| 国产伦一二天堂av在线观看| 日韩精品有码人妻一区| 国产精华一区二区三区| 小蜜桃在线观看免费完整版高清| 久久欧美精品欧美久久欧美| 欧美zozozo另类| 国产精品久久电影中文字幕| 国产精品1区2区在线观看.| 菩萨蛮人人尽说江南好唐韦庄 | 简卡轻食公司| 91狼人影院| 日产精品乱码卡一卡2卡三| 九九久久精品国产亚洲av麻豆| av国产免费在线观看| 中文在线观看免费www的网站| 在线播放国产精品三级| 国产欧美日韩精品一区二区| 亚洲国产日韩欧美精品在线观看| 一级黄色大片毛片| 亚洲av中文av极速乱| 男女做爰动态图高潮gif福利片| 哪里可以看免费的av片| 亚洲av熟女| 午夜爱爱视频在线播放| 晚上一个人看的免费电影| 久久这里有精品视频免费| 看十八女毛片水多多多| 午夜福利在线在线| 91久久精品国产一区二区三区| 精品无人区乱码1区二区| av在线亚洲专区| 精华霜和精华液先用哪个| 欧美成人a在线观看| 又爽又黄a免费视频| 国产极品精品免费视频能看的| 国产成人福利小说| 国产v大片淫在线免费观看| 老熟妇乱子伦视频在线观看| 亚洲国产欧美在线一区| 嘟嘟电影网在线观看| 欧美激情久久久久久爽电影| 波多野结衣高清作品| 美女 人体艺术 gogo| 中国美白少妇内射xxxbb| 五月伊人婷婷丁香| 午夜精品在线福利| 成人永久免费在线观看视频| 美女国产视频在线观看| 狂野欧美白嫩少妇大欣赏| 中国美白少妇内射xxxbb| 3wmmmm亚洲av在线观看| 精品一区二区三区视频在线| 亚洲欧美日韩东京热| 国内揄拍国产精品人妻在线| 麻豆国产av国片精品| 人人妻人人看人人澡| 村上凉子中文字幕在线| 欧美xxxx黑人xx丫x性爽| 国产成人a区在线观看| 日韩欧美 国产精品| 九九热线精品视视频播放| 久久99热6这里只有精品| 国内精品一区二区在线观看| 长腿黑丝高跟| 精品日产1卡2卡| 变态另类成人亚洲欧美熟女| 九九热线精品视视频播放| 亚洲精品456在线播放app| 国产黄片美女视频| 国产精品日韩av在线免费观看| 青春草国产在线视频 | 日韩欧美一区二区三区在线观看| 亚洲成人久久爱视频| 尾随美女入室| 久久中文看片网| 国产人妻一区二区三区在| 亚洲欧美成人精品一区二区| 99久久中文字幕三级久久日本| 亚洲国产色片| 婷婷亚洲欧美| 亚洲无线在线观看| 日韩欧美国产在线观看| 国产亚洲5aaaaa淫片| 一个人观看的视频www高清免费观看| 国产在线精品亚洲第一网站| 91午夜精品亚洲一区二区三区| 一个人免费在线观看电影| 亚洲国产精品国产精品| av天堂在线播放| 女人十人毛片免费观看3o分钟| 十八禁国产超污无遮挡网站| 大型黄色视频在线免费观看| 亚洲av第一区精品v没综合| 级片在线观看| 亚洲成人精品中文字幕电影| 乱人视频在线观看| 性插视频无遮挡在线免费观看| 国产精品av视频在线免费观看| 一边亲一边摸免费视频| 亚洲精品久久国产高清桃花| 午夜激情欧美在线| 99精品在免费线老司机午夜| 欧美最新免费一区二区三区| 午夜a级毛片| 国产精华一区二区三区| 九草在线视频观看| 爱豆传媒免费全集在线观看| 亚洲精品456在线播放app| 99视频精品全部免费 在线| 国产真实伦视频高清在线观看| 日韩高清综合在线| 中文字幕av在线有码专区| 少妇被粗大猛烈的视频| 精品无人区乱码1区二区| 国产黄片美女视频| 成人漫画全彩无遮挡| 日本在线视频免费播放| 人妻制服诱惑在线中文字幕| 少妇人妻一区二区三区视频| 好男人视频免费观看在线| 免费在线观看成人毛片| 精品久久久久久久久久久久久| 波多野结衣高清作品| av视频在线观看入口| 三级毛片av免费| 久久久久久久久中文| 日韩人妻高清精品专区| 亚洲精品粉嫩美女一区| 一级黄片播放器| 国产亚洲精品av在线| 亚洲欧美日韩无卡精品| 国产成人a∨麻豆精品| 日本在线视频免费播放| 欧美日韩综合久久久久久| 菩萨蛮人人尽说江南好唐韦庄 | 看非洲黑人一级黄片| 亚洲国产精品成人综合色| 国产精品永久免费网站| 女同久久另类99精品国产91| 国产精品,欧美在线| 毛片女人毛片| 日韩视频在线欧美| 成年女人看的毛片在线观看| 日韩欧美一区二区三区在线观看| 性色avwww在线观看| 国产成人a区在线观看| 两个人的视频大全免费| 久久久久久久午夜电影| 国产中年淑女户外野战色| 亚洲国产日韩欧美精品在线观看| 亚洲成人精品中文字幕电影| 免费搜索国产男女视频| 午夜久久久久精精品| 你懂的网址亚洲精品在线观看 | 女人十人毛片免费观看3o分钟| 亚洲美女搞黄在线观看| 国产精品一区二区在线观看99 | 国产日韩欧美在线精品| 91久久精品电影网| a级毛片免费高清观看在线播放| 午夜精品在线福利| 亚洲精品乱码久久久v下载方式| 国产探花极品一区二区| 看非洲黑人一级黄片| 国模一区二区三区四区视频| 国产高清三级在线| 91久久精品电影网| 日本免费a在线| 99热这里只有是精品在线观看| 麻豆成人av视频| 精品国产三级普通话版| 毛片女人毛片| 欧美最黄视频在线播放免费| 亚洲激情五月婷婷啪啪| 18禁黄网站禁片免费观看直播| 久久6这里有精品| 午夜福利成人在线免费观看| 亚洲av二区三区四区| 国产一区亚洲一区在线观看| 非洲黑人性xxxx精品又粗又长| 久久久久久久久久成人| 精品久久久久久久久亚洲| 最后的刺客免费高清国语| 精品人妻一区二区三区麻豆| 中文亚洲av片在线观看爽| 哪里可以看免费的av片| 韩国av在线不卡| 国产免费男女视频| 欧美日韩在线观看h| 亚洲七黄色美女视频| 日韩欧美国产在线观看| 国产探花极品一区二区| 少妇人妻一区二区三区视频| 99国产精品一区二区蜜桃av| 国产综合懂色| 天天躁夜夜躁狠狠久久av| 我要搜黄色片| 欧洲精品卡2卡3卡4卡5卡区| 亚洲欧美精品自产自拍| 亚洲美女视频黄频| 久久午夜福利片| 别揉我奶头 嗯啊视频| 国产精品1区2区在线观看.| 国产私拍福利视频在线观看| 男插女下体视频免费在线播放| 亚洲av成人精品一区久久| 寂寞人妻少妇视频99o| 一级毛片电影观看 | 成人午夜高清在线视频| 亚洲图色成人| 亚洲国产高清在线一区二区三| 亚洲av成人av| 能在线免费观看的黄片| 尾随美女入室| 亚洲精品日韩av片在线观看| 69av精品久久久久久| 中文在线观看免费www的网站| 97人妻精品一区二区三区麻豆| 久久久色成人| av福利片在线观看| 一个人观看的视频www高清免费观看| 精品久久久久久久久久免费视频| 亚洲av二区三区四区| 一级毛片aaaaaa免费看小| 日本黄色视频三级网站网址| 免费av毛片视频| 69人妻影院| 久久精品国产亚洲av天美| av.在线天堂| 又粗又硬又长又爽又黄的视频 | 国产亚洲av片在线观看秒播厂 | 日韩高清综合在线| 亚洲欧美日韩高清在线视频| 成人综合一区亚洲| 蜜臀久久99精品久久宅男| 日韩av在线大香蕉| 99精品在免费线老司机午夜| 少妇人妻一区二区三区视频| 欧美成人a在线观看| 成人一区二区视频在线观看| 日本与韩国留学比较| 高清毛片免费观看视频网站| 国产欧美日韩精品一区二区| 日本与韩国留学比较| 在线a可以看的网站| 夜夜看夜夜爽夜夜摸| 免费不卡的大黄色大毛片视频在线观看 | 特大巨黑吊av在线直播| 日本成人三级电影网站| 波多野结衣高清作品| 三级毛片av免费| 少妇熟女aⅴ在线视频| 精品久久久久久久久亚洲| 亚洲精品国产av成人精品| 国产欧美日韩精品一区二区| 深夜a级毛片| av卡一久久| 最近最新中文字幕大全电影3| 亚洲一区二区三区色噜噜| 91久久精品国产一区二区三区| 亚洲av不卡在线观看| 一级黄色大片毛片| 色哟哟·www| 99热这里只有精品一区| 午夜福利在线观看免费完整高清在 | 成人综合一区亚洲| 一边亲一边摸免费视频| 免费一级毛片在线播放高清视频| 国产高清视频在线观看网站| 亚洲在线自拍视频| 少妇的逼好多水| 国产成人精品一,二区 | 欧美激情国产日韩精品一区| 少妇裸体淫交视频免费看高清| 免费av观看视频| 久久久久久大精品| 中文资源天堂在线| 久久综合国产亚洲精品| 国产精品乱码一区二三区的特点| 岛国在线免费视频观看| h日本视频在线播放| 91久久精品国产一区二区成人| 精品少妇黑人巨大在线播放 | 女的被弄到高潮叫床怎么办| 午夜a级毛片| 午夜精品国产一区二区电影 | 99热全是精品| 国产精品福利在线免费观看| 国产单亲对白刺激| 少妇丰满av| 午夜福利成人在线免费观看| 久久婷婷人人爽人人干人人爱| 成年av动漫网址| 一区福利在线观看| 精品人妻一区二区三区麻豆| 亚洲av免费在线观看| 国产高清三级在线| 深夜精品福利| 美女被艹到高潮喷水动态| 国产黄a三级三级三级人| 亚洲丝袜综合中文字幕| 日韩强制内射视频| 欧美日本视频| 日本av手机在线免费观看| 国产探花极品一区二区| 一个人观看的视频www高清免费观看| 白带黄色成豆腐渣| 一本久久精品| 人妻夜夜爽99麻豆av| av女优亚洲男人天堂| 91久久精品电影网| 麻豆精品久久久久久蜜桃| 只有这里有精品99| 蜜桃亚洲精品一区二区三区| 色噜噜av男人的天堂激情| 亚洲久久久久久中文字幕| 成人国产麻豆网| 久久久久久久久久久丰满| 丰满的人妻完整版| 久久久久久久亚洲中文字幕| 一边亲一边摸免费视频| 亚洲成av人片在线播放无| 美女xxoo啪啪120秒动态图| 特级一级黄色大片| 毛片一级片免费看久久久久| av.在线天堂| 老司机影院成人| 91久久精品电影网| 非洲黑人性xxxx精品又粗又长| 只有这里有精品99| 校园春色视频在线观看| 搡女人真爽免费视频火全软件| 亚洲第一电影网av| 亚洲自偷自拍三级| 久久久欧美国产精品| 国产精品精品国产色婷婷| 欧美+日韩+精品| 最近中文字幕高清免费大全6| 人妻制服诱惑在线中文字幕| 97热精品久久久久久| 亚洲第一区二区三区不卡| 亚洲国产色片| 国产精品福利在线免费观看| 国产精品久久电影中文字幕| 日韩三级伦理在线观看| 国产精品野战在线观看| 一级毛片久久久久久久久女| 亚洲色图av天堂| 国产精品久久视频播放| 人妻夜夜爽99麻豆av| 51国产日韩欧美| 日本五十路高清| 国产精品久久久久久久久免| 99热网站在线观看| 青春草视频在线免费观看| 久久久久久大精品| 人妻制服诱惑在线中文字幕| 亚洲va在线va天堂va国产| 亚洲欧美精品自产自拍| 非洲黑人性xxxx精品又粗又长| 亚洲成人精品中文字幕电影| 色尼玛亚洲综合影院| 免费电影在线观看免费观看| 看片在线看免费视频| 深爱激情五月婷婷| 免费无遮挡裸体视频| 一本久久精品| 又粗又爽又猛毛片免费看| 美女高潮的动态| 最新中文字幕久久久久| 久久久a久久爽久久v久久| 国产av不卡久久| 赤兔流量卡办理| 观看美女的网站| 黄色日韩在线| 好男人在线观看高清免费视频| 日韩一本色道免费dvd| 国产69精品久久久久777片| 午夜a级毛片| 男女那种视频在线观看| 亚洲最大成人av| 国内精品一区二区在线观看| 99久久精品国产国产毛片| 日韩一本色道免费dvd| 久久久国产成人精品二区| 久久亚洲精品不卡| 大又大粗又爽又黄少妇毛片口| 黄色欧美视频在线观看| 国产高清视频在线观看网站| 欧美日本视频| 18禁在线无遮挡免费观看视频| 欧美三级亚洲精品| 人妻系列 视频| 婷婷色综合大香蕉| 十八禁国产超污无遮挡网站| 狂野欧美激情性xxxx在线观看| 搞女人的毛片| 日韩高清综合在线| 国产三级中文精品| 成年av动漫网址| 精品午夜福利在线看| 欧美成人精品欧美一级黄| 国产高清激情床上av| 成人综合一区亚洲| 欧美日韩乱码在线| 三级经典国产精品| 国产精品久久久久久av不卡| 国产毛片a区久久久久| 春色校园在线视频观看| 男女啪啪激烈高潮av片| 国产麻豆成人av免费视频| 精品一区二区三区人妻视频| 麻豆乱淫一区二区| 国产蜜桃级精品一区二区三区| 大又大粗又爽又黄少妇毛片口| 美女xxoo啪啪120秒动态图| 人人妻人人澡人人爽人人夜夜 | 国产精品一及| 精品久久久久久久人妻蜜臀av| 岛国在线免费视频观看| 色哟哟哟哟哟哟| 久久精品久久久久久久性| 九九久久精品国产亚洲av麻豆| 成人一区二区视频在线观看| 最近中文字幕高清免费大全6| 你懂的网址亚洲精品在线观看 | 国产伦一二天堂av在线观看| 亚洲va在线va天堂va国产| 亚洲av中文av极速乱| 免费黄网站久久成人精品| 亚洲av男天堂| 免费av观看视频| 六月丁香七月| 亚洲精品亚洲一区二区| 亚洲不卡免费看| 少妇的逼好多水| 亚洲欧美日韩东京热| 久久国内精品自在自线图片| 国产午夜精品久久久久久一区二区三区| 欧美高清性xxxxhd video| 少妇的逼好多水| 日韩,欧美,国产一区二区三区 | 精品久久久噜噜| 免费观看人在逋| 夜夜看夜夜爽夜夜摸| 人妻系列 视频| www.色视频.com| 亚洲av中文字字幕乱码综合| 久久韩国三级中文字幕| 男的添女的下面高潮视频| 人妻久久中文字幕网| 久久人人爽人人爽人人片va| 亚洲最大成人中文| 亚洲国产精品成人久久小说 | 国产色婷婷99| av在线播放精品| 12—13女人毛片做爰片一| 人妻久久中文字幕网| 一边亲一边摸免费视频| 色综合色国产| 精品人妻熟女av久视频| 草草在线视频免费看| 日韩一区二区视频免费看| 女人十人毛片免费观看3o分钟| 悠悠久久av| 成人亚洲精品av一区二区| 中文精品一卡2卡3卡4更新| 不卡视频在线观看欧美| 国产淫片久久久久久久久| 黄片wwwwww| 亚洲三级黄色毛片| 两个人视频免费观看高清| 日韩欧美 国产精品| 国产91av在线免费观看| 亚洲精品粉嫩美女一区| 国语自产精品视频在线第100页| 成人性生交大片免费视频hd| 成人国产麻豆网| 小蜜桃在线观看免费完整版高清| 欧美xxxx黑人xx丫x性爽| 久久久午夜欧美精品| 天堂影院成人在线观看| 超碰av人人做人人爽久久| 国产极品精品免费视频能看的| 亚洲精品456在线播放app| 国产av不卡久久| 成年版毛片免费区| 秋霞在线观看毛片| 在线免费观看的www视频| 看黄色毛片网站| 日韩高清综合在线| 国产一区二区三区av在线 | 深爱激情五月婷婷| 国产一级毛片七仙女欲春2| 欧美成人精品欧美一级黄| 麻豆国产97在线/欧美| 国产精品1区2区在线观看.| 麻豆乱淫一区二区| 深夜精品福利| 婷婷亚洲欧美| 免费在线观看成人毛片| 亚洲av免费在线观看| 看免费成人av毛片| 最近的中文字幕免费完整| 久久精品国产清高在天天线| 亚洲在久久综合| 1024手机看黄色片| 一区福利在线观看| 欧美日本视频| 日韩亚洲欧美综合| 搡女人真爽免费视频火全软件| 亚洲成av人片在线播放无| 亚洲欧美清纯卡通| 久久国产乱子免费精品| 免费一级毛片在线播放高清视频| 97热精品久久久久久| 国产真实伦视频高清在线观看| 免费人成在线观看视频色| 一区二区三区免费毛片| 亚洲成人精品中文字幕电影| 可以在线观看毛片的网站| 97热精品久久久久久| 少妇人妻一区二区三区视频| 一级毛片aaaaaa免费看小| videossex国产| 成人三级黄色视频| 麻豆一二三区av精品| 最后的刺客免费高清国语| 97人妻精品一区二区三区麻豆| 天堂av国产一区二区熟女人妻| 能在线免费看毛片的网站| 国产 一区精品| 国产在线男女| 男人的好看免费观看在线视频| 3wmmmm亚洲av在线观看| 亚洲精华国产精华液的使用体验 | 亚洲乱码一区二区免费版| 午夜精品一区二区三区免费看| 国产成人a∨麻豆精品| 久久人人精品亚洲av| av专区在线播放| 午夜免费激情av| 少妇丰满av| 91狼人影院| 国产精品美女特级片免费视频播放器| 我的女老师完整版在线观看| 日韩,欧美,国产一区二区三区 |