• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    嵌入互聯(lián)網(wǎng)輿情強(qiáng)度的人民幣匯率預(yù)測(cè)

    2019-12-23 07:19:04王吉祥過(guò)弋戚天梅王志宏李真湯敏偉
    計(jì)算機(jī)應(yīng)用 2019年11期
    關(guān)鍵詞:機(jī)器學(xué)習(xí)

    王吉祥 過(guò)弋 戚天梅 王志宏 李真 湯敏偉

    摘 要:針對(duì)目前人民幣匯率預(yù)測(cè)研究存在的數(shù)據(jù)源單一導(dǎo)致難以提升預(yù)測(cè)效果的問(wèn)題,提出一種嵌入互聯(lián)網(wǎng)輿情強(qiáng)度的預(yù)測(cè)技術(shù),通過(guò)融合多方面數(shù)據(jù)源進(jìn)行對(duì)比分析,有效降低了人民幣匯率的預(yù)測(cè)誤差。首先,融合互聯(lián)網(wǎng)外匯新聞數(shù)據(jù)和歷史行情數(shù)據(jù),并將多源文本數(shù)據(jù)轉(zhuǎn)化為可計(jì)算的特征向量;其次,通過(guò)情感特征向量構(gòu)建五種特征組合并對(duì)其進(jìn)行對(duì)比,給出了嵌入互聯(lián)網(wǎng)輿情強(qiáng)度的特征組合作為預(yù)測(cè)模型輸入;最后,設(shè)計(jì)外匯輿情影響匯率預(yù)測(cè)的滑動(dòng)時(shí)間窗口,建立基于機(jī)器學(xué)習(xí)的匯率預(yù)測(cè)模型。實(shí)驗(yàn)結(jié)果表明,嵌入互聯(lián)網(wǎng)輿情的特征組合相對(duì)于不含輿情的特征組合在均方根誤差(RMSE)和平均絕對(duì)誤差(MAE)上分別提升了9.8%和16.2%;此外,長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)預(yù)測(cè)模型比支持向量回歸(SVR)、決策回歸(DT)和深度神經(jīng)網(wǎng)絡(luò)(DNN)預(yù)測(cè)模型表現(xiàn)更好。

    關(guān)鍵詞:機(jī)器學(xué)習(xí);文本向量化;輿情影響力;匯率預(yù)測(cè);滑動(dòng)時(shí)間窗口

    中圖分類(lèi)號(hào):TP391

    文獻(xiàn)標(biāo)志碼:A

    RMB exchange rate forecast embedded with Internet public opinion intensity

    WANG Jixiang1, GUO Yi1,2,3*, QI Tianmei1, WANG Zhihong1, LI Zhen4, TANG Minwei4

    1.School of Information Science and Engineering, East University of Science and Technology, Shanghai 200237, China;

    2.National Engineering Laboratory for Big Data Distribution and Exchange Technologies, Shanghai 200237, China;

    3.Shanghai Engineering Research Center of Big Data and Internet Audience, Shanghai 200072, China;

    4.Department of Risk Management, China Telecom BestPay Company Limited, Shanghai 200085, China

    Abstract:

    Aiming at the low prediction effect caused by single data source in the current RMB exchange rate forecast research, a forecast technology based on Internet public opinion intensity was proposed. By comparing and analyzing various data sources, the forecast error of RMB exchange rate was effectively reduced. Firstly, the Internet foreign exchange news data and historical market data were fused, and the multisource text data were converted into the computable vectors. Secondly, five feature combinations based on sentiment feature vectors were constructed and compared, and the feature combination embedded with intensity of Internet public opinion was given as the input of forecast models. Finally, a temporal sliding window of foreign exchange public opinion data was designed, and an exchange rate forecast model based on machine learning was built. Experimental results show that feature combination embedded with Internet public opinion outperforms the feature combination without public opinion by 9.8% and 16.2% in Root Mean Squared Error (RMSE) and Mean Squared Error (MAE). At the same time, the forecast model based on Long ShortTerm Memory network (LSTM) is better than that based on Support Vector Regression (SVR), Decision Tree regression (DT) and Deep Neural Network (DNN).

    Key words:

    machine learning; text embedding; public opinion impact; exchange rate forecast; temporal sliding window

    0?引言

    人民幣匯率預(yù)測(cè)一直是廣大學(xué)者和研究者關(guān)注的話(huà)題與方向。近年來(lái)中美貿(mào)易失衡有加劇的趨勢(shì),美國(guó)政府將其對(duì)中國(guó)巨額貿(mào)易赤字的根源歸咎于人民幣幣值的低估,并將人民幣兌美元匯率視為影響中美雙方經(jīng)貿(mào)關(guān)系的焦點(diǎn)問(wèn)題[1], 因此,在當(dāng)下人民幣匯率雙向波動(dòng)和彈性擴(kuò)大的環(huán)境中,對(duì)人民幣匯率進(jìn)行有效預(yù)測(cè),對(duì)于指導(dǎo)個(gè)人投資行為、幫助企業(yè)制定科學(xué)的國(guó)際貿(mào)易決策以及國(guó)家外匯儲(chǔ)備資產(chǎn)管理和外匯風(fēng)險(xiǎn)防范都有著重要的意義[2]。

    人民幣匯率走勢(shì)的預(yù)測(cè)及分析是許多金融領(lǐng)域?qū)W者們關(guān)注并研究的方向,但是結(jié)合輿情數(shù)據(jù)去預(yù)測(cè)短期內(nèi)人民幣匯率的漲幅卻少有研究。多數(shù)文獻(xiàn)對(duì)人民幣匯率的研究是利用宏觀(guān)經(jīng)濟(jì)學(xué)與計(jì)量統(tǒng)計(jì)學(xué)的模型去擬合人民幣匯率的曲線(xiàn),但是這種方法不能預(yù)測(cè)匯率在外界金融事件和輿情影響下的波動(dòng)。實(shí)際上,影響匯率的諸多因素中除了定量的實(shí)際觀(guān)測(cè)數(shù)據(jù),像輿情這類(lèi)非結(jié)構(gòu)化的定性數(shù)據(jù)也具有很大的影響力?;ヂ?lián)網(wǎng)的快速發(fā)展,提升了輿情傳播對(duì)經(jīng)濟(jì)社會(huì)的影響力。尤其是各種新型網(wǎng)絡(luò)平臺(tái)的出現(xiàn),使信息的傳播更加快速,滲透更為深刻。網(wǎng)絡(luò)輿情數(shù)據(jù)不僅對(duì)股票價(jià)格[3]和商品價(jià)格有影響,對(duì)外匯匯率也有極大的影響。

    為了應(yīng)對(duì)上述挑戰(zhàn),本文在融合了互聯(lián)網(wǎng)輿情數(shù)據(jù)和人民幣匯率歷史數(shù)據(jù)的基礎(chǔ)上,設(shè)計(jì)輿情影響人民幣匯率預(yù)測(cè)的滑動(dòng)時(shí)間窗口并構(gòu)建預(yù)測(cè)模型。本文主要貢獻(xiàn)如下:

    1)嵌入互聯(lián)網(wǎng)輿情情感,并對(duì)比詞向量、情感極性、情感強(qiáng)度等不同嵌入方式的預(yù)測(cè)效果;

    2)根據(jù)輿情時(shí)效性較短的特點(diǎn),設(shè)計(jì)了輸入向量滑動(dòng)窗口和預(yù)測(cè)滯后滑動(dòng)窗口;

    3)在真實(shí)的人民幣匯率數(shù)據(jù)集上進(jìn)行實(shí)驗(yàn),驗(yàn)證本文提出的方法能夠提高預(yù)測(cè)效果。

    1?相關(guān)工作

    1.1?輿情影響力

    輿情事件在互聯(lián)網(wǎng)中的發(fā)展像生物一樣會(huì)經(jīng)歷出生、成長(zhǎng)、衰老和死亡的過(guò)程。某一輿情事件的發(fā)生,通常會(huì)伴隨網(wǎng)絡(luò)輿情信息的傳播。文獻(xiàn)[4]提到公共危機(jī)事件的網(wǎng)絡(luò)輿情生命周期有潛伏期、成長(zhǎng)期、爆發(fā)期和平息期。文獻(xiàn)[5]的實(shí)驗(yàn)曲線(xiàn)趨勢(shì)表明,輿情參與人數(shù)和轉(zhuǎn)發(fā)頻次的演化特征幾乎一致。網(wǎng)絡(luò)輿情的傳播會(huì)在前期爆發(fā)時(shí)到達(dá)一個(gè)高峰,消退一段時(shí)間后還會(huì)漲到另一個(gè)高峰,在這之后一段時(shí)間會(huì)慢慢削弱。

    行為經(jīng)濟(jì)學(xué)表明,公眾輿論深刻影響個(gè)人行為和決策[6]。文獻(xiàn)[7]表明網(wǎng)絡(luò)輿情通過(guò)影響入市資金流進(jìn)一步影響股市行情;文獻(xiàn)[8]證實(shí)并分析了基于微博的投資者情緒對(duì)股票市場(chǎng)的影響,輿情可以在一定程度上預(yù)測(cè)股票價(jià)格;文獻(xiàn)[9]將非結(jié)構(gòu)化文本數(shù)據(jù)轉(zhuǎn)化為結(jié)構(gòu)化的特征向量矩陣,與股票的收益率建立支持向量回歸(Support Vector Regression, SVR),研究結(jié)果表明,預(yù)測(cè)的股價(jià)漲跌趨勢(shì)與實(shí)際趨勢(shì)基本吻合,可以通過(guò)分析網(wǎng)絡(luò)輿情來(lái)對(duì)股市未來(lái)發(fā)展趨勢(shì)進(jìn)行預(yù)測(cè);文獻(xiàn)[10]分別從社交媒體和財(cái)經(jīng)新聞中的文本信息中捕捉社會(huì)情感和專(zhuān)業(yè)意見(jiàn),然后通過(guò)張量表示由這兩個(gè)信息源組成的整個(gè)市場(chǎng)信息空間以及公司特征。實(shí)驗(yàn)表明與傳統(tǒng)的基于矢量的系統(tǒng)相比,從多信息源的聯(lián)合效應(yīng)角度研究社會(huì)情緒作用的智能系統(tǒng)更有效。上述的文獻(xiàn)足以說(shuō)明網(wǎng)絡(luò)輿情的直接影響力非常之大,能夠影響人民幣匯率并能在預(yù)測(cè)方面作出貢獻(xiàn)。然而沒(méi)有文獻(xiàn)給出輿情影響力與時(shí)間的具體函數(shù)關(guān)系,無(wú)法量化輿情具體的影響力值。

    1.2?價(jià)格預(yù)測(cè)模型

    學(xué)者們對(duì)于人民幣匯率預(yù)測(cè)模型研究文獻(xiàn)較少,所以作者也查閱了股票價(jià)格預(yù)測(cè)的文獻(xiàn)。研究者們多數(shù)利用機(jī)器學(xué)習(xí)和神經(jīng)網(wǎng)絡(luò)來(lái)研究對(duì)價(jià)格的預(yù)測(cè)。機(jī)器學(xué)習(xí)算法主要包括支持向量回歸(SVR)和人工神經(jīng)網(wǎng)絡(luò)等。文獻(xiàn)[2]運(yùn)用SVR方法對(duì)人民幣匯率進(jìn)行實(shí)證預(yù)測(cè),結(jié)果表明基于SVR的匯率預(yù)測(cè)方法在預(yù)測(cè)精度和穩(wěn)定性方面優(yōu)于對(duì)照模型,更能體現(xiàn)匯率行為所反映的經(jīng)濟(jì)因素;文獻(xiàn)[11]驗(yàn)證了SVR有助于使用機(jī)器人技術(shù)自動(dòng)作出外匯市場(chǎng)中買(mǎi)/賣(mài)的交易決策;文獻(xiàn)[12]從Twitter捕獲1-170-414個(gè)數(shù)據(jù)點(diǎn),并使用文本挖掘方法提取情緒并應(yīng)用于SVR提高預(yù)測(cè)效果;文獻(xiàn)[13]使用帶有延遲因子的前饋神經(jīng)網(wǎng)絡(luò)能較好地預(yù)測(cè)短期的外匯匯率。隨著深度學(xué)習(xí)的快速發(fā)展,其應(yīng)用變得更加廣泛,尤其是卷積神經(jīng)網(wǎng)絡(luò)(Convolutional Neural Network, CNN)算法和循環(huán)神經(jīng)網(wǎng)絡(luò)(Recurrent Neural Network, RNN)算法等。文獻(xiàn)[14]表明與機(jī)器學(xué)習(xí)方法相比,基于CNN的預(yù)測(cè)模型可以有效提高長(zhǎng)期預(yù)測(cè)的準(zhǔn)確性;基于RNN和門(mén)控遞歸單位的模型[15]來(lái)預(yù)測(cè)中國(guó)股市的股票能夠獲得良好的預(yù)測(cè)性能;文獻(xiàn)[16]使用在線(xiàn)股票論壇的信息融合股票市場(chǎng)數(shù)據(jù),通過(guò)RNN實(shí)現(xiàn)預(yù)測(cè),實(shí)驗(yàn)結(jié)果表明模型在帶情感的數(shù)據(jù)上表現(xiàn)明顯更好。

    綜合上述文獻(xiàn),學(xué)者們?cè)陬A(yù)測(cè)人民幣匯率上已有多方面的研究與實(shí)驗(yàn),但仍有空白之處: 第一,沒(méi)有將外匯輿情數(shù)據(jù)作為人民幣匯率預(yù)測(cè)的基礎(chǔ),忽略了匯率受外界事件的影響?;ヂ?lián)網(wǎng)外匯輿情的影響力不容小覷; 第二,缺少外匯輿情影響人民幣匯率的滑動(dòng)時(shí)間窗口,忽略了輿情的時(shí)效性和情感特點(diǎn)。隨著時(shí)間的增加,輿情影響力會(huì)有不同的變化且有延遲現(xiàn)象, 設(shè)計(jì)外匯輿情影響匯率預(yù)測(cè)的滑動(dòng)時(shí)間窗口能夠改善這個(gè)問(wèn)題, 所以本文將重點(diǎn)研究設(shè)計(jì)外匯輿情影響人民幣匯率預(yù)測(cè)的滑動(dòng)時(shí)間窗口以及融合網(wǎng)絡(luò)輿情數(shù)據(jù)和歷史行情數(shù)據(jù),利用機(jī)器學(xué)習(xí)方法構(gòu)建人民幣匯率預(yù)測(cè)模型,最后對(duì)比四組預(yù)測(cè)算法并進(jìn)行分析與評(píng)估。

    2?準(zhǔn)備性研究工作

    2.1?數(shù)據(jù)準(zhǔn)備

    本文實(shí)驗(yàn)的數(shù)據(jù)均通過(guò)Python編寫(xiě)的爬蟲(chóng)工具采集。目前具有較大影響力的財(cái)經(jīng)資訊網(wǎng)站主要包括華爾街見(jiàn)聞(https://wallstreetcn.com)、路透社、彭博新聞社等。華爾街見(jiàn)聞作為一個(gè)綜合多信息源的集成者,在其相關(guān)領(lǐng)域具有很大的參考價(jià)值,因此本文將其作為實(shí)驗(yàn)研究的數(shù)據(jù)源。本文實(shí)驗(yàn)采用2016-06-30—2017-12-29共369個(gè)交易日的歷史行情數(shù)據(jù)和外匯輿情數(shù)據(jù)。

    歷史行情數(shù)據(jù)示例如表1所示,字段包含時(shí)間和人民幣匯率(美元兌人民幣)?;ヂ?lián)網(wǎng)外匯新聞數(shù)據(jù)示例如表2所示,采集的字段有包括發(fā)布時(shí)間和新聞內(nèi)容。

    發(fā)布時(shí)間新聞內(nèi)容

    2016-06-30T15:23新浪援引外媒稱(chēng),中國(guó)央行愿意讓人民幣匯率在今年降至1美元兌6.8元

    2016-06-30T17:07BBH高級(jí)副總裁Marc Chandler:英鎊的走勢(shì)和基本面并沒(méi)有關(guān)系,反彈的原因是空頭平倉(cāng)以及機(jī)構(gòu)投資者在月末和季末調(diào)整倉(cāng)位

    2016-06-30T18:10MBM研究團(tuán)隊(duì)首席研究員Richard Cox:瑞士央行如市場(chǎng)預(yù)期維持了其擴(kuò)張性的貨幣政策,理事會(huì)主席Thomas Jordan也承認(rèn)負(fù)利率政策還將會(huì)維持一段時(shí)間

    2016-07-01T16:20【提醒】北京時(shí)間16:30將公布英國(guó)6月制造業(yè)PMI

    2.2?數(shù)據(jù)預(yù)處理

    本文的互聯(lián)網(wǎng)輿情數(shù)據(jù)的預(yù)處理主要包括:對(duì)文本進(jìn)行分詞、替換文本中特殊符號(hào)、去除低頻詞和停用詞等。

    實(shí)驗(yàn)采用jieba分詞工具,它的分詞模式有三種:精確模式、全模式和搜索引擎模式。精確模式試圖將句子最精確地切開(kāi),適合文本分析,并且速度非常之快。

    在信息檢索和自然語(yǔ)言處理的過(guò)程中,為了節(jié)省存儲(chǔ)空間和提高檢索效率,需要過(guò)濾掉一些對(duì)當(dāng)前實(shí)驗(yàn)無(wú)用且沒(méi)有含義的字詞和符號(hào),這些字詞和符號(hào)就叫作停用詞。本實(shí)驗(yàn)采用的是哈爾濱工業(yè)大學(xué)停用詞表和百度停用詞表的結(jié)合。

    2.3?文本數(shù)據(jù)特征化

    本文的互聯(lián)網(wǎng)外匯輿情數(shù)據(jù)來(lái)源于華爾街見(jiàn)聞,爬取的新聞數(shù)據(jù)包含了諸多與外匯領(lǐng)域有關(guān)的情感詞及其情感強(qiáng)度。本文利用公共情感分析工具將互聯(lián)網(wǎng)新聞數(shù)據(jù)處理成特征向量,并將其作為預(yù)測(cè)模型的輸入來(lái)預(yù)測(cè)人民幣匯率,具體分析流程如圖1所示。

    為了探究互聯(lián)網(wǎng)輿情對(duì)人民幣預(yù)測(cè)的影響,本文分別將數(shù)據(jù)處理成5種特征維度的數(shù)據(jù),如表3所示,其中:PT代表人民幣歷史匯率特征,PT&WV代表人民幣歷史匯率和新聞詞向量的特征組合,PT&PV代表人民幣歷史匯率和新聞情感極性值的特征組合,PT&QV代表人民幣歷史匯率和新聞情感強(qiáng)度值的特征組合,PT&CQ代表人民幣歷史匯率和新聞情感強(qiáng)度的變化值的特征組合。

    3?美元兌人民幣匯率預(yù)測(cè)模型實(shí)現(xiàn)

    本文實(shí)驗(yàn)的技術(shù)路線(xiàn)第一階段如圖2所示,第二階段如圖3所示。

    本文首先采集互聯(lián)網(wǎng)外匯輿情數(shù)據(jù)和人民幣歷史行情數(shù)據(jù),并將文本型數(shù)據(jù)處理成特征向量; 進(jìn)而設(shè)計(jì)了滑動(dòng)時(shí)間窗口以探究輿情對(duì)匯率預(yù)測(cè)的影響; 接著基于機(jī)器學(xué)習(xí)構(gòu)建人民幣匯率預(yù)測(cè)模型,包括SVR[17]、決策樹(shù)回歸(Decision Tree regression, DT)[18]、深度神經(jīng)網(wǎng)絡(luò)(Deep Neural Network, DNN)[19]和長(zhǎng)短期記憶網(wǎng)絡(luò)(Long ShortTerm Memory network, LSTM)[20]; 最后對(duì)預(yù)測(cè)模型進(jìn)行對(duì)比和評(píng)估。

    3.1?特征組合的選擇

    本文實(shí)驗(yàn)開(kāi)發(fā)環(huán)境為Pycharm64,開(kāi)發(fā)語(yǔ)言為Python3.6,操作系統(tǒng)為Windows 10。本次實(shí)驗(yàn)建立的SVR價(jià)格預(yù)測(cè)模型和DT價(jià)格預(yù)測(cè)模型,直接使用了Python自帶的Sklearn[21]里的工具包,DNN和LSTM模型在Keras框架上實(shí)現(xiàn)。

    回歸算法的常用評(píng)估方法有均方根誤差(Root Mean Squared Error, RMSE)和平均絕對(duì)誤差(Mean Absolute Error, MAE),見(jiàn)式(1)和式(2)。RMSE和MAE越小,代表預(yù)測(cè)的誤差越小,預(yù)測(cè)效果越好。

    RMSE=∑mi=1(yt-yt′)2m(1)

    MAE=∑mi=1yt-yt′m(2)

    其中:m為樣本數(shù)量,y為標(biāo)簽值,y′為預(yù)測(cè)的真實(shí)值。

    為了對(duì)比分析五種特征組合對(duì)人民幣匯率預(yù)測(cè)結(jié)果的影響力,分別用以上兩種評(píng)價(jià)指標(biāo)對(duì)其進(jìn)行評(píng)估。以L(fǎng)STM算法為例(采樣時(shí)間為30min),其他參數(shù)均為默認(rèn)值,滑動(dòng)窗口分別為1,2,…,80。

    由表4均值可得,PT&CQ和PT&QV的RMSE相對(duì)最小,相比于PT提高了9.8%。說(shuō)明歷史行情數(shù)據(jù)加上情感強(qiáng)度及其變化值的特征組合RMSE效果最好。PT& CQ的MAE相對(duì)其他數(shù)據(jù)來(lái)說(shuō)較低,相比于PT降低了16.2%。說(shuō)明加上情感強(qiáng)度值變化的數(shù)據(jù)表現(xiàn)效果最好。

    綜上所述,融合外匯領(lǐng)域互聯(lián)網(wǎng)輿情數(shù)據(jù)的混合特征組合(PT&WV、PT&PV、PT&QV和PT&CQ)比僅含有歷史行情數(shù)據(jù)的預(yù)測(cè)效果要更好。而在這些混合特征組合中, PT&WV包含了互聯(lián)網(wǎng)外匯新聞的詞向量特征,計(jì)算了每條新聞中的所有詞匯的詞向量。這使PT&WV含有更多的信息量,實(shí)驗(yàn)證實(shí)了其效果比PT要好。PT&CQ的RMSE值和MAE值都相對(duì)較低。由于PT&CQ包含了互聯(lián)網(wǎng)外匯輿情的強(qiáng)度值的變化,能夠較好地反映出互聯(lián)網(wǎng)輿情的情感變化情況,因此對(duì)人民幣匯率的預(yù)測(cè)幫助較大。接下來(lái)將基于預(yù)測(cè)效果最好的PT&CQ特征組合進(jìn)行實(shí)驗(yàn)。

    3.2?輸入向量窗口的設(shè)定

    訓(xùn)練模型輸入的向量中包含的時(shí)間節(jié)點(diǎn)越多能表達(dá)越多的信息量,但是窗口太大會(huì)增加算法復(fù)雜度從而影響模型的運(yùn)行效率, 所以本文仍需尋找一個(gè)最優(yōu)的時(shí)間節(jié)點(diǎn)個(gè)數(shù)作為滑動(dòng)窗口的大小。本節(jié)除采用PT&CQ作為輸入向量外,其余實(shí)驗(yàn)配置和參數(shù)設(shè)置均與3.1節(jié)相同。

    從圖4可得,PT&CQ預(yù)測(cè)結(jié)果的RMSE在窗口值為[1,5]時(shí)較小,值在0.003-5附近波動(dòng)。窗口值為[5,70]逐漸上升到最大值,隨后略有下降并在0.005值上下波動(dòng)??紤]到能夠盡量多地輸入時(shí)間點(diǎn)特征為模型提供更多的信息量,本文將訓(xùn)練模型的最佳輸入窗口值定為5。

    3.3?預(yù)測(cè)滯后窗口的設(shè)定

    由3.2節(jié)的實(shí)驗(yàn)結(jié)果得知,訓(xùn)練模型時(shí)輸入向量的窗口為5預(yù)測(cè)效果最好。此時(shí),訓(xùn)練輸入的特征維度包括5個(gè)時(shí)間節(jié)點(diǎn)的特征(每個(gè)時(shí)間節(jié)點(diǎn)特征為44維),用這些特征維度去預(yù)測(cè)第6個(gè)時(shí)間節(jié)點(diǎn)和第7個(gè)時(shí)間節(jié)點(diǎn)將得到不一樣的預(yù)測(cè)結(jié)果。所以在得知最優(yōu)訓(xùn)練輸入窗口的情況下,本文仍需尋找最優(yōu)的預(yù)測(cè)滯后窗口。由于訓(xùn)練輸入窗口為5,按常理可知預(yù)測(cè)滯后窗口不應(yīng)該大于5,即在[0,5]中尋找最優(yōu)的預(yù)測(cè)滯后窗口。本節(jié)的實(shí)驗(yàn)配置與參數(shù)設(shè)置與3.1節(jié)的實(shí)驗(yàn)相同。

    從表5可得,在數(shù)據(jù)訓(xùn)練輸入窗口為5并采取不同預(yù)測(cè)滯后窗口時(shí),預(yù)測(cè)結(jié)果的RMSE值在窗口值的整個(gè)取值區(qū)間逐漸增大,最小值為0.022-3,最大值為0.056-0。MAE值表現(xiàn)相似,在區(qū)間內(nèi)逐漸增大,最小值為0.014-2,最大值為0.040-4。綜合表現(xiàn)結(jié)果來(lái)看,預(yù)測(cè)滯后窗口值為0時(shí)效果最好。

    預(yù)測(cè)滯后窗口較小時(shí)預(yù)測(cè)結(jié)果的RMSE和MAE值較低。這樣的結(jié)果可能是由于滯后的窗口越大,窗口中的信息被拋棄,使得模型訓(xùn)練時(shí)遺失了距離預(yù)測(cè)時(shí)間點(diǎn)最近的信息,從而導(dǎo)致了預(yù)測(cè)結(jié)果不理想。

    3.4?預(yù)測(cè)模型參數(shù)尋優(yōu)

    本文實(shí)驗(yàn)的預(yù)測(cè)模型選取了SVR、DT、DNN和LSTM四種方法進(jìn)行對(duì)比分析。SVR的核函數(shù)為徑向基函數(shù),DT的樹(shù)深為20,其他參數(shù)都采用了默認(rèn)的參數(shù)。在DNN和LSTM模型中,一般認(rèn)為增加隱層數(shù)可以降低網(wǎng)絡(luò)誤差,提高精度,但也使網(wǎng)絡(luò)復(fù)雜化,從而增加了網(wǎng)絡(luò)的訓(xùn)練時(shí)間和出現(xiàn)“過(guò)擬合”的傾向。所以本文實(shí)驗(yàn)在設(shè)計(jì)神經(jīng)網(wǎng)絡(luò)層數(shù)時(shí)考慮3層網(wǎng)絡(luò)(有2個(gè)隱層),靠調(diào)節(jié)隱層節(jié)點(diǎn)數(shù)來(lái)獲得較低的誤差,這樣的訓(xùn)練效果要比增加隱層數(shù)更容易實(shí)現(xiàn)[22]。

    如何尋找這個(gè)最佳隱節(jié)點(diǎn)數(shù),學(xué)者們給出了一些方案,見(jiàn)式(3)~(5):

    ∑ni=0Cin1>k(3)

    其中:k為樣本量,n1為隱層節(jié)點(diǎn)數(shù), n為輸入層節(jié)點(diǎn)數(shù)。當(dāng)i>n1時(shí),Cin1=0。

    n1=(n+m)12+a (4)

    其中:n為輸入層節(jié)點(diǎn)數(shù),m為輸出層節(jié)點(diǎn)數(shù),a為1~10的常數(shù)。

    n1=lbn(5)

    本文實(shí)驗(yàn)利用式(4)計(jì)算出隱節(jié)點(diǎn)個(gè)數(shù)的取值范圍,再進(jìn)行實(shí)驗(yàn)選擇最優(yōu)的隱節(jié)點(diǎn)數(shù)目。實(shí)驗(yàn)以L(fǎng)STM為例,3層網(wǎng)絡(luò)結(jié)構(gòu),輸入層節(jié)點(diǎn)數(shù)為44,輸出層節(jié)點(diǎn)數(shù)為1,所以隱層節(jié)點(diǎn)數(shù)取7~17。

    由表6可得,在隱節(jié)點(diǎn)數(shù)為[7,17]的整個(gè)取值區(qū)間中,RMSE值和MAE值都不是很穩(wěn)定,波動(dòng)起伏較大。當(dāng)隱節(jié)點(diǎn)數(shù)為13時(shí),RMSE值和MAE值最小,那么將最優(yōu)隱節(jié)點(diǎn)的個(gè)數(shù)取為13是較為合理的決定。

    4?實(shí)驗(yàn)與結(jié)果分析

    本文實(shí)驗(yàn)的數(shù)據(jù)是2016-6-30—2017-12-29共369個(gè)交易日的行情數(shù)據(jù)和互聯(lián)網(wǎng)新聞?shì)浨閿?shù)據(jù)。對(duì)比四種機(jī)器學(xué)習(xí)的預(yù)測(cè)模型,訓(xùn)練集和測(cè)試集的比例為10∶1,DNN和LSTM網(wǎng)絡(luò)模型的網(wǎng)絡(luò)層數(shù)為3,隱節(jié)點(diǎn)數(shù)為13。訓(xùn)練模型輸入窗口值取5,預(yù)測(cè)滯后窗口取0。分別用不同的采樣區(qū)間的數(shù)據(jù)做實(shí)驗(yàn),得到如圖5、6結(jié)果所示。

    從圖5和圖6可以得到,SVR在采樣區(qū)間120min時(shí)效果最好;DT在采樣區(qū)間15min時(shí)效果相對(duì)較好;DNN在采樣區(qū)間為60min時(shí)效果最好,RMSE和MAE都最小;LSTM采樣區(qū)間為5min時(shí)效果最好,RMSE和MAE都是最低值。

    SVR的原理是在高維空間中尋找出一個(gè)曲面進(jìn)行分類(lèi),但是由于本文數(shù)據(jù)的稀疏性,很難精準(zhǔn)地尋到這樣的高維曲面。DT可能更適用于特征維度不相關(guān)的數(shù)據(jù),本文的實(shí)驗(yàn)數(shù)據(jù)特征之間并不是完全獨(dú)立的,這極大地影響了DT的算法效果。DNN是最簡(jiǎn)單的神經(jīng)網(wǎng)絡(luò)模型,沒(méi)有處理序列關(guān)系的功能。LSTM模型能夠捕捉長(zhǎng)序列關(guān)系,學(xué)習(xí)保留需要的信息,遺忘不需要的信息,更符合本文含有時(shí)間序列特征的數(shù)據(jù),所以L(fǎng)STM比DNN表現(xiàn)出更好的人民幣匯率預(yù)測(cè)效果。綜合對(duì)比四種預(yù)測(cè)模型,LSTM的RMSE值和MAE值相對(duì)較小,是四個(gè)預(yù)測(cè)模型中預(yù)測(cè)效果最好的模型。

    5?結(jié)語(yǔ)

    本文將外匯歷史行情數(shù)據(jù)與互聯(lián)網(wǎng)外匯新聞數(shù)據(jù)融合作為預(yù)測(cè)美元兌人民幣匯率的源數(shù)據(jù),研究了模型訓(xùn)練的輸入向量窗口和預(yù)測(cè)滯后窗口的合理設(shè)置,對(duì)比分析了外匯新聞更好表達(dá)情感并為預(yù)測(cè)算法作基礎(chǔ)的特征組合,最后對(duì)比分析了四種機(jī)器學(xué)習(xí)模型的預(yù)測(cè)效果。從實(shí)驗(yàn)中能夠發(fā)現(xiàn)加入外匯新聞數(shù)據(jù)比僅含有歷史行情數(shù)據(jù)預(yù)測(cè)未來(lái)匯率變化的效果更好,且將外匯新聞數(shù)據(jù)處理成情感強(qiáng)度變化值來(lái)預(yù)測(cè)人民幣匯率效果最好。模型訓(xùn)練的輸入向量窗口不宜過(guò)大,小窗口更能給出好的預(yù)測(cè)效果,實(shí)驗(yàn)給出的最優(yōu)結(jié)果是5。預(yù)測(cè)滯后窗口設(shè)置為0有助于預(yù)測(cè)人民幣匯率。相比其他預(yù)測(cè)模型,LSTM的RMSE值和MAE值都較小,預(yù)測(cè)效果更好。

    由于本文構(gòu)建的外匯領(lǐng)域的新聞情感關(guān)鍵詞匯表較為簡(jiǎn)單、詞匯數(shù)量較少,導(dǎo)致構(gòu)建的情感向量維度很大一部分是數(shù)據(jù)為零(新聞內(nèi)容中沒(méi)有匹配到關(guān)鍵詞),這是本文實(shí)驗(yàn)的不足。實(shí)際上當(dāng)前外匯領(lǐng)域并沒(méi)有可用的具有領(lǐng)域特色的關(guān)鍵詞匯表,這對(duì)本文的實(shí)驗(yàn)也是一個(gè)挑戰(zhàn),未來(lái)希望能夠補(bǔ)充更多的外匯領(lǐng)域關(guān)鍵詞。另外,在對(duì)情感特征化的處理上本文采用了現(xiàn)有的公共情感分析工具,這對(duì)外匯領(lǐng)域的人民幣預(yù)測(cè)算法的適用性不是最佳的,未來(lái)將改進(jìn)情感分析算法以適用于外匯領(lǐng)域。目前本文對(duì)輸入向量窗口和預(yù)測(cè)滯后窗口的最優(yōu)值設(shè)定為定值,而對(duì)于波動(dòng)頻繁的人民幣匯率,自動(dòng)變化尋找最優(yōu)大小的滑動(dòng)窗口能夠達(dá)到更好的預(yù)測(cè)效果,這也是本文的未來(lái)工作之一。

    參考文獻(xiàn) (References)

    [1]秦喜文,張瑜,董小剛,等. 基于EEMD和SVR的人民幣匯率預(yù)測(cè)[J].東北師大學(xué)報(bào)(自然科學(xué)版), 2017, 49(2):47-51. (QIN X W, ZHANG Y, DONG X G, et al. Forecasting RMB exchange rate based on EEMD and SVR[J]. Journal of Northeast Normal University (Natural Science Edition), 2017, 49(2):47-51.)

    [2]馬超. 人民幣匯率預(yù)測(cè)[D]. 濟(jì)南: 山東大學(xué), 2017:8-56. (MA C. RMB exchange rate forecast[D]. Jinan: Shandong University, 2017: 8-56.)

    [3]FRSCHLER F, ALFANO S. Reading between the lines: The effect of language sentiment on economic indicators[C]// Proceedings of the 2017 Enterprise Applications, Markets and Services in the Finance Industry, LNBIP 276. Berlin: Springer, 2017:89-104.

    [4]趙巖,王利明,楊菁. 公共危機(jī)事件網(wǎng)絡(luò)輿情生命周期特征分析及對(duì)策研究[J]. 經(jīng)濟(jì)研究參考, 2015(16):57-69. (ZHAO Y, WANG L M, YANG J. Analysis of the characteristics of public opinion cycle of public crisis events and its countermeasures[J]. Economic Research Reference, 2015(16):57-69.)

    [5]丁潔. 基于社會(huì)網(wǎng)絡(luò)的網(wǎng)絡(luò)輿情演化研究[D]. 南京: 南京理工大學(xué), 2015:38-44. (DING J. Analysis on the evolution of online public opinion based on social network[D]. Nanjing: Nanjing University of Science and Technology, 2015: 38-44.)

    [6]PAGOLU V S, REDDY K N, PANDA G, et al. Sentiment analysis of Twitter data for predicting stock market movements[C]// Proceedings of the 2016 International Conference on Signal Processing, Communication, Power and Embedded System. Piscataway: IEEE, 2016: 1345-1350.

    [7]陳云松,嚴(yán)飛. 網(wǎng)絡(luò)輿情是否影響股市行情?基于新浪微博大數(shù)據(jù)的ARDL模型邊限分析[J]. 社會(huì), 2017, 37(2):51-73. (CHEN Y S, YAN F. Does online sentiment predict stock market indices? The ARDL bounds tests based on Sinamicroblog data[J]. Society, 2017, 37(2):51-73.)

    [8]張信東,原東良. 基于微博的投資者情緒對(duì)股票市場(chǎng)影響研究[J]. 情報(bào)雜志, 2017, 36(8):81-87. (ZHANG X D, YUAN D L. Research on the impact of investor sentiment on stock market based on microblog[J]. Journal of Intelligence, 2017, 36(8):81-87.)

    [9]朱昶勝,孫欣,馮文芳. 基于R語(yǔ)言的網(wǎng)絡(luò)輿情對(duì)股市影響研究[J]. 蘭州理工大學(xué)學(xué)報(bào), 2018, 44(4):103-108. (ZHU C S, SUN X, FENG W F. Study on the impact of network public opinion on the stock market based on Rlanguage[J]. Journal of Lanzhou University of Technology, 2018, 44(4):103-108.)

    [10]LI Q, WANG J, WANG F, et al. The role of social sentiment in stock markets: a view from joint effects of multiple information sources[J]. Multimedia Tools and Applications, 2017, 76(10):12315-12345.

    [11]THU T N T, XUAN V D. Using support vector machine in FoRex predicting[C]// Proceedings of the 2018 IEEE International Conference on Innovative Research and Development. Piscataway: IEEE, 2018:1-5.

    [12]SEETO E W K, YANG Y. Market sentiment dispersion and its effects on stock return and volatility[J]. Electronic Markets, 2017, 27(3): 283–296.

    [13]鄧景煒. 基于神經(jīng)網(wǎng)絡(luò)的外匯匯率預(yù)測(cè)研究[D]. 廣東: 暨南大學(xué), 2017:56-65. (DENG J W. Research on foreign exchange rate forecast based on neural network[D]. Guangdong: Jinan University, 2017: 56-65.)

    [14]LIU C, HOU W, LIU D. Foreign exchange rates forecasting with convolutional neural network[J]. Neural Processing Letters, 2017, 46(3):1095-1119.

    [15]CHEN W, ZHANG Y, YEO C K, et al. Stock market prediction using neural network through news on online social networks[C]// Proceedings of the 2017 International Smart Cities Conference. Piscataway: IEEE, 2017: 1-6.

    [16]LIU Y, QIN Z, LI P, et al. Stock volatility prediction using recurrent neural networks with sentiment analysis[C]// Proceedings of the 2017 International Conference on Industrial, Engineering and Other Applications of Applied Intelligent Systems, LNCS 10350. Berlin: Springer, 2017: 192-201.

    [17]AWAD M, KHANNA R. Support vector regression[J]. Neural Information Processing Letters and Reviews, 2007, 11(10):203-224.

    [18]QUINLAN J R. Induction on decision tree[J]. Machine Learning, 1986, 1(1):81-106.

    [19]SCHMIDHUBER J. Deep learning in neural networks: an overview[J]. Neural Networks, 2015, 61:85-117.

    [20]SHI X, CHEN Z, WANG H, et al. Convolutional LSTM network: a machine learning approach for precipitation nowcasting[C]// Proceedings of the 28th International Conference on Neural Information Processing Systems. Cambridge, MA: MIT Press, 2015: 802-810.

    [21]PEDREGOSA F, VAROQUAUX G, GRAMFORT A. Scikitlearn: machine learning in Python[J]. Journal of Machine Learning Research, 2011, 12:2825-2830.

    [22]王嶸冰,徐紅艷,李波,等. BP神經(jīng)網(wǎng)絡(luò)隱含層節(jié)點(diǎn)數(shù)確定方法研究[J]. 計(jì)算機(jī)技術(shù)與發(fā)展, 2018, 28(4): 31-35. (WANG R B, XU H Y, LI B, et al. Research on the method of determining hidden layer nodes in BP neural network[J]. Computer Technology and Development, 2018, 28(4):31-35.)

    This work is partially supported by the National Key Research and Development Program of China (2018YFC0807105), the National Natural Science Foundation of China (61462073), the Scientific Research Project of Science and Technology Committee of Shanghai Municipality (17DZ1101003, 18511106602, 18DZ2252300).

    WANG Jixiang, born in 1995, M. S. candidate. Her research interests include natural language processing, data mining.

    GUO Yi, born in 1975, Ph. D., professor. His research interests include text mining, knowledge discovery.

    QI Tianmei, born in 1994, M. S. candidate. Her research interests include natural language processing, data mining.

    WANG Zhihong, born in 1990, Ph. D. candidate. His research interests include natural language processing, text mining.

    LI Zhen, born in 1976, Ph. D. Her research interests include financial risk management, fraud risk prevention.

    TANG Minwei, born in 1990, M. S. His research interests include abnormal event detection, malicious group recognition.

    猜你喜歡
    機(jī)器學(xué)習(xí)
    基于詞典與機(jī)器學(xué)習(xí)的中文微博情感分析
    基于機(jī)器學(xué)習(xí)的圖像特征提取技術(shù)在圖像版權(quán)保護(hù)中的應(yīng)用
    基于網(wǎng)絡(luò)搜索數(shù)據(jù)的平遙旅游客流量預(yù)測(cè)分析
    前綴字母為特征在維吾爾語(yǔ)文本情感分類(lèi)中的研究
    下一代廣播電視網(wǎng)中“人工智能”的應(yīng)用
    活力(2016年8期)2016-11-12 17:30:08
    基于支持向量機(jī)的金融數(shù)據(jù)分析研究
    基于Spark的大數(shù)據(jù)計(jì)算模型
    基于樸素貝葉斯算法的垃圾短信智能識(shí)別系統(tǒng)
    基于圖的半監(jiān)督學(xué)習(xí)方法綜述
    機(jī)器學(xué)習(xí)理論在高中自主學(xué)習(xí)中的應(yīng)用
    国产毛片a区久久久久| 黄色 视频免费看| 亚洲中文字幕一区二区三区有码在线看 | 99国产精品99久久久久| 欧美高清成人免费视频www| 中文资源天堂在线| 熟妇人妻久久中文字幕3abv| 免费看光身美女| 不卡一级毛片| 神马国产精品三级电影在线观看| 久久精品夜夜夜夜夜久久蜜豆| 90打野战视频偷拍视频| 18禁美女被吸乳视频| 极品教师在线免费播放| 成人av一区二区三区在线看| 中文字幕人成人乱码亚洲影| 噜噜噜噜噜久久久久久91| 91av网站免费观看| 男女视频在线观看网站免费| 国产欧美日韩一区二区精品| 老司机福利观看| 99热这里只有精品一区 | 亚洲国产欧美一区二区综合| 精品无人区乱码1区二区| 狠狠狠狠99中文字幕| 久久亚洲真实| 男人的好看免费观看在线视频| 操出白浆在线播放| 国产97色在线日韩免费| 九色国产91popny在线| 亚洲中文日韩欧美视频| 欧美不卡视频在线免费观看| 欧美成人免费av一区二区三区| 搡老妇女老女人老熟妇| 欧美激情在线99| 国产69精品久久久久777片 | 亚洲美女黄片视频| 草草在线视频免费看| 在线观看一区二区三区| av中文乱码字幕在线| 色噜噜av男人的天堂激情| 亚洲精品美女久久久久99蜜臀| 国内毛片毛片毛片毛片毛片| 久久天躁狠狠躁夜夜2o2o| 免费搜索国产男女视频| 久久草成人影院| 怎么达到女性高潮| 熟妇人妻久久中文字幕3abv| 一级毛片高清免费大全| 特级一级黄色大片| 久久精品亚洲精品国产色婷小说| 在线国产一区二区在线| 免费在线观看视频国产中文字幕亚洲| 小说图片视频综合网站| 日韩中文字幕欧美一区二区| 此物有八面人人有两片| 午夜福利欧美成人| 五月玫瑰六月丁香| 日韩欧美免费精品| 免费搜索国产男女视频| 久久精品人妻少妇| 亚洲成人久久性| 午夜福利欧美成人| 国产精品九九99| 久久亚洲真实| 久久精品国产99精品国产亚洲性色| 99久久成人亚洲精品观看| 国产精品野战在线观看| 国产69精品久久久久777片 | 热99re8久久精品国产| 99热这里只有是精品50| 一二三四在线观看免费中文在| 白带黄色成豆腐渣| 中文在线观看免费www的网站| xxx96com| 成人国产综合亚洲| 国产真人三级小视频在线观看| 黄色视频,在线免费观看| 99久久无色码亚洲精品果冻| 欧美中文日本在线观看视频| 日本在线视频免费播放| 免费一级毛片在线播放高清视频| 麻豆久久精品国产亚洲av| 丰满的人妻完整版| 啪啪无遮挡十八禁网站| 亚洲国产中文字幕在线视频| 在线观看舔阴道视频| 午夜福利高清视频| 国产黄a三级三级三级人| 国产亚洲av嫩草精品影院| aaaaa片日本免费| 亚洲第一电影网av| 91九色精品人成在线观看| 成人av一区二区三区在线看| www日本黄色视频网| 欧美性猛交╳xxx乱大交人| 久久午夜亚洲精品久久| 日韩欧美国产在线观看| 一个人看的www免费观看视频| 神马国产精品三级电影在线观看| 天堂√8在线中文| 久久亚洲真实| 国产视频内射| 丁香六月欧美| 中文亚洲av片在线观看爽| 国产精品久久久久久精品电影| 亚洲精华国产精华精| 国产单亲对白刺激| 国产午夜精品论理片| av天堂在线播放| 午夜福利免费观看在线| 精品无人区乱码1区二区| 亚洲午夜理论影院| 日本五十路高清| 九九热线精品视视频播放| 中文字幕精品亚洲无线码一区| 窝窝影院91人妻| 99久久久亚洲精品蜜臀av| 国产av不卡久久| 国产美女午夜福利| 怎么达到女性高潮| 每晚都被弄得嗷嗷叫到高潮| 天堂√8在线中文| 久99久视频精品免费| 黑人欧美特级aaaaaa片| 久久香蕉精品热| 香蕉av资源在线| 久久亚洲真实| 成人亚洲精品av一区二区| 亚洲中文日韩欧美视频| 精品电影一区二区在线| 亚洲av成人av| 久久久国产成人免费| 国产在线精品亚洲第一网站| 亚洲自偷自拍图片 自拍| 欧美av亚洲av综合av国产av| 搡老妇女老女人老熟妇| 校园春色视频在线观看| 黄色日韩在线| 久久天堂一区二区三区四区| 午夜免费激情av| 久久久久久久久免费视频了| 午夜福利在线观看免费完整高清在 | 精品电影一区二区在线| 床上黄色一级片| av女优亚洲男人天堂 | 亚洲中文av在线| 成人av在线播放网站| 精品国产乱子伦一区二区三区| 黑人巨大精品欧美一区二区mp4| 男人舔女人下体高潮全视频| 久久天躁狠狠躁夜夜2o2o| 在线播放国产精品三级| 亚洲国产高清在线一区二区三| 久久久久久久久久黄片| 成年人黄色毛片网站| 精品一区二区三区av网在线观看| 两个人的视频大全免费| 一二三四社区在线视频社区8| 久久性视频一级片| 久久久精品大字幕| 搞女人的毛片| 99re在线观看精品视频| 日韩av在线大香蕉| 成人亚洲精品av一区二区| 一级黄色大片毛片| 亚洲av美国av| 俺也久久电影网| xxx96com| 999精品在线视频| 日韩三级视频一区二区三区| 狂野欧美白嫩少妇大欣赏| 久久精品国产综合久久久| 亚洲国产精品sss在线观看| 成在线人永久免费视频| 国产成人一区二区三区免费视频网站| 99热精品在线国产| 午夜福利高清视频| 国产一区二区激情短视频| x7x7x7水蜜桃| 美女被艹到高潮喷水动态| www.自偷自拍.com| 亚洲熟妇中文字幕五十中出| 亚洲欧美日韩高清专用| 一级毛片精品| 国产精品久久久久久亚洲av鲁大| 偷拍熟女少妇极品色| 亚洲第一欧美日韩一区二区三区| www日本在线高清视频| 久久这里只有精品中国| 成人无遮挡网站| 国产又黄又爽又无遮挡在线| 国产极品精品免费视频能看的| 亚洲熟妇中文字幕五十中出| 午夜激情欧美在线| 搡老熟女国产l中国老女人| 国产三级中文精品| 天天添夜夜摸| xxxwww97欧美| 日韩国内少妇激情av| 国产蜜桃级精品一区二区三区| 最近最新免费中文字幕在线| 亚洲天堂国产精品一区在线| 日本黄色视频三级网站网址| 国产三级黄色录像| 真人一进一出gif抽搐免费| 久久久久性生活片| 最近最新中文字幕大全免费视频| 亚洲九九香蕉| 国产久久久一区二区三区| 久久精品91蜜桃| 日本精品一区二区三区蜜桃| 麻豆av在线久日| 精品国产乱子伦一区二区三区| 久久欧美精品欧美久久欧美| 国内毛片毛片毛片毛片毛片| aaaaa片日本免费| 真人做人爱边吃奶动态| 又黄又粗又硬又大视频| www.自偷自拍.com| 成在线人永久免费视频| 亚洲成a人片在线一区二区| 9191精品国产免费久久| 国产精品久久久久久亚洲av鲁大| 中文字幕熟女人妻在线| 欧美3d第一页| 女同久久另类99精品国产91| 久久精品国产清高在天天线| 久久九九热精品免费| 少妇的逼水好多| 丁香欧美五月| 亚洲精华国产精华精| 久久久久精品国产欧美久久久| 日韩人妻高清精品专区| 久久中文字幕人妻熟女| 亚洲avbb在线观看| 黄色成人免费大全| 日本精品一区二区三区蜜桃| 国产成人一区二区三区免费视频网站| 搡老妇女老女人老熟妇| 99精品久久久久人妻精品| 啦啦啦观看免费观看视频高清| 国产精品综合久久久久久久免费| 成人特级av手机在线观看| 亚洲欧美日韩高清专用| 国产欧美日韩精品一区二区| 亚洲 国产 在线| 国产av不卡久久| 夜夜夜夜夜久久久久| 国产毛片a区久久久久| www日本黄色视频网| 国产亚洲精品久久久com| 精品久久久久久久人妻蜜臀av| 亚洲 欧美 日韩 在线 免费| 美女高潮喷水抽搐中文字幕| 免费在线观看亚洲国产| 香蕉久久夜色| 成人三级黄色视频| 成人午夜高清在线视频| 亚洲在线观看片| 亚洲真实伦在线观看| 国产av不卡久久| 日本一二三区视频观看| av片东京热男人的天堂| 不卡av一区二区三区| 久久精品aⅴ一区二区三区四区| 麻豆av在线久日| 天堂av国产一区二区熟女人妻| 黄色视频,在线免费观看| 久久久久国产一级毛片高清牌| 亚洲最大成人中文| 亚洲真实伦在线观看| 嫩草影院精品99| 欧美另类亚洲清纯唯美| 成人性生交大片免费视频hd| 免费一级毛片在线播放高清视频| 97人妻精品一区二区三区麻豆| 这个男人来自地球电影免费观看| 9191精品国产免费久久| 久久99热这里只有精品18| 日韩欧美免费精品| 两个人看的免费小视频| 欧美日本亚洲视频在线播放| 免费看十八禁软件| 色综合婷婷激情| 久久中文看片网| 久久久国产成人免费| 搡老熟女国产l中国老女人| 日韩中文字幕欧美一区二区| 国产伦人伦偷精品视频| 两个人视频免费观看高清| 国产精品久久电影中文字幕| 国产一区二区三区视频了| 久久中文字幕人妻熟女| 最近最新中文字幕大全电影3| 国内少妇人妻偷人精品xxx网站 | 久久草成人影院| 国产一级毛片七仙女欲春2| 国产黄a三级三级三级人| bbb黄色大片| 又紧又爽又黄一区二区| 久久婷婷人人爽人人干人人爱| 免费搜索国产男女视频| 午夜精品一区二区三区免费看| 欧美+亚洲+日韩+国产| 精品久久久久久久末码| 可以在线观看毛片的网站| 国产不卡一卡二| 三级毛片av免费| 国产精品1区2区在线观看.| 国产精品爽爽va在线观看网站| 伦理电影免费视频| 成人国产一区最新在线观看| 欧美成人一区二区免费高清观看 | 亚洲,欧美精品.| 成年免费大片在线观看| 精品不卡国产一区二区三区| 一个人免费在线观看电影 | a级毛片a级免费在线| 一本精品99久久精品77| 2021天堂中文幕一二区在线观| 亚洲精品久久国产高清桃花| 国产精品乱码一区二三区的特点| 亚洲精品粉嫩美女一区| 欧美中文综合在线视频| 男人舔女人的私密视频| 日韩高清综合在线| 日韩欧美在线乱码| 欧美在线黄色| 成人无遮挡网站| 久久久精品大字幕| 五月伊人婷婷丁香| 国产麻豆成人av免费视频| 女同久久另类99精品国产91| 久久中文字幕人妻熟女| 91老司机精品| 最新中文字幕久久久久 | 国产亚洲精品av在线| 丰满人妻一区二区三区视频av | 99久久精品国产亚洲精品| 国产午夜福利久久久久久| 国产精品女同一区二区软件 | 每晚都被弄得嗷嗷叫到高潮| 国产精品久久久久久人妻精品电影| 久久午夜综合久久蜜桃| 国产野战对白在线观看| 亚洲国产色片| 亚洲专区国产一区二区| 国产成人福利小说| 成熟少妇高潮喷水视频| 制服人妻中文乱码| 999精品在线视频| 黄频高清免费视频| 少妇的逼水好多| www.999成人在线观看| www.精华液| 亚洲真实伦在线观看| 1024手机看黄色片| 在线a可以看的网站| 露出奶头的视频| 99热这里只有精品一区 | 18禁观看日本| 18禁裸乳无遮挡免费网站照片| 99久久精品一区二区三区| 亚洲国产精品999在线| 亚洲av第一区精品v没综合| 国产v大片淫在线免费观看| 亚洲专区国产一区二区| 最近视频中文字幕2019在线8| 日本三级黄在线观看| 婷婷精品国产亚洲av在线| 午夜福利免费观看在线| 欧美另类亚洲清纯唯美| 精品电影一区二区在线| 最近最新中文字幕大全免费视频| 日日摸夜夜添夜夜添小说| 日本 av在线| 99riav亚洲国产免费| 99国产精品99久久久久| 国产伦精品一区二区三区视频9 | 一a级毛片在线观看| 午夜精品久久久久久毛片777| 岛国在线观看网站| 国产91精品成人一区二区三区| 日本黄色片子视频| 久久香蕉精品热| 亚洲性夜色夜夜综合| 九色国产91popny在线| 91av网一区二区| 俺也久久电影网| 欧美乱码精品一区二区三区| 亚洲精品粉嫩美女一区| 亚洲在线自拍视频| 国产一区二区三区视频了| 亚洲五月天丁香| 国产探花在线观看一区二区| www日本黄色视频网| 亚洲aⅴ乱码一区二区在线播放| 国产激情偷乱视频一区二区| 国产精品电影一区二区三区| 免费av毛片视频| 亚洲五月婷婷丁香| 色av中文字幕| 国产亚洲av高清不卡| 国产精品久久久人人做人人爽| 色视频www国产| 亚洲精品在线美女| 一级a爱片免费观看的视频| 久9热在线精品视频| 欧美激情久久久久久爽电影| 久久精品影院6| www.精华液| 不卡一级毛片| 亚洲精品粉嫩美女一区| 天堂网av新在线| 国产精品久久久久久精品电影| 色综合欧美亚洲国产小说| 日本五十路高清| 非洲黑人性xxxx精品又粗又长| 亚洲人成网站在线播放欧美日韩| 黄色视频,在线免费观看| 国产精品野战在线观看| 丰满人妻一区二区三区视频av | 久99久视频精品免费| 亚洲熟女毛片儿| 嫩草影院入口| 成人国产综合亚洲| 制服丝袜大香蕉在线| 中文资源天堂在线| 露出奶头的视频| 国产激情偷乱视频一区二区| 亚洲精品美女久久久久99蜜臀| 日韩欧美国产在线观看| 国产主播在线观看一区二区| 日本精品一区二区三区蜜桃| 又大又爽又粗| 亚洲专区字幕在线| 99在线人妻在线中文字幕| 美女扒开内裤让男人捅视频| 国产精品久久久久久亚洲av鲁大| 禁无遮挡网站| 不卡av一区二区三区| 听说在线观看完整版免费高清| 淫妇啪啪啪对白视频| 18禁国产床啪视频网站| 国产激情久久老熟女| 一a级毛片在线观看| av片东京热男人的天堂| 国内少妇人妻偷人精品xxx网站 | 欧美不卡视频在线免费观看| 亚洲精品中文字幕一二三四区| 中文资源天堂在线| 亚洲中文av在线| 精品国内亚洲2022精品成人| 一进一出好大好爽视频| 亚洲avbb在线观看| 色在线成人网| 黄色片一级片一级黄色片| 午夜两性在线视频| 嫩草影院入口| 熟妇人妻久久中文字幕3abv| 国产三级黄色录像| 国产成人av激情在线播放| 国产av在哪里看| 黄色片一级片一级黄色片| 成年女人看的毛片在线观看| 母亲3免费完整高清在线观看| 香蕉久久夜色| 在线观看美女被高潮喷水网站 | 欧美日本亚洲视频在线播放| av福利片在线观看| 九色成人免费人妻av| 怎么达到女性高潮| 日本精品一区二区三区蜜桃| 国内精品久久久久精免费| 男女床上黄色一级片免费看| 亚洲在线自拍视频| 十八禁网站免费在线| 在线播放国产精品三级| 男女做爰动态图高潮gif福利片| 色av中文字幕| avwww免费| 美女扒开内裤让男人捅视频| 一区福利在线观看| 精品久久久久久成人av| 午夜a级毛片| 熟女少妇亚洲综合色aaa.| 国产精品久久久av美女十八| 亚洲第一欧美日韩一区二区三区| 美女大奶头视频| 特大巨黑吊av在线直播| 国产一区二区在线观看日韩 | 国产黄色小视频在线观看| 国产伦在线观看视频一区| 国产精品女同一区二区软件 | 九九久久精品国产亚洲av麻豆 | 国产午夜福利久久久久久| 国产亚洲av嫩草精品影院| 精品国产超薄肉色丝袜足j| 国内精品久久久久久久电影| 亚洲 国产 在线| 国内精品久久久久久久电影| 婷婷精品国产亚洲av在线| aaaaa片日本免费| 亚洲真实伦在线观看| 成人鲁丝片一二三区免费| 在线视频色国产色| 欧美成人免费av一区二区三区| 午夜a级毛片| 精品久久久久久久久久久久久| 一进一出好大好爽视频| 国产精品一区二区免费欧美| 长腿黑丝高跟| 日日夜夜操网爽| 19禁男女啪啪无遮挡网站| 国产伦精品一区二区三区四那| 九九热线精品视视频播放| 欧美日本视频| 午夜亚洲福利在线播放| 日韩国内少妇激情av| а√天堂www在线а√下载| 久久久久国产精品人妻aⅴ院| 国产精品 国内视频| 久久香蕉精品热| 真人一进一出gif抽搐免费| 日本免费一区二区三区高清不卡| 非洲黑人性xxxx精品又粗又长| 午夜影院日韩av| 欧美极品一区二区三区四区| 在线永久观看黄色视频| 精品一区二区三区av网在线观看| 久久久水蜜桃国产精品网| 亚洲av中文字字幕乱码综合| 最近视频中文字幕2019在线8| 小蜜桃在线观看免费完整版高清| 噜噜噜噜噜久久久久久91| 欧美绝顶高潮抽搐喷水| 啪啪无遮挡十八禁网站| 亚洲人成网站在线播放欧美日韩| 麻豆成人午夜福利视频| 亚洲精品一区av在线观看| 成人三级做爰电影| 久久天堂一区二区三区四区| 亚洲人成网站高清观看| 女生性感内裤真人,穿戴方法视频| 波多野结衣巨乳人妻| 亚洲av电影在线进入| 人人妻人人看人人澡| 偷拍熟女少妇极品色| 国内精品一区二区在线观看| 欧美黑人巨大hd| 中文亚洲av片在线观看爽| av女优亚洲男人天堂 | 久99久视频精品免费| 国产精品综合久久久久久久免费| 香蕉国产在线看| 12—13女人毛片做爰片一| 好男人在线观看高清免费视频| 亚洲av成人不卡在线观看播放网| 97超级碰碰碰精品色视频在线观看| 一级a爱片免费观看的视频| 一本精品99久久精品77| 国产av不卡久久| netflix在线观看网站| 欧美在线一区亚洲| 成年女人看的毛片在线观看| 日韩有码中文字幕| 国产男靠女视频免费网站| 99久国产av精品| 久久精品aⅴ一区二区三区四区| 亚洲欧洲精品一区二区精品久久久| 亚洲精品美女久久久久99蜜臀| 亚洲av片天天在线观看| av视频在线观看入口| 在线a可以看的网站| 久久久国产成人免费| 午夜福利18| 在线播放国产精品三级| 老汉色av国产亚洲站长工具| 中文字幕av在线有码专区| 亚洲av第一区精品v没综合| 一二三四在线观看免费中文在| 真人一进一出gif抽搐免费| 伊人久久大香线蕉亚洲五| 成年免费大片在线观看| 国产真人三级小视频在线观看| 日本在线视频免费播放| 日韩欧美三级三区| 可以在线观看毛片的网站| 亚洲九九香蕉| 搞女人的毛片| 最近最新免费中文字幕在线| 色哟哟哟哟哟哟| 免费在线观看亚洲国产| av国产免费在线观看| 午夜久久久久精精品| 国产精品九九99| 亚洲一区二区三区不卡视频| 亚洲av第一区精品v没综合| 天天一区二区日本电影三级| 在线观看午夜福利视频| 日韩免费av在线播放| 女人被狂操c到高潮| 久久精品国产亚洲av香蕉五月| 午夜精品一区二区三区免费看| 精品久久久久久久毛片微露脸| 白带黄色成豆腐渣| 午夜精品在线福利| 国产精品久久久久久亚洲av鲁大| 婷婷丁香在线五月| 久久中文看片网| 人人妻人人看人人澡| 99久久无色码亚洲精品果冻| 999久久久精品免费观看国产| 黄色片一级片一级黄色片|