• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    融合多維特征的高校專利價(jià)值分級(jí)方法及其實(shí)證研究*

    2022-12-17 07:49:30高道斌
    圖書館論壇 2022年11期
    關(guān)鍵詞:發(fā)明人語義專利

    張 彪,吳 紅,高道斌

    0 引言

    高校是國(guó)家創(chuàng)新系統(tǒng)中的重要行為主體,截至2020年12月,其發(fā)明專利有效量達(dá)442,523項(xiàng)[1],但產(chǎn)業(yè)化率僅3%[2]。為促進(jìn)高校科技成果轉(zhuǎn)化,2020年教育部、國(guó)家知識(shí)產(chǎn)權(quán)局和科技部聯(lián)合發(fā)布的《關(guān)于提升高等學(xué)校專利質(zhì)量 促進(jìn)轉(zhuǎn)化運(yùn)用的若干意見》指出樹立高校專利等科技成果只有轉(zhuǎn)化才能實(shí)現(xiàn)創(chuàng)新價(jià)值、不轉(zhuǎn)化是最大損失的理念;2021年“每萬人口高價(jià)值發(fā)明專利擁有量(件)”寫入“十四五”時(shí)期經(jīng)濟(jì)社會(huì)發(fā)展主要指標(biāo)。此外,隨著新興技術(shù)復(fù)雜度的提高,企業(yè)在僅憑自身研發(fā)體系和資源構(gòu)成愈加難以取得或保持創(chuàng)新優(yōu)勢(shì)時(shí)[3],逐漸通過專利轉(zhuǎn)讓、許可等形式吸收高校的技術(shù)成果、實(shí)現(xiàn)技術(shù)升級(jí)[4]。面對(duì)海量專利,校企雙方都希望能夠通過技術(shù)轉(zhuǎn)移將高校專利的技術(shù)價(jià)值轉(zhuǎn)變?yōu)楫a(chǎn)業(yè)價(jià)值。然而,并非所有高校專利都具有高價(jià)值,也并非所有高校專利都能發(fā)生技術(shù)轉(zhuǎn)移。因此,如何全面客觀評(píng)估高校專利價(jià)值、準(zhǔn)確測(cè)算高校專利的技術(shù)轉(zhuǎn)移潛力成為推動(dòng)高校技術(shù)成果與市場(chǎng)對(duì)接、促進(jìn)成果變現(xiàn)以及協(xié)助企業(yè)定位高價(jià)值專利迫切需要解決的問題。本文擬就該問題進(jìn)行探索。

    1 文獻(xiàn)綜述

    專利價(jià)值是衡量人類知識(shí)產(chǎn)權(quán)水平的主要測(cè)度標(biāo)準(zhǔn)[5],學(xué)者就如何客觀準(zhǔn)確評(píng)估專利價(jià)值展開了探索。早期的專利價(jià)值評(píng)估主要基于經(jīng)濟(jì)學(xué)方法,包括成本法、市場(chǎng)法、收益法[6],近期也有學(xué)者提出實(shí)物期權(quán)法[7]、潛在維權(quán)成本評(píng)估法[8]。經(jīng)濟(jì)學(xué)方法多用于評(píng)估企業(yè)專利的資產(chǎn)價(jià)值,計(jì)算公式的參數(shù)估計(jì)主觀性強(qiáng),現(xiàn)實(shí)中較少使用。當(dāng)前對(duì)專利價(jià)值評(píng)估方法的研究,更多是從兩方面展開討論。

    (1)指標(biāo)評(píng)價(jià)方法。部分學(xué)者通過對(duì)指標(biāo)賦權(quán)評(píng)估專利價(jià)值。Zhang等[9]使用信息熵對(duì)審查時(shí)長(zhǎng)、權(quán)力要求數(shù)量、同族專利數(shù)等指標(biāo)進(jìn)行加權(quán),并使用協(xié)同過濾技術(shù)排除創(chuàng)造性低的專利,進(jìn)而確定高價(jià)值專利。伊惠芳等[10]提出一種柔性的動(dòng)態(tài)確權(quán)專利價(jià)值評(píng)價(jià)框架,采用熵權(quán)法對(duì)指標(biāo)賦權(quán),并利用多屬性決策方法識(shí)別高價(jià)值專利。部分學(xué)者借助機(jī)器學(xué)習(xí)構(gòu)建評(píng)估模型。Kim等[11]將被引次數(shù)作為專利價(jià)值的代理變量,選取相似專利數(shù)、權(quán)利人歷史被引數(shù)等指標(biāo),使用隨機(jī)森林、邏輯回歸等方法構(gòu)建專利價(jià)值評(píng)估模型。冉從敬等[12]以有無技術(shù)轉(zhuǎn)移為依據(jù)劃分專利價(jià)值,從指標(biāo)易獲取性角度選取發(fā)明人數(shù)量、3年內(nèi)被引用次數(shù)等指標(biāo),并采用主成分分析方法對(duì)指標(biāo)進(jìn)行篩選,最后基于人工神經(jīng)網(wǎng)絡(luò)構(gòu)建高校專利價(jià)值評(píng)估模型。

    (2)文本分析方法。Park等[13]提出采用專利文本中的SAO結(jié)構(gòu)代表技術(shù)方案,通過預(yù)測(cè)TRIZ演化趨勢(shì)判斷專利價(jià)值。詹文青等[14]基于語義標(biāo)注專利文獻(xiàn)和技術(shù)需求的技術(shù)問題、技術(shù)功能、技術(shù)效果等技術(shù)特征詞組,計(jì)算專利文獻(xiàn)和技術(shù)需求的相似性,根據(jù)相似度排序識(shí)別潛在高價(jià)值專利。郭燁等[15]認(rèn)為專利價(jià)值的核心是技術(shù)水平的高低,據(jù)此提出一種基于功能分析的專利價(jià)值評(píng)估方法,在專利功能句抽取的基礎(chǔ)上從重要性、性能、成本、有害性等角度分析專利價(jià)值。

    綜上,指標(biāo)評(píng)價(jià)方法多是從專利自身屬性特征出發(fā),從技術(shù)、經(jīng)濟(jì)、法律等層面選取評(píng)估指標(biāo),采取主、客方法對(duì)指標(biāo)賦權(quán)或構(gòu)建機(jī)器學(xué)習(xí)模型評(píng)估專利價(jià)值。文本分析方法強(qiáng)調(diào)專利文本信息包含的技術(shù)方案是專利價(jià)值的重要來源,主要基于TRIZ理論對(duì)專利的技術(shù)方案進(jìn)行表征,通過對(duì)技術(shù)方案進(jìn)行定量分析評(píng)價(jià)專利價(jià)值。上述方法對(duì)專利價(jià)值評(píng)估均有一定作用,但少有研究能夠?qū)⒅笜?biāo)評(píng)價(jià)和文本分析進(jìn)行有效結(jié)合,從專利自身屬性特征和專利文本語義信息的角度全面判斷專利價(jià)值,而且當(dāng)前研究多是將專利籠統(tǒng)分為高價(jià)值專利、低價(jià)值專利,未能細(xì)化專利價(jià)值的層級(jí)結(jié)構(gòu)?;诖耍狙芯吭诮梃b已有研究成果的基礎(chǔ)上,提出一種融合專利自身屬性、文本信息等多維特征的高校專利價(jià)值分級(jí)方法,旨在為高校準(zhǔn)確評(píng)估專利價(jià)值、適時(shí)對(duì)外提供實(shí)踐路徑,也為企業(yè)尋求高校高價(jià)值專利提供決策參考。

    2 研究方法

    專利價(jià)值來源于多個(gè)方面,主要受技術(shù)本身的創(chuàng)新水平、專利撰寫質(zhì)量以及發(fā)明人知識(shí)積累影響[16-17]。對(duì)應(yīng)以上3個(gè)影響因素,本研究將融合以下3個(gè)維度的特征實(shí)現(xiàn)對(duì)高校專利價(jià)值更準(zhǔn)確的評(píng)估:專利文本語義特征,專利文本語義信息包含的技術(shù)方案能夠反映技術(shù)的創(chuàng)新水平[15];專利自身屬性特征,技術(shù)、法律、經(jīng)濟(jì)3個(gè)層面的專利自身屬性特征是現(xiàn)有研究中通過專利撰寫質(zhì)量評(píng)估專利價(jià)值的重要可量化指標(biāo)[10];發(fā)明人特征,發(fā)明人能力越強(qiáng)則其創(chuàng)造的專利具有的價(jià)值越高[18],據(jù)此設(shè)計(jì)能夠直接體現(xiàn)發(fā)明人能力與專利價(jià)值關(guān)聯(lián)的指標(biāo)。以上述特征為基礎(chǔ),采用機(jī)器學(xué)習(xí)算法構(gòu)建高校專利價(jià)值評(píng)估模型,預(yù)測(cè)專利發(fā)生技術(shù)轉(zhuǎn)移的概率,并劃定閾值將專利價(jià)值分級(jí)細(xì)化,以期更準(zhǔn)確、更細(xì)粒度地對(duì)高校專利價(jià)值進(jìn)行評(píng)估與分級(jí)。本研究框架如圖1所示。

    圖1 研究框架

    2.1 專利數(shù)據(jù)分類

    專利價(jià)值通常使用被引頻次[11]、專利強(qiáng)度[19]、交易價(jià)格[20]、有無技術(shù)轉(zhuǎn)移[12]等作為代理變量,而高校專利價(jià)值最直接的體現(xiàn)就是通過轉(zhuǎn)讓或許可等方式轉(zhuǎn)移至企業(yè)??紤]到交易價(jià)格的私密性和獲取難度,本研究以有無技術(shù)轉(zhuǎn)移作為專利價(jià)值的分類準(zhǔn)則。主要獲取3類數(shù)據(jù):類別一,已發(fā)生技術(shù)轉(zhuǎn)移的專利,其技術(shù)轉(zhuǎn)移概率為1;類別二,直至失效也未發(fā)生技術(shù)轉(zhuǎn)移的專利,其技術(shù)轉(zhuǎn)移概率為0;類別三,當(dāng)前有效但未發(fā)生技術(shù)轉(zhuǎn)移的專利。類別一、類別二數(shù)據(jù)主要用于模型構(gòu)建,類別三數(shù)據(jù)用于展現(xiàn)模型預(yù)測(cè)的效果。

    2.2 多維特征獲取

    (1)專利文本語義特征。專利價(jià)值核心在于其技術(shù)水平的高低[15],而技術(shù)水平的高低則取決于專利文本中技術(shù)方案的描述。從專利技術(shù)自身擁有的技術(shù)方案出發(fā)進(jìn)行價(jià)值分析,關(guān)鍵在于如何對(duì)專利文本語義特征進(jìn)行有效表征?,F(xiàn)有研究多借助TRIZ,通過對(duì)功能語句分析實(shí)現(xiàn)價(jià)值評(píng)估[21]。這種方法通常需要人工解讀,效率較為低下。隨著人工智能技術(shù)的發(fā)展,自然語言處理中的詞向量方法實(shí)現(xiàn)了對(duì)各類文本語義特征的自動(dòng)編碼。Word2Vec[22]是常用的詞向量模型,相比于one-hot等高維、稀疏的表示法,Word2Vec訓(xùn)練出的詞向量是低維、稠密的,而且利用了詞的上下文信息,語義信息更加豐富,解決了向量稀疏和語義聯(lián)系兩個(gè)問題。但是,Word2Vec忽略了詞語與整個(gè)句子之間的聯(lián)系,對(duì)于局部與主體之間的特征表達(dá)得不夠準(zhǔn)確。直到2018年,Bert[23]通過海量語料預(yù)訓(xùn)練,結(jié)合不同語境動(dòng)態(tài)獲取詞語在上下文中不同的語義特征,有效克服了Word2Vec的缺陷,可以將語義特征從詞級(jí)別深化到句子級(jí)別[24],能夠更好地對(duì)專利文本語義特征進(jìn)行表征。

    本研究擬采用12層Encoder的Bert模型,模型輸入是專利文本,輸出是768維的句向量。由于句向量維度過于龐大,可能會(huì)增加冗余信息對(duì)模型性能的干擾,而且不同的特征之間可能會(huì)存在某種相關(guān)性,導(dǎo)致后續(xù)構(gòu)建的模型消耗時(shí)間過長(zhǎng)且難以獲得最優(yōu)的參數(shù),進(jìn)而使模型性能降低,因此本研究采用主成分分析方法(PCA)對(duì)句向量進(jìn)行降維處理,將句向量的前d個(gè)主成分作為專利文本語義特征,以特征向量形式進(jìn)行存儲(chǔ)。

    (2)專利自身屬性特征。本研究的專利自身屬性特征即各大專利數(shù)據(jù)庫規(guī)范化的字段信息及專利著錄項(xiàng)目中常被用以評(píng)估專利價(jià)值的指標(biāo)[6]。結(jié)合已有研究,依據(jù)《專利價(jià)值分析指標(biāo)體系操作手冊(cè)》從技術(shù)、法律、經(jīng)濟(jì)3個(gè)層面選取廣泛使用的指標(biāo),如表1所示。

    表1 專利自身屬性特征

    (3)發(fā)明人特征。發(fā)明人是專利的直接關(guān)聯(lián)者,雖有部分學(xué)者注意到發(fā)明人對(duì)專利價(jià)值的重要影響,并采用第一發(fā)明人職稱、第一發(fā)明人職務(wù)、第一發(fā)明人所在單位等指標(biāo)表征發(fā)明人的能力,但職稱、職務(wù)等多是從側(cè)面體現(xiàn)發(fā)明人的綜合能力[34],難以與專利價(jià)值產(chǎn)生直接聯(lián)系。因此,本研究設(shè)計(jì)了能夠更直接體現(xiàn)發(fā)明人能力與專利價(jià)值關(guān)聯(lián)的指標(biāo)。專利發(fā)明人通常有多個(gè),為了便于計(jì)算,使用第一發(fā)明人作為發(fā)明人的代表,具體指標(biāo)如下:

    Y1:第一發(fā)明人授權(quán)專利參與數(shù)目。正向指標(biāo),參與數(shù)目越多,則第一發(fā)明人的專利被授權(quán)能力越強(qiáng),以有效專利數(shù)與失效專利數(shù)的和表征,不包含未授權(quán)專利。

    Y2:第一發(fā)明人技術(shù)轉(zhuǎn)移率。正向指標(biāo),技術(shù)轉(zhuǎn)移率越高,則第一發(fā)明人的科技成果轉(zhuǎn)化能力越強(qiáng),計(jì)算方法如公式(1)所示。其中,a代表第一發(fā)明人參與授權(quán)的專利中發(fā)生轉(zhuǎn)移的數(shù)量。

    Y3:第一發(fā)明人資源浪費(fèi)率。負(fù)向指標(biāo),資源浪費(fèi)率越大,則第一發(fā)明人的科技成果轉(zhuǎn)化能力越弱,計(jì)算方法如公式(2)所示。其中,b代表第一發(fā)明人參與授權(quán)的專利中直至失效也未發(fā)生轉(zhuǎn)移的專利數(shù)。

    Y4:第一發(fā)明人的技術(shù)覆蓋面。正向指標(biāo),技術(shù)覆蓋面越廣,則第一發(fā)明人的技術(shù)掌握越全面,以第一發(fā)明人參與專利的IPC分類號(hào)前4位總類數(shù)進(jìn)行表征。

    2.3 高校專利價(jià)值評(píng)估模型構(gòu)建

    本研究采用機(jī)器學(xué)習(xí)的二分類算法構(gòu)建專利價(jià)值評(píng)估模型,在進(jìn)行模型構(gòu)建之前,需要對(duì)專利文本語義特征、專利自身屬性特征、發(fā)明人特征3個(gè)維度的特征進(jìn)行融合處理。采用d維特征向量表示專利文本語義特征,將14個(gè)指標(biāo)轉(zhuǎn)化為14維的特征向量表示專利自身屬性特征,使用4維特征向量表示發(fā)明人特征,然后將以上3個(gè)特征向量進(jìn)行橫向拼接,最后生成d+18維特征向量,并進(jìn)行歸一化處理。模型輸入為d+18維的特征向量,模型輸出為技術(shù)轉(zhuǎn)移概率。為驗(yàn)證本研究方法的有效性,采用邏輯回歸(LR)、隨機(jī)森林(RF)、高斯貝葉斯(GaussianNB)、K近鄰(KNN)、梯度提升算法(GBDT)、支持向量機(jī)(SVM)、極端梯度提升算法(XGBoost)、BP神經(jīng)網(wǎng)絡(luò)(BP)、自適應(yīng)增強(qiáng)(Adaboost)9種常用的機(jī)器學(xué)習(xí)算法進(jìn)行對(duì)比,并從中挑選性能最好的模型用以預(yù)測(cè)未知數(shù)據(jù)集的技術(shù)轉(zhuǎn)移概率。

    采用準(zhǔn)確率Accuracy、查準(zhǔn)率Precision、查全率Recall和調(diào)和平均值F1共4個(gè)指標(biāo)對(duì)模型的性能進(jìn)行評(píng)估,計(jì)算方法如公式(3)-(6)所示。式中M表示測(cè)試集中預(yù)測(cè)正確的數(shù)目,N表示測(cè)試集總數(shù)目,TP表示測(cè)試集中實(shí)際發(fā)生技術(shù)轉(zhuǎn)移且被預(yù)測(cè)正確的數(shù)目,PN表示測(cè)試集中預(yù)測(cè)可能發(fā)生技術(shù)轉(zhuǎn)移的數(shù)目,TN表示測(cè)試集中實(shí)際發(fā)生技術(shù)轉(zhuǎn)移的數(shù)目。通過繪制ROC曲線、計(jì)算AUC值展示最優(yōu)模型的性能。

    2.4 專利分級(jí)

    在驗(yàn)證模型有效性的基礎(chǔ)上,使用高校專利價(jià)值評(píng)估模型預(yù)測(cè)每項(xiàng)專利發(fā)生技術(shù)轉(zhuǎn)移的概率P,P∈[0,1],步長(zhǎng)為0.1,總共分為10級(jí)。專利發(fā)生技術(shù)轉(zhuǎn)移的概率P越大,價(jià)值越高。具體級(jí)別與概率分布如表2所示。

    表2 專利級(jí)別與概率分布

    3 實(shí)證研究

    3.1 數(shù)據(jù)采集

    本研究對(duì)云計(jì)算領(lǐng)域?qū)@M(jìn)行實(shí)證分析,數(shù)據(jù)來源于智慧芽專利數(shù)據(jù)庫(以下簡(jiǎn)稱“智慧芽”)。智慧芽對(duì)專利引文、發(fā)明人、專利權(quán)人、權(quán)力轉(zhuǎn)移、專利許可等字段信息進(jìn)行了收錄與規(guī)范化處理,而且可以將各字段信息以csv格式導(dǎo)出,是本研究較為理想的專利數(shù)據(jù)庫。文章根據(jù)專家意見并參照已有研究[35-36]制定如下檢索式:TA:(“云計(jì)算”O(jiān)R“云安全”O(jiān)R“云服務(wù)”O(jiān)R“分布式存儲(chǔ)”O(jiān)R“云存儲(chǔ)”O(jiān)R“云平臺(tái)”)。經(jīng)初步檢索發(fā)現(xiàn),云計(jì)算領(lǐng)域高校專利數(shù)據(jù)中,類別一僅有315件,而類別二有1,065件,采用以上數(shù)據(jù)不僅容易導(dǎo)致模型陷入對(duì)小數(shù)據(jù)集的過擬合,而且模型的普適性也不夠強(qiáng)。為解決此問題,本研究借鑒學(xué)者以中國(guó)專利數(shù)據(jù)代替純高校專利數(shù)據(jù)的思路[12],在保留高校專利特征的前提下,增加模型訓(xùn)練的數(shù)據(jù)量,豐富數(shù)據(jù)特征,以有利于提高模型的普適性,減小過擬合的風(fēng)險(xiǎn)。具體檢索方式如下:

    以智慧芽中的中國(guó)發(fā)明專利和實(shí)用新型專利為數(shù)據(jù)源,使用上述檢索式,篩選條件“法律事件→權(quán)利轉(zhuǎn)移OR許可”,檢索到2,588件專利作為正樣本,標(biāo)簽為1;篩選條件“簡(jiǎn)單法律狀態(tài)→失效&法律事件→未發(fā)生權(quán)力轉(zhuǎn)移或許可”,檢索到3,319件專利作為負(fù)樣本,標(biāo)簽為0;篩選條件“簡(jiǎn)單法律狀態(tài)→有效&法律事件→未發(fā)生權(quán)力轉(zhuǎn)移或許可&當(dāng)前專利權(quán)人→大學(xué)”,檢索到3,242件專利,作為高校專利待分級(jí)的數(shù)據(jù)(預(yù)測(cè)集)。檢索時(shí)間為2021年11月11日。

    3.2 數(shù)據(jù)處理

    (1)數(shù)據(jù)集劃分。剔除信息不完整的專利,得到正樣本2,427個(gè)、負(fù)樣本3,249個(gè)、預(yù)測(cè)集3,122個(gè)。為避免數(shù)據(jù)類別分布不平衡降低模型效果,對(duì)負(fù)樣本進(jìn)行欠采樣,隨機(jī)去掉部分樣本,得到2,427個(gè)負(fù)樣本。將正負(fù)樣本合并,隨機(jī)劃分80%為訓(xùn)練集(3,883個(gè)樣本),20%為測(cè)試集(971個(gè)樣本)。

    (2)多維特征獲取。對(duì)于專利文本語義特征,使用Python編程調(diào)用肖涵在github上公開的bert句向量生成接口①,將每項(xiàng)專利的摘要轉(zhuǎn)化為768維的句向量,調(diào)用scikit-learn機(jī)器學(xué)習(xí)庫的PCA算法計(jì)算累計(jì)方差貢獻(xiàn)率與特征數(shù)的關(guān)系(見圖2)。當(dāng)累計(jì)方差貢獻(xiàn)率為0.7時(shí),特征數(shù)為40,即句向量的前40個(gè)主成分可以保留原始數(shù)據(jù)70%的信息。因此,將句向量維度降至40,最終每項(xiàng)專利的文本語義特征使用40維的特征向量表示。對(duì)于專利自身屬性特征,可根據(jù)智慧芽下載的專利著錄項(xiàng)目結(jié)合專利文獻(xiàn)計(jì)算得到。對(duì)于發(fā)明人特征,首先獲取云計(jì)算領(lǐng)域授權(quán)專利的第一發(fā)明人姓名,然后根據(jù)2.2中的發(fā)明人特征計(jì)算方法得到每個(gè)第一發(fā)明人的Y1、Y2、Y3、Y44個(gè)指標(biāo),最后根據(jù)第一發(fā)明人的姓名與各項(xiàng)專利對(duì)應(yīng)。將40維的專利文本語義特征向量、14維的專利自身屬性特征向量、4維的發(fā)明人特征向量進(jìn)行橫向拼接,得到58維的特征向量,最終訓(xùn)練集、測(cè)試集、預(yù)測(cè)集的結(jié)構(gòu)分別為3,883×58、971×58、3,122×58的矩陣。

    圖2 累計(jì)方法貢獻(xiàn)率—特征數(shù)關(guān)系

    3.3 模型構(gòu)建與評(píng)估

    本研究訓(xùn)練集數(shù)據(jù)樣本較少,采用五折交叉驗(yàn)證進(jìn)行模型參數(shù)調(diào)優(yōu),即將訓(xùn)練集分成5份,輪流將其中4份作為訓(xùn)練數(shù)據(jù),1份作為驗(yàn)證數(shù)據(jù),最后求5次實(shí)驗(yàn)的平均準(zhǔn)確率評(píng)估模型的性能。借助scikit-learn機(jī)器學(xué)習(xí)庫采用2.3所述的9種機(jī)器學(xué)習(xí)算法進(jìn)行模型構(gòu)建,模型的參數(shù)調(diào)優(yōu)見表3。

    表3 機(jī)器學(xué)習(xí)算法相關(guān)參數(shù)設(shè)置

    測(cè)試集評(píng)估結(jié)果如表4所示。使用9種機(jī)器學(xué)習(xí)算法構(gòu)建的專利價(jià)值評(píng)估模型acc值最低為90.216%,最高為97.631%,p值最低為91.071%,最高為97.131%,r值最低為89.027%,最高為98.137,f1值最低為90.052%,最高為97.631%。從各項(xiàng)指標(biāo)的評(píng)估結(jié)果來看,模型性能較為優(yōu)異,能夠證明本研究所提方法的有效性。

    表4 模型測(cè)試集評(píng)估結(jié)果

    選用4項(xiàng)評(píng)估指標(biāo)均最高的RF模型繪制ROC曲線(見圖3),AUC值為0.99699,與已有研究[12]相比,在同一領(lǐng)域的數(shù)據(jù)集上AUC值提升22個(gè)百分點(diǎn),能夠充分證明本研究所提方法的優(yōu)異性能。因此,將構(gòu)建的RF模型應(yīng)用到未知數(shù)據(jù)集上,預(yù)測(cè)專利發(fā)生技術(shù)轉(zhuǎn)移的概率。

    圖3 RF模型的ROC曲線

    3.4 高校專利分級(jí)結(jié)果

    使用RF模型對(duì)預(yù)測(cè)集的技術(shù)轉(zhuǎn)移概率進(jìn)行預(yù)測(cè),并將預(yù)測(cè)結(jié)果按照2.4所述規(guī)則進(jìn)行專利價(jià)值分級(jí),結(jié)果見圖4。云計(jì)算領(lǐng)域不同等級(jí)的高校專利價(jià)值呈現(xiàn)出明顯右偏態(tài)分布,F(xiàn)、G兩個(gè)級(jí)別的專利數(shù)量最多,其余等級(jí)的專利數(shù)量較少,這與現(xiàn)有學(xué)者提出的少數(shù)專利產(chǎn)生多數(shù)價(jià)值[37]、專利價(jià)值呈現(xiàn)右偏分布[38]的觀點(diǎn)一致,能夠證明本研究預(yù)測(cè)分級(jí)的結(jié)果可信性。A-E(5個(gè))級(jí)別的技術(shù)轉(zhuǎn)移概率大于等于0.5,具備較高的價(jià)值,總計(jì)占比14.87%;F-J(5個(gè))級(jí)別的技術(shù)轉(zhuǎn)移概率小于0.5,價(jià)值較低,總計(jì)占比85.13%,說明云計(jì)算領(lǐng)域的高校高價(jià)值專利僅占少數(shù),多數(shù)專利價(jià)值偏低[12]。價(jià)值最高的A級(jí)別專利僅占3.24%,而F、G兩個(gè)級(jí)別的專利分別占35.65%、37.7%,說明大多數(shù)高校專利的技術(shù)轉(zhuǎn)移概率介于0.3~0.5。基于以上結(jié)果,建議擁有高等級(jí)專利的高校可以謀求技術(shù)合作,構(gòu)建專利組合打包出售,推進(jìn)科技成果轉(zhuǎn)化;企業(yè)也可根據(jù)自身需求與相關(guān)高校對(duì)接,促進(jìn)技術(shù)升級(jí)。同時(shí),對(duì)于級(jí)別較低的專利,高校也應(yīng)及時(shí)止損,減少資源浪費(fèi)。

    圖4 專利價(jià)值分級(jí)

    4 結(jié)語

    客觀、準(zhǔn)確地對(duì)高校專利價(jià)值進(jìn)行評(píng)估,是促進(jìn)高校專利合理運(yùn)營(yíng)、實(shí)現(xiàn)成果變現(xiàn),進(jìn)而推動(dòng)企業(yè)實(shí)現(xiàn)技術(shù)升級(jí)的重要環(huán)節(jié),對(duì)構(gòu)建產(chǎn)學(xué)研深度融合的技術(shù)創(chuàng)新體系具有積極意義。針對(duì)現(xiàn)有研究未能結(jié)合指標(biāo)、文本等多維特征,專利價(jià)值劃分粒度粗糙的問題,本研究提出了融合多維特征的高校專利價(jià)值分級(jí)方法:首先,從高校專利價(jià)值的3個(gè)重要來源出發(fā),使用時(shí)下流行的Bert預(yù)訓(xùn)練模型表示專利文本語義特征,設(shè)計(jì)與專利價(jià)值直接關(guān)聯(lián)的發(fā)明人特征,并與專利自身屬性特征相融合;其次,采用機(jī)器學(xué)習(xí)算法構(gòu)建高校專利價(jià)值評(píng)估模型,預(yù)測(cè)專利發(fā)生技術(shù)轉(zhuǎn)移的概率;最后,對(duì)技術(shù)轉(zhuǎn)移概率劃定閾值,將專利價(jià)值的粒度細(xì)化為10個(gè)等級(jí)。對(duì)云計(jì)算領(lǐng)域進(jìn)行的實(shí)證研究表明,本研究所提方法能夠有效將專利文本語義特征、專利自身屬性特征、發(fā)明人特征進(jìn)行融合,構(gòu)建的模型與現(xiàn)有研究相比AUC值提升22個(gè)百分點(diǎn),提高了高校專利價(jià)值評(píng)估結(jié)果的準(zhǔn)確性和科學(xué)性,為高校專利價(jià)值評(píng)估提供了新的研究思路。該方法未來可應(yīng)用于高校專利運(yùn)營(yíng)、專利推送、企業(yè)專利成果引進(jìn)、產(chǎn)學(xué)研合作等場(chǎng)景。比如,高??山柚痉椒▽?duì)校內(nèi)各領(lǐng)域?qū)@M(jìn)行分級(jí)評(píng)價(jià),將等級(jí)高的專利打包出售實(shí)現(xiàn)成果變現(xiàn),促進(jìn)科技成果轉(zhuǎn)化;企業(yè)可對(duì)領(lǐng)域內(nèi)高校專利進(jìn)行分級(jí)評(píng)價(jià),精準(zhǔn)引進(jìn)高價(jià)值專利,還可篩選擁有高等級(jí)專利的高校作為備選合作伙伴,促進(jìn)技術(shù)升級(jí)。不足之處在于:本研究的多維特征僅限于文本、數(shù)值型信息,而專利文獻(xiàn)中存在的大量圖片信息并沒有得到有效利用。因此,在后續(xù)研究中,將探索融合更多類型的特征,以期對(duì)高校專利價(jià)值實(shí)現(xiàn)更為準(zhǔn)確、客觀的評(píng)價(jià)。

    注釋

    ①bert句向量生成接口開源網(wǎng)址:https://github.com/hanxiao/bert-as-service。

    猜你喜歡
    發(fā)明人語義專利
    專利
    發(fā)明人角色識(shí)別及二元?jiǎng)?chuàng)新能力差異分析
    ——社會(huì)資本視角的解釋
    語言與語義
    發(fā)明與專利
    傳感器世界(2019年4期)2019-06-26 09:58:44
    淺析發(fā)明人(或設(shè)計(jì)人)變更的常見問題及建議
    專利代理(2019年2期)2019-01-26 15:16:16
    搖擺撞擊洗滌裝置
    家電科技(2018年9期)2018-09-28 01:45:00
    洗衣機(jī)
    家電科技(2018年9期)2018-09-28 01:45:00
    “上”與“下”語義的不對(duì)稱性及其認(rèn)知闡釋
    認(rèn)知范疇模糊與語義模糊
    專利
    亚洲在久久综合| 久久人人爽人人爽人人片va| 99热这里只有精品一区| 亚洲国产精品一区三区| 日韩电影二区| 日韩伦理黄色片| 国产一区二区三区综合在线观看 | 一级毛片 在线播放| 精品国产一区二区久久| 国产精品久久久久久av不卡| 99国产精品免费福利视频| 最新中文字幕久久久久| 尾随美女入室| 精品午夜福利在线看| 亚洲成色77777| 大又大粗又爽又黄少妇毛片口| 又粗又硬又长又爽又黄的视频| 在线观看免费日韩欧美大片 | 特大巨黑吊av在线直播| 国国产精品蜜臀av免费| 国产伦精品一区二区三区视频9| 国产在线免费精品| √禁漫天堂资源中文www| 看非洲黑人一级黄片| 久久久精品免费免费高清| 亚洲四区av| 满18在线观看网站| 日日啪夜夜爽| 男男h啪啪无遮挡| 亚洲精华国产精华液的使用体验| 国产无遮挡羞羞视频在线观看| 午夜久久久在线观看| 热99久久久久精品小说推荐| 亚洲国产av影院在线观看| 日韩av不卡免费在线播放| 狠狠精品人妻久久久久久综合| 欧美+日韩+精品| 永久免费av网站大全| 高清欧美精品videossex| 中国美白少妇内射xxxbb| 爱豆传媒免费全集在线观看| 老熟女久久久| 国产日韩欧美亚洲二区| 男男h啪啪无遮挡| 777米奇影视久久| 国产黄频视频在线观看| 人妻 亚洲 视频| 另类亚洲欧美激情| av国产久精品久网站免费入址| 一级片'在线观看视频| 亚洲精品aⅴ在线观看| 麻豆成人av视频| 亚洲国产精品一区三区| 国产在线免费精品| 18禁在线无遮挡免费观看视频| 男女边摸边吃奶| 国产在视频线精品| 最近最新中文字幕免费大全7| 18禁动态无遮挡网站| 人体艺术视频欧美日本| 少妇猛男粗大的猛烈进出视频| 亚洲av男天堂| 一本色道久久久久久精品综合| 交换朋友夫妻互换小说| 韩国高清视频一区二区三区| videos熟女内射| 免费大片18禁| 国产黄片视频在线免费观看| 国产免费现黄频在线看| 午夜福利视频在线观看免费| 啦啦啦啦在线视频资源| 亚洲色图 男人天堂 中文字幕 | 亚洲av成人精品一二三区| 国产高清国产精品国产三级| 久久97久久精品| 国产精品一区www在线观看| 日日啪夜夜爽| 成年人免费黄色播放视频| 日本黄大片高清| 欧美人与性动交α欧美精品济南到 | 久久久国产欧美日韩av| 久久精品熟女亚洲av麻豆精品| 久久精品人人爽人人爽视色| 亚洲精品日韩av片在线观看| 女人精品久久久久毛片| xxxhd国产人妻xxx| 国产成人aa在线观看| 中文字幕人妻熟人妻熟丝袜美| 国产视频内射| 欧美丝袜亚洲另类| 毛片一级片免费看久久久久| 九九在线视频观看精品| 18禁观看日本| 午夜老司机福利剧场| 一区二区三区精品91| 男女无遮挡免费网站观看| 我的老师免费观看完整版| 91精品国产国语对白视频| 国产淫语在线视频| 亚洲五月色婷婷综合| videos熟女内射| 搡老乐熟女国产| 国产视频首页在线观看| 国产 一区精品| 交换朋友夫妻互换小说| 亚洲欧美精品自产自拍| 中文天堂在线官网| 欧美最新免费一区二区三区| 精品一品国产午夜福利视频| 熟妇人妻不卡中文字幕| 一区二区av电影网| 99久久中文字幕三级久久日本| 人妻制服诱惑在线中文字幕| videossex国产| 久久 成人 亚洲| 制服人妻中文乱码| 丰满乱子伦码专区| 女人精品久久久久毛片| 高清在线视频一区二区三区| 成人无遮挡网站| a 毛片基地| 国产色爽女视频免费观看| 久热这里只有精品99| 青春草视频在线免费观看| 国产成人freesex在线| 国产有黄有色有爽视频| 午夜福利在线观看免费完整高清在| 国产精品一国产av| 成人午夜精彩视频在线观看| 久久国产亚洲av麻豆专区| 成人影院久久| 中文乱码字字幕精品一区二区三区| 久久久久人妻精品一区果冻| 一级黄片播放器| 国产色婷婷99| 午夜福利网站1000一区二区三区| 精品久久久久久久久av| 男的添女的下面高潮视频| 成年女人在线观看亚洲视频| 最近中文字幕2019免费版| 日产精品乱码卡一卡2卡三| 亚洲伊人久久精品综合| 丝瓜视频免费看黄片| 欧美变态另类bdsm刘玥| 欧美精品一区二区大全| 国产国拍精品亚洲av在线观看| 国产精品国产三级专区第一集| 亚洲精品日韩在线中文字幕| 欧美日韩成人在线一区二区| 免费观看a级毛片全部| √禁漫天堂资源中文www| 久久人人爽av亚洲精品天堂| 51国产日韩欧美| 丝袜喷水一区| 欧美日韩国产mv在线观看视频| 18禁观看日本| 国产毛片在线视频| 人妻 亚洲 视频| 纵有疾风起免费观看全集完整版| 久久99蜜桃精品久久| 亚洲av中文av极速乱| 婷婷色av中文字幕| 三级国产精品片| 天堂8中文在线网| 亚洲精品国产色婷婷电影| 在线观看一区二区三区激情| 久久久精品免费免费高清| 国产成人精品在线电影| 少妇人妻久久综合中文| 亚洲欧美清纯卡通| 国产高清三级在线| 天堂俺去俺来也www色官网| av线在线观看网站| 中文字幕免费在线视频6| 国产成人freesex在线| 国产 一区精品| 亚洲精品久久午夜乱码| 国产成人精品婷婷| 男人添女人高潮全过程视频| 成人毛片60女人毛片免费| 99久久中文字幕三级久久日本| 毛片一级片免费看久久久久| 18禁观看日本| 国产熟女欧美一区二区| 亚洲第一区二区三区不卡| 天天躁夜夜躁狠狠久久av| 色哟哟·www| a 毛片基地| 久久婷婷青草| 亚洲av二区三区四区| 99视频精品全部免费 在线| 国产一区二区在线观看av| 国产成人免费无遮挡视频| 纯流量卡能插随身wifi吗| 国产欧美亚洲国产| 久久国产精品大桥未久av| 最近中文字幕2019免费版| 黄片无遮挡物在线观看| 一区二区三区乱码不卡18| 一个人免费看片子| 91久久精品电影网| 久久久精品94久久精品| 狂野欧美白嫩少妇大欣赏| 一个人免费看片子| 三级国产精品欧美在线观看| 亚洲精品视频女| 欧美三级亚洲精品| 最新的欧美精品一区二区| 91国产中文字幕| 精品久久蜜臀av无| 又大又黄又爽视频免费| 搡女人真爽免费视频火全软件| 久久精品国产自在天天线| 人人妻人人澡人人看| 99久久中文字幕三级久久日本| 一级毛片 在线播放| 男女边吃奶边做爰视频| 麻豆乱淫一区二区| 在线观看www视频免费| 国产在线一区二区三区精| 久久国产精品大桥未久av| 精品久久蜜臀av无| 麻豆精品久久久久久蜜桃| 男女无遮挡免费网站观看| 全区人妻精品视频| 成人国语在线视频| 好男人视频免费观看在线| 丝瓜视频免费看黄片| 熟女电影av网| 99久久中文字幕三级久久日本| 91aial.com中文字幕在线观看| 国产免费又黄又爽又色| 午夜精品国产一区二区电影| 少妇人妻精品综合一区二区| 国产精品蜜桃在线观看| 国产不卡av网站在线观看| 蜜臀久久99精品久久宅男| 欧美性感艳星| 午夜91福利影院| 日日啪夜夜爽| 国产免费福利视频在线观看| 成人18禁高潮啪啪吃奶动态图 | 伊人亚洲综合成人网| 亚洲av电影在线观看一区二区三区| 亚洲欧美中文字幕日韩二区| 在线精品无人区一区二区三| 免费av不卡在线播放| 久久99一区二区三区| 精品久久蜜臀av无| 性色av一级| 国产在线视频一区二区| 国产国语露脸激情在线看| 成人黄色视频免费在线看| 在线观看国产h片| 另类精品久久| 日日啪夜夜爽| 国产精品一区二区三区四区免费观看| 交换朋友夫妻互换小说| 一级片'在线观看视频| 人妻人人澡人人爽人人| 国产精品不卡视频一区二区| 亚洲精品久久成人aⅴ小说 | 18在线观看网站| 久久久久久久久大av| 黑人欧美特级aaaaaa片| 熟妇人妻不卡中文字幕| 日本黄大片高清| 搡老乐熟女国产| av电影中文网址| 亚洲精品日本国产第一区| 九九爱精品视频在线观看| 人体艺术视频欧美日本| 五月玫瑰六月丁香| 狂野欧美白嫩少妇大欣赏| 国产精品女同一区二区软件| 色婷婷久久久亚洲欧美| 亚洲精华国产精华液的使用体验| 九九久久精品国产亚洲av麻豆| 男人爽女人下面视频在线观看| 午夜激情福利司机影院| 欧美成人午夜免费资源| 满18在线观看网站| 午夜视频国产福利| 美女主播在线视频| 日日摸夜夜添夜夜爱| 91在线精品国自产拍蜜月| 极品少妇高潮喷水抽搐| 日韩av在线免费看完整版不卡| 亚洲精品美女久久av网站| av专区在线播放| 人妻夜夜爽99麻豆av| 亚洲久久久国产精品| 亚洲精品色激情综合| 日韩大片免费观看网站| 天天躁夜夜躁狠狠久久av| 永久网站在线| 夜夜爽夜夜爽视频| 色94色欧美一区二区| 青春草视频在线免费观看| 久久免费观看电影| 自拍欧美九色日韩亚洲蝌蚪91| 国产精品熟女久久久久浪| 国产深夜福利视频在线观看| 伊人久久精品亚洲午夜| 亚洲伊人久久精品综合| 嫩草影院入口| 亚洲五月色婷婷综合| 欧美老熟妇乱子伦牲交| 搡女人真爽免费视频火全软件| 2021少妇久久久久久久久久久| 日韩视频在线欧美| 国产一区二区在线观看日韩| 国精品久久久久久国模美| 少妇被粗大的猛进出69影院 | 一级,二级,三级黄色视频| 激情五月婷婷亚洲| 亚洲美女搞黄在线观看| 欧美精品一区二区大全| av卡一久久| 一个人免费看片子| 国产精品一国产av| a级毛片黄视频| 伊人久久精品亚洲午夜| 搡女人真爽免费视频火全软件| 99久国产av精品国产电影| 尾随美女入室| 制服诱惑二区| a级毛片黄视频| 亚洲,欧美,日韩| 国产黄频视频在线观看| 王馨瑶露胸无遮挡在线观看| 国产又色又爽无遮挡免| 亚洲精品久久久久久婷婷小说| 久久综合国产亚洲精品| videossex国产| 日韩一区二区视频免费看| 亚洲熟女精品中文字幕| 高清av免费在线| 一级毛片电影观看| 少妇的逼好多水| 又大又黄又爽视频免费| 亚洲无线观看免费| 午夜福利在线观看免费完整高清在| 一本色道久久久久久精品综合| 免费播放大片免费观看视频在线观看| 99热网站在线观看| 最近最新中文字幕免费大全7| 精品国产一区二区久久| 国产一区亚洲一区在线观看| 人人澡人人妻人| 国产成人免费无遮挡视频| 日韩三级伦理在线观看| 九九在线视频观看精品| 久久人妻熟女aⅴ| 日韩av在线免费看完整版不卡| 人妻夜夜爽99麻豆av| 色吧在线观看| xxxhd国产人妻xxx| 少妇 在线观看| 欧美97在线视频| 欧美老熟妇乱子伦牲交| 91aial.com中文字幕在线观看| 伊人亚洲综合成人网| 极品人妻少妇av视频| 三级国产精品片| 亚洲av二区三区四区| 日韩强制内射视频| 亚洲av在线观看美女高潮| 91精品三级在线观看| 女人精品久久久久毛片| 啦啦啦啦在线视频资源| 免费av不卡在线播放| 欧美另类一区| 国产成人aa在线观看| 伊人久久精品亚洲午夜| 97超视频在线观看视频| 日本欧美国产在线视频| 丁香六月天网| 国产av精品麻豆| 搡老乐熟女国产| 国产成人精品一,二区| 亚洲美女黄色视频免费看| 国产高清不卡午夜福利| 国产黄色免费在线视频| 在线观看免费高清a一片| 考比视频在线观看| 中国三级夫妇交换| 91精品国产九色| 国产午夜精品一二区理论片| 午夜免费观看性视频| 看非洲黑人一级黄片| 久久久国产一区二区| 午夜福利视频精品| 午夜福利,免费看| 国产精品国产三级国产av玫瑰| 蜜桃国产av成人99| 中文天堂在线官网| 一本大道久久a久久精品| a级毛色黄片| 久久99蜜桃精品久久| 激情五月婷婷亚洲| 国产淫语在线视频| 一级,二级,三级黄色视频| 午夜91福利影院| 高清在线视频一区二区三区| 中文欧美无线码| 国模一区二区三区四区视频| 国产毛片在线视频| 国产视频首页在线观看| 高清在线视频一区二区三区| 久久精品国产亚洲av天美| 丝瓜视频免费看黄片| 熟女电影av网| 国产黄色免费在线视频| 亚洲av国产av综合av卡| 免费久久久久久久精品成人欧美视频 | 亚洲久久久国产精品| 亚洲国产精品999| 高清黄色对白视频在线免费看| 亚洲经典国产精华液单| 免费人妻精品一区二区三区视频| 一级a做视频免费观看| 水蜜桃什么品种好| 99国产综合亚洲精品| 国产成人免费无遮挡视频| 国产精品国产av在线观看| 各种免费的搞黄视频| 蜜桃久久精品国产亚洲av| 国产精品偷伦视频观看了| 欧美 亚洲 国产 日韩一| 免费看不卡的av| 久久99蜜桃精品久久| 我的老师免费观看完整版| 国产精品女同一区二区软件| 下体分泌物呈黄色| 伦精品一区二区三区| 免费人成在线观看视频色| 亚洲无线观看免费| 日韩成人伦理影院| 国产精品一区二区在线观看99| 亚洲一区二区三区欧美精品| 少妇的逼好多水| 国产亚洲午夜精品一区二区久久| 亚洲av.av天堂| 国模一区二区三区四区视频| 91成人精品电影| 欧美激情极品国产一区二区三区 | 国产精品蜜桃在线观看| 久久女婷五月综合色啪小说| av免费在线看不卡| 久久99热6这里只有精品| videosex国产| 免费av中文字幕在线| 亚洲精品国产av蜜桃| 中文字幕人妻丝袜制服| 久久久精品94久久精品| 亚洲成人一二三区av| 色94色欧美一区二区| 精品久久久久久电影网| 日韩欧美精品免费久久| 青春草视频在线免费观看| 3wmmmm亚洲av在线观看| 成人二区视频| 色94色欧美一区二区| 天美传媒精品一区二区| 久久这里有精品视频免费| 九九久久精品国产亚洲av麻豆| 亚洲色图 男人天堂 中文字幕 | 成人免费观看视频高清| 日韩欧美精品免费久久| 国产精品99久久久久久久久| 91久久精品国产一区二区成人| 久久久久久久久久人人人人人人| 成年人午夜在线观看视频| 大香蕉久久成人网| 高清毛片免费看| 又粗又硬又长又爽又黄的视频| a级片在线免费高清观看视频| 国产高清有码在线观看视频| 亚洲第一区二区三区不卡| 韩国av在线不卡| 视频区图区小说| 免费少妇av软件| 欧美性感艳星| 熟女电影av网| 韩国av在线不卡| 亚洲欧美成人综合另类久久久| 国产免费又黄又爽又色| 综合色丁香网| 亚洲第一区二区三区不卡| 99热全是精品| 国产成人91sexporn| 又黄又爽又刺激的免费视频.| 99热网站在线观看| 丁香六月天网| 国产av码专区亚洲av| 99久久精品国产亚洲精品| 自线自在国产av| 欧美人与性动交α欧美精品济南到| 亚洲欧美日韩另类电影网站| 久久99一区二区三区| 香蕉久久夜色| 人人妻人人澡人人爽人人夜夜| 亚洲成人手机| 国产欧美日韩精品亚洲av| 久久人妻av系列| 99精品欧美一区二区三区四区| 久久久久精品国产欧美久久久| 天天躁狠狠躁夜夜躁狠狠躁| 夜夜夜夜夜久久久久| 日韩中文字幕欧美一区二区| 欧美亚洲 丝袜 人妻 在线| 精品少妇一区二区三区视频日本电影| 久久亚洲真实| 亚洲一区中文字幕在线| 精品福利永久在线观看| 成年人午夜在线观看视频| 大型av网站在线播放| 高清欧美精品videossex| 丝袜美腿诱惑在线| 91九色精品人成在线观看| 叶爱在线成人免费视频播放| 精品福利永久在线观看| 黄色毛片三级朝国网站| 女人久久www免费人成看片| 热re99久久国产66热| 中文字幕人妻丝袜一区二区| 色尼玛亚洲综合影院| 午夜福利乱码中文字幕| 久久久久精品国产欧美久久久| av视频免费观看在线观看| 法律面前人人平等表现在哪些方面| 欧美av亚洲av综合av国产av| 亚洲成国产人片在线观看| 在线观看人妻少妇| 一本—道久久a久久精品蜜桃钙片| 成人av一区二区三区在线看| 成人黄色视频免费在线看| 免费在线观看影片大全网站| 欧美日韩一级在线毛片| 欧美+亚洲+日韩+国产| 国产区一区二久久| 涩涩av久久男人的天堂| 久久香蕉激情| 又紧又爽又黄一区二区| 电影成人av| 变态另类成人亚洲欧美熟女 | 国产免费av片在线观看野外av| 久久久久精品国产欧美久久久| 人妻 亚洲 视频| 一区二区av电影网| 国产野战对白在线观看| 欧美黄色淫秽网站| 国产不卡一卡二| 欧美黄色淫秽网站| 亚洲成人免费av在线播放| 成人国产av品久久久| a级毛片在线看网站| 一级a爱视频在线免费观看| 久久性视频一级片| 91字幕亚洲| 久久久精品国产亚洲av高清涩受| 国产日韩欧美在线精品| 国产av国产精品国产| av超薄肉色丝袜交足视频| 老熟妇仑乱视频hdxx| 国产精品久久电影中文字幕 | 一夜夜www| 亚洲精品中文字幕在线视频| 十分钟在线观看高清视频www| 黄片小视频在线播放| 男男h啪啪无遮挡| a在线观看视频网站| 亚洲成人免费av在线播放| 国产在线精品亚洲第一网站| 满18在线观看网站| 黄网站色视频无遮挡免费观看| 成年女人毛片免费观看观看9 | 91精品三级在线观看| av国产精品久久久久影院| 色94色欧美一区二区| 一区二区三区激情视频| 亚洲综合色网址| 黄色视频不卡| av免费在线观看网站| 国产成人免费观看mmmm| 99精品欧美一区二区三区四区| 99国产精品一区二区三区| 制服诱惑二区| 免费少妇av软件| 成人精品一区二区免费| 免费人妻精品一区二区三区视频| 欧美在线黄色| 热re99久久国产66热| 99riav亚洲国产免费| 亚洲成人免费av在线播放| 50天的宝宝边吃奶边哭怎么回事| 啪啪无遮挡十八禁网站| 精品亚洲成a人片在线观看| 伦理电影免费视频| 岛国毛片在线播放| 国产日韩欧美视频二区| 自拍欧美九色日韩亚洲蝌蚪91| 色94色欧美一区二区| 亚洲精品在线美女| 午夜久久久在线观看| 亚洲九九香蕉| 午夜精品国产一区二区电影| 欧美大码av| 99国产精品一区二区蜜桃av | 黄色视频,在线免费观看| 999精品在线视频| 国产成人啪精品午夜网站| 久久人妻福利社区极品人妻图片| 国产高清视频在线播放一区|