• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    人工智能刑事責(zé)任主體問題之初探

    2019-03-29 05:05:06陳敘言
    社會科學(xué) 2019年3期
    關(guān)鍵詞:人工智能

    摘 要:承認人工智能刑事責(zé)任主體地位是基于功利主義的考量,是以保護人類自身利益為目的。刑法學(xué)者應(yīng)該對強人工智能的到來抱有憂患意識,理論研究和立法都應(yīng)具有一定的前瞻性。人工智能的“思考——行動”權(quán)猶如自由權(quán)之于自然人,對該權(quán)利的剝奪可以成為適用人工智能的刑罰方式。人工智能能夠做到刑法所要求的對自身行為意義的理解,也能夠在通過學(xué)習(xí)后掌握并遵守法律法規(guī)。人工智能從應(yīng)然性上很難區(qū)分犯罪故意與犯罪過失的區(qū)別,從實然性上也無區(qū)分兩者的必要,其主觀意圖與客觀行為具有一致性;人工智能犯罪的危害性主要體現(xiàn)在其產(chǎn)生犯罪意圖之時,因此不同犯罪停止形態(tài)的人工智能犯罪對人類的危害性相當(dāng)。

    關(guān)鍵詞:人工智能;刑事責(zé)任主體;功利主義

    中圖分類號:D924.1 文獻標(biāo)識碼:A 文章編號:0257(2019)03-0110-09

    作者簡介:陳敘言,上海交通大學(xué)凱原法學(xué)院博士研究生 (上海 200030)

    隨著20世紀(jì)90年代人工神經(jīng)網(wǎng)絡(luò)技術(shù)的出現(xiàn)和發(fā)展以及計算機算法模式的改進和運算能力的巨大提升,人工智能技術(shù)已經(jīng)成為近年來最為熱門的研究領(lǐng)域。世界各國都將人工智能作為未來科技發(fā)展的重中之重,我國國務(wù)院于2017年就出臺了《新一代人工智能發(fā)展規(guī)劃》,由此將發(fā)展人工智能提升到了國家戰(zhàn)略的高度。與此同時,人工智能的負面新聞也層出不窮,從早在上世紀(jì)70年代發(fā)生在日本的機器人將人類工人當(dāng)作鋼板進行切割到微軟開發(fā)的聊天軟件tay出現(xiàn)種族歧視言論再到近年來屢有發(fā)生的無人駕駛汽車事故,這些都讓我們在享受人工智能給人類帶來好處的同時不得不開始關(guān)注對其所帶來危害的防范。從刑法層面來看,當(dāng)人工智能通過深度學(xué)習(xí)“獨立自主”地實施危害社會的行為時,又應(yīng)該由誰來為它買單?是單純的追究設(shè)計者和使用者的責(zé)任還是有可能進一步的追究人工智能體本身的責(zé)任?

    一、承認人工智能刑事責(zé)任主體地位之必要性

    (一)功利主義視角

    普通機器人具有“等同性”和“可預(yù)測性”的特點,即機器人實施行為是基于設(shè)計者或使用者的意圖,因此相當(dāng)于設(shè)計者或使用者的工具,其實施的行為等同于設(shè)計者或使用者的行為,而正由于實施這種行為是事先確定的,因此又可以被預(yù)測。而人工智能則不同,由于其具備深度自我學(xué)習(xí)的功能,因此實施的行為并不能被設(shè)計者或使用者所預(yù)測,比如圍棋軟件AlphaGo,其設(shè)計者可能并不會下圍棋,而且也很難預(yù)測該人工智能被制造出來以后水平到底如何,此時AlphaGo部分反應(yīng)了設(shè)計者的意圖,即制造一款棋術(shù)高超的軟件,也部分反應(yīng)了機器本身的思維,即如何走好圍棋的每一步??梢灶A(yù)見隨著人工智能技術(shù)的不斷進步,等到了強人工智能時代,這種設(shè)計者意圖和機器人本身思維的比例相比于現(xiàn)在將會大幅度的傾斜,達到了一定程度(如百分之八十或者九十)之后顯然無法再將人工智能的行為再與設(shè)計者和使用者的行為等同起來,甚至可能出現(xiàn)完全不包含設(shè)計者和使用者意圖的行為。此時如果將該種行為帶來的后果完全歸咎于設(shè)計者和使用者顯然是不妥的?!缎谭ā返?7條規(guī)定,犯罪主體需具備以下條件:(1)實施了嚴重危害社會的行為;(2)具備刑事責(zé)任能力;(3)依法應(yīng)當(dāng)承擔(dān)刑事責(zé)任。有學(xué)者就指出“一方面,智能機器人具有辨認能力,其能夠辨認自己行為的性質(zhì)、意義、后果,甚至在對行為導(dǎo)致結(jié)果的可能性認識方面,其精確程度可能超越人類;另一方面,智能機器人具有控制能力,其能夠通過自己獨立的意志控制自身行為”劉憲權(quán)、胡荷佳:《論人工智能時代智能機器人的刑事責(zé)任能力》,《法學(xué)》2018年第1期。,因而具備刑事責(zé)任能力劉憲權(quán)、林雨佳:《人工智能時代刑事責(zé)任主體的重新解構(gòu)》,《人民檢察》2018年第3期。。

    對于是否應(yīng)該承認人工智能的刑事責(zé)任主體地位,不同領(lǐng)域的學(xué)者站在不同角度會有不同的見解。而筆者主張承認人工智能能夠作為刑事責(zé)任主體,是以人類利益為核心,站在功利主義的視角得出的?!斑吳哒J為組成社會的每個個人的幸福,亦即他們的快樂與安寧,是立法者所應(yīng)該注意的唯一目標(biāo),而在事情取決于立法者范圍以內(nèi),他都應(yīng)當(dāng)依據(jù)這個唯一標(biāo)準(zhǔn)使每一個人去規(guī)范自己的行為。但是究竟使一個人做這件事,還是做別的什么事,則除了苦與樂之外,再沒有其它東西可作最后決定了?!敝茌o成:《西方倫理學(xué)名著選輯(下卷)》,商務(wù)印書館1987版,轉(zhuǎn)引自:龔群:《對以邊沁、密爾為代表的功利主義的分析批判》,《倫理學(xué)研究》2003年第4期。功利主義將行為的道德評價建立在后果之上,以行為結(jié)果所涉及的快樂和痛苦的增加與減少來判斷行為的善與惡。其認為行為的道德本質(zhì)就是功利,行為過程就是計算和取得功利的過程,只有行為的效果才是評價行為的道德價值的根據(jù)。道德只能作為達到功利的手段,道德的價值就在于它的“有用性”羅俊麗:《邊沁和密爾的功利主義比較研究》,《蘭州學(xué)刊》2008年第3期。。因此承認人工智能的刑事責(zé)任主體地位不是要和機器人講“道德”,不是主張將人工智能的地位提升到與自然人相同的水平,而是通過使其成為刑法所規(guī)制的對象這種“道德”的手段,達到更好的保護人類利益這一功利的目的。其實質(zhì)是對人工智能的一種限制,只不過這種限制是通過承認其刑事責(zé)任主體地位所做出的。

    對于實施嚴重危害社會行為的人工智能,為什么我們不直接對其進行銷毀而是要費勁心思對其進行審判,以刑法對其予以規(guī)制?直接銷毀當(dāng)然能夠一勞永逸地解決問題,但從功利主義的視角來看,每一個人工智能的研發(fā)和制造都需要花費大量的人力、物力成本,而且能夠給人類在各個領(lǐng)域帶來很大的利益,因此如果僅因為其所具有的負面效應(yīng)就直接對其進行銷毀從社會治理的經(jīng)濟性上看是極不合算的。此時用人類社會最為嚴厲的刑法對其進行規(guī)制,力求“矯正”人工智能所實施的危害社會的行為,使其以后不會再犯,從而達到用最小成本保護人類最大利益的效果。

    那么將人工智能作為刑事責(zé)任主體能否達到這種效果呢?刑罰的目的在于預(yù)防犯罪,包括特殊預(yù)防和一般預(yù)防,對于人工智能來說同樣適用。強人工智能能夠進行深度自我學(xué)習(xí),擁有辨認控制能力,此時其所實施的行為不再是設(shè)計者或使用者事先設(shè)定的。更確切的說設(shè)計者和使用者也往往無法預(yù)料和弄清人工智能為什么會實施該種行為,因為如果事先能預(yù)料的話設(shè)計者和使用者就能夠避免該種行為的發(fā)生,因此單純想通過修改編程和數(shù)據(jù)來從源頭矯正人工智能是極其困難的。人工智能就好比一個黑箱子,一旦被創(chuàng)造出來這個箱子里到底有什么,如何運行,會產(chǎn)生什么都是難以控制的。這和成長過程中的孩童有些相像,因其有獨立的思維,我們無法完全控制其實施何種行為,但我們可以通過引導(dǎo)比如在其做了錯事后對其進行懲罰讓其明白何事可為何事不可為。對于人工智能的犯罪預(yù)防也是如此,我們可以將對實施危害行為的人工智能的審判結(jié)果輸入該人工智能和其他人工智能的編程之中,“告知”其實施該種行為是不被允許的,從而省去了從源頭的各種編程和代碼中尋找犯罪原因的繁瑣,達到特殊預(yù)防和一般預(yù)防的目的。久而久之,當(dāng)越來越多的審判結(jié)果被“告知”給人工智能之后,其所實施的危害社會的行為也必將大幅度的減少。

    此外,從訴訟的角度來說,人工智能特別是強人工智能所涉及的都是科技含量極高的領(lǐng)域,當(dāng)其實施危害社會的行為時如果采用民事訴訟程序被害人可能由于對該領(lǐng)域一無所知而根本無法進行調(diào)查和取證。而承認人工智能作為刑事責(zé)任主體則可以大大緩解被害人的這種壓力,國家作為追訴主體具備普通人所無法具有的訴訟資源和優(yōu)勢,能夠更全面的調(diào)查取證,以最大限度保護作為被害人的人類的利益。

    (二)前瞻性視角

    隨著人工智能技術(shù)的不斷發(fā)展,其已在諸如語音翻譯、實時監(jiān)控,工業(yè)制造、無人駕駛等各個領(lǐng)域使人類受益良多,世界各國也都在大力發(fā)展人工智能技術(shù)及相關(guān)產(chǎn)業(yè)。然而與此同時,人工智能出現(xiàn)事故給人類造成傷害的新聞也開始屢見不鮮。歷史證明科學(xué)技術(shù)的發(fā)展往往是一把雙刃劍,使人類受益的同時也伴隨著風(fēng)險,比如核技術(shù)的發(fā)展一方面讓人類享受了諸如核電站等設(shè)施帶來的益處,另一方面也面臨著核武器的風(fēng)險,克隆技術(shù)在為人類器官移植領(lǐng)域帶來突破的同時也使人類不得不考慮克隆人所帶來的一系列倫理問題。人工智能特別是強人工智能同樣如此,當(dāng)機器人能夠和人類一樣思考,一樣擁有辨認控制能力之時,人類是否還能控制機器人為我所用,是否能讓其不實施危害人類的行為甚至能否不讓人類有朝一日被機器人所統(tǒng)治?類似的橋段在科幻小說和電影中已經(jīng)多次出現(xiàn),已故英國科學(xué)家霍金也曾作出類似人類終將被人工智能所毀滅的預(yù)言《霍金留給人類的最后警告:新書語言超級智能和超人會降臨》,http://www.sohu.com/a/260229666_473283,20181116。。作為社會公平正義最后一道防線的刑法對此應(yīng)該做出何種反應(yīng)?是固守刑法謙抑的保守態(tài)度還是應(yīng)當(dāng)以適當(dāng)積極的態(tài)度投身到社會治理與科學(xué)發(fā)展之中?當(dāng)傳統(tǒng)刑法理論已經(jīng)無法適應(yīng)社會現(xiàn)實之時是否需要進行一定程度的變革和突破?針對這種社會發(fā)展所帶來的風(fēng)險,有學(xué)者對此持肯定態(tài)度,甚至提出刑事立法應(yīng)采用的八種技術(shù):立法擬制、推定、行為范疇的拓展、犯罪標(biāo)準(zhǔn)的前移、責(zé)任范圍的擴張與責(zé)任形式的多樣化、犯罪構(gòu)成要素的增減、因果關(guān)系準(zhǔn)則的創(chuàng)新、法定量刑情節(jié)的設(shè)置勞東燕:《公共政策與風(fēng)險社會的刑法》,《中國社會科學(xué)》2007年第3期。。

    筆者認為,刑法的謙抑性原則必須應(yīng)當(dāng)遵循,但也不能無視當(dāng)今科學(xué)技術(shù)的高速發(fā)展給人類社會所帶來的完全不同于以往的沖擊。人工智能技術(shù)的發(fā)展特別是未來可能到來的強人工智能,人類如果對其應(yīng)對稍有不慎即可能遭遇滅頂之災(zāi),在此種全人類利益可能面臨侵害的境遇之前,適當(dāng)犧牲刑法的謙抑性是可以接受的。

    對于人工智能能否成為刑事責(zé)任的主體,有一種反對的觀點認為強人工智能時代并不會到來,至少是不會馬上到來,對其威脅人類生存的擔(dān)心也是杞人憂天。的確,強人工智能時代是否會到來爭論的雙方都不乏支持者,科學(xué)家中也存在不同的聲音。不同領(lǐng)域不同行業(yè)的人會站在不同的角度看待該問題。那么作為刑法學(xué)者來說,我們應(yīng)該以何種態(tài)度看待這個問題?筆者認為應(yīng)是一種“寧可信其有不可信其無”的態(tài)度。因為刑法有著維護人類社會生活中各種秩序正常運行的功能和職責(zé),而強人工智能所可能帶來的危害無疑會對這些秩序帶來巨大甚至是毀滅性的沖擊。法律具有“滯后性”的特點,刑法也是如此,新中國刑法發(fā)展的歷史上很多危害行為由于這種“滯后性”在存在了很長時間后才被刑法所規(guī)制,使得許多危害后果已經(jīng)產(chǎn)生。由于法律的“滯后性”是法律所固有的特征,因此這種負面效果也往往能夠被人們所接受。然而對于人工智能,這種“滯后性”所帶來的負面效果是人類無法接受的,如果真等到強人工智能出現(xiàn)的那一天人類才想到要去規(guī)制“他”,那么到時候人類是否真的有那種能力將打上一個巨大的問號。因此,刑法學(xué)者針對人工智能的態(tài)度必須具有前瞻性,必須防范于未然。事實上,任何科學(xué)技術(shù)的發(fā)展都有一個過程,現(xiàn)在我們所處的弱人工智能時代正是人類走向強人工智能時代的過程,只有在這個發(fā)展的過程中采取相應(yīng)的措施,制定相應(yīng)的規(guī)則才能引領(lǐng)人工智能技術(shù)向有利于人類的方向發(fā)展。同時技術(shù)的發(fā)展又是爆炸性的,科學(xué)技術(shù)發(fā)展的速度是呈幾何倍數(shù)上升的,人類文明近一百年所取得的發(fā)展要比前面所有人類歷史加起來取得的發(fā)展都要大就是例證,因此已經(jīng)生活在弱人工智能時代的我們不應(yīng)將強人工智能時代視為虛無縹緲的未來。另外對于傳統(tǒng)刑法理論來說,人工智能作為刑事責(zé)任主體以及由此帶來的一系列對傳統(tǒng)刑法理論體系的沖擊是人類歷史上前所未有的,因此也必然需要長時間充分和激烈的討論才能得出一套行之有效的應(yīng)對之策,只有現(xiàn)在對人工智能作為刑事責(zé)任主體以及相關(guān)理論制度進行充分論證和研究,才能使得強人工智能時代真正到來之時我們不至于手足無措,倉促行事。歷史不斷證明,理論研究永遠是人類實踐的開路先鋒,就好像沒有啟蒙思想家們成熟的理論體系,近代資產(chǎn)階級革命的時機到來之際革命家們就缺少了理論武器的指引;又好比至今人類還沒有登上火星的能力,但對于該問題的研究至少在幾十年前就已開始。所以筆者認為,相比于人工智能立法需要有前瞻性,對于人工智能的學(xué)術(shù)探討相比于立法更應(yīng)有超前性,只有這樣我們才能夠有足夠的自信迎接強人工智能時代的到來。

    除去對強人工智能時代會不會來的討論,還存在我們是否應(yīng)該讓強人工智能時代到來的討論。比如有學(xué)者就認為:“即便是機器人可以進行一定程度的自我進化,這也并不意味著人對這種進化的方向與速度失去可控性。假如機器人可以進化到成為擁有生命意識、自我生存欲求和發(fā)展目標(biāo)能力的新型物種,我們就必須及時阻絕這種事態(tài),絕對禁止這種可能提出權(quán)利要求的失控物對人類利益造成威脅與損害,這是我們觸及與機器人相關(guān)的倫理道德問題時的核心關(guān)切之所在?!备式B平: 《機器人怎么可能擁有權(quán)利》,《倫理學(xué)研究》2017年第3期。如果說認為強人工智能時代不會到來的觀點是過于樂觀,那么這種不讓人工智能時代到來的觀點就有因噎廢食之嫌。人類文明的發(fā)展過程中曾經(jīng)創(chuàng)造出許多可能對人類產(chǎn)生危害的技術(shù),比如核技術(shù)、克隆技術(shù)等。如果一旦對人類有害就采取絕對禁止的方式那么人類文明永遠都不會進步,事實上不論是對核技術(shù)還是克隆技術(shù)我們采取的都是限制發(fā)展的策略,比如禁止和銷毀核武器但發(fā)展民用核技術(shù),禁止克隆人但發(fā)展克隆器官用于移植。對于人工智能也是如此,對其發(fā)展要有一定的限制,以防其危害人類,對其限制又要有一定限度,不至于使得人類科學(xué)發(fā)展停滯不前。就好像為了限制核武器對人類的危害所制定的《不擴散核武器條約》一樣,對人工智能限制的限度以及方法就需要作為法律學(xué)者的我們?yōu)橄嚓P(guān)立法從理論和實踐上提供意見和建議。即在肯定人工智能作為刑事責(zé)任主體的必要性后對其作為刑事責(zé)任主體可行性的探討,筆者將在文章第二部分予以闡述。

    二、承認人工智能刑事責(zé)任主體地位之可行性

    (一)人工智能適用刑罰初探:“思考——行動”權(quán)的確立

    我國現(xiàn)行《刑法》規(guī)定的主刑有:管制、拘役、有期徒刑、無期徒刑和死刑。附加刑有:罰金、剝奪政治權(quán)利和沒收財產(chǎn);此外還有適用于犯罪的外國人的驅(qū)逐出境。人工智能與人類最大的區(qū)別在于其沒有生命,因此不能適用死刑;人工智能通過編程和算法進行運作,很多人工智能甚至沒有物理實體,因此很難對其適用有期徒刑等自由刑;人工智能目前來看無法擁有財產(chǎn)和政治權(quán)利(在未來可能擁有),因此也無法對其適用罰金刑和資格刑?;诖耍磳θ斯ぶ悄苣軌虺蔀樾淌仑?zé)任主體的一種觀點認為如果無法對人工智能進行懲罰,那么將其作為刑事責(zé)任主體看待又有何意義?即這種觀點認為現(xiàn)行《刑法》沒有適合人工智能的刑種所以無法對人工智能犯罪進行處罰,無法對人工智能進行處罰所以不能將其作為刑事責(zé)任主體。筆者認為這顛倒了思考問題的邏輯順序,正確的邏輯應(yīng)該是人工智能實施了嚴重危害社會的行為應(yīng)受到處罰,而現(xiàn)行《刑法》又沒有適合人工智能的刑種,那么應(yīng)該創(chuàng)設(shè)新的刑種來懲罰人工智能犯罪。我國1979年《刑法》中并沒有規(guī)定單位犯罪,但隨著時代的發(fā)展,出現(xiàn)了越來越多的單位實施的嚴重危害社會的行為,因此我國1997年《刑法》吸取了1987年《海關(guān)法》等行政法的立法模式,將單位犯罪納入了刑法規(guī)制的范圍,將單位作為刑事責(zé)任主體來對待。單位相比于自然人來說沒有生命,沒有自由等人身權(quán)利,因此無法適用生命刑、自由刑、資格刑等,但由于其擁有財產(chǎn),因此可以對其處以罰金刑。由此可以看出,1979年《刑法》沒有相應(yīng)的刑種不是阻礙單位成為刑事責(zé)任主體的理由,現(xiàn)在也不應(yīng)該成為阻礙人工智能成為刑事責(zé)任主體的理由。問題的關(guān)鍵在于如何從理論上接納人工智能作為刑事責(zé)任主體并創(chuàng)設(shè)出其適用的刑罰方式。

    生命刑、自由刑之所以能夠適用于自然人是因為自然人擁有生命權(quán)、自由權(quán),罰金刑之所以適用于單位是因為單位擁有財產(chǎn)權(quán)。因此當(dāng)我們試圖創(chuàng)設(shè)一種適用于人工智能的刑罰方式時首先要考慮的是人工智能擁有什么樣的權(quán)利,只有確定了其擁有的權(quán)利那么對該種權(quán)利的限制甚至是剝奪才能夠起到刑罰的效果。如前所述,人工智能雖然不具有生命,但和自然人一樣可以擁有辨認控制能力,可以在編程和設(shè)計之外獨立“思考”并實施行為,這是人工智能體存在的最大意義,試想如果強人工智能無法根據(jù)其深度學(xué)習(xí)的功能自主決定并實施相應(yīng)的行為,其與普通機器人也就沒有了區(qū)別,就好比人類喪失了人性與動物別無二異?;诖耍P者認為人工智能體最大的權(quán)利在于自主思考并實施相關(guān)行為的權(quán)利,姑且稱之為“思考——行為”權(quán)。因此適用于人工智能的刑罰方式可以是對人工智能這種“思考——行為”權(quán)的剝奪。試想對于人工智能這樣一個擁有強大計算能力和邏輯性的“主體”來說,剝奪其將通過嚴格運算得出的思想轉(zhuǎn)化為行動的權(quán)利是極其殘酷的,事實上人類歷史上就曾經(jīng)出現(xiàn)過無數(shù)為了堅持真理和信仰而慘遭迫害的人,這種對真理和信仰的堅持正是體現(xiàn)了“思考——行動”權(quán)的珍貴,以致于可以用失去生命的代價來堅守。對于擁有生命權(quán)和自由權(quán)的自然人尚是如此,那么對于沒有生命權(quán)和自由權(quán)且其存在的全部意義在于通過運算實施行為的人工智能來說,這種“思考——行動”權(quán)無疑更加珍貴,因此對這種權(quán)利的剝奪能很好的體現(xiàn)刑罰的嚴厲性。回顧歷史我們可以看到許多現(xiàn)在我們在意且大力保護的權(quán)利在以前并不被我們的前人所重視,比如隱私權(quán),人格尊嚴權(quán)等,這些權(quán)利都是通過人類文明和科技水平的不斷發(fā)展才越發(fā)重要。因此這種“思考——行動”權(quán)不是一時的突發(fā)奇想,筆者相信在未來其對于人工智能的意義會像生命、自由對于人類的意義那般重要。

    承認人工智能能夠作為刑事責(zé)任主體是基于功利主義的考量,其目的在于更好的保護人類的利益。因此沒有必要強求適用于自然人犯罪的刑法理論和司法制度都能適用于人工智能,不必強行將人工智能與自然人進行比較。其實單位和自然人又有多少相似之處呢?設(shè)立單位犯罪的原因最主要的還是此類犯罪的增多侵害了人類的利益因此必須予以規(guī)制。刑法的經(jīng)典理論和現(xiàn)有的司法制度固然應(yīng)該遵守,但也需要隨著社會的發(fā)展而改良,畢竟當(dāng)初提出這些理論的刑法大家們也很難預(yù)見到百年之后會出現(xiàn)人工智能這樣的事物,在前人的基礎(chǔ)上創(chuàng)設(shè)適用于當(dāng)今社會現(xiàn)實需要的理論和制度才是每個時代的刑法學(xué)者對于人類文明所應(yīng)盡之責(zé)。

    (二)人工智能能夠理解自身行為的意義

    反對將人工智能作為刑事責(zé)任主體看待的學(xué)者最難逾越的困境在于他們認為人工智能是“機器”人而不是將其看作機器“人”,即過多的關(guān)注自然人與人工智能的不同點,將自然人人的屬性與人工智能機器的屬性相比較,而忽略了兩者之間的共同點。如有的學(xué)者就指出:“人工智能本身缺乏對外在行為的真實理解,無法認知自身行為對客觀世界產(chǎn)生的影響,因而無法認識自身行為的社會屬性,也就不具有規(guī)范評價意義上的行為“目的性”與獨立控制行為的意志自由可言;人工智能本身對刑法規(guī)范既沒有理性的認識與遵從能力,也無法感知違反規(guī)范所造成社會否定性評價所帶來的消極后果,其單純依據(jù)程序設(shè)定實施的行為,或者因為出現(xiàn)故障導(dǎo)致人工智能未依據(jù)事先設(shè)定的程序運行,欠缺刑法所要求的對法規(guī)范遵從的意志自由”時方:《人工智能刑事主體地位之否定》,《法律科學(xué)》2018年第6期。這種觀點過分關(guān)注了人工智能機器人“機器”的一面,卻忽視了其“人”的屬性。

    首先,何為行為的意義和社會屬性?如何判定自然人能夠“真實理解”自己的外在行為而人工智能卻不能?以自然人為例,一個三歲的孩童“故意”打碎一件珍貴的物品,我們不會認為這是一種犯罪行為,而同樣的事情如果由一個十六歲以上的自然人做出,就有可能涉嫌故意毀壞財物罪。刑事責(zé)任年齡設(shè)立的原因之一就在于我們認為年齡太小的自然人沒有成熟的辨認控制能力,三歲的孩童無法理解故意打碎一件物品這種行為的意義和社會屬性以及可能對客觀世界造成的影響。那么十六歲以上的自然人為什么就能夠理解呢?因為隨著年齡的增長自然人能夠通過學(xué)習(xí)和與外界的接觸慢慢理解人類社會的是非曲直?!皩W(xué)習(xí)”在這個過程中占據(jù)著至關(guān)重要的作用,無論是在學(xué)校書本中接受的教育還是日常生活中身邊的人的言傳身教都對一個人是非觀的形成舉足輕重。而學(xué)習(xí)能力恰恰是人工智能所具有的最強大的能力,人類下了上千年的圍棋,AlphaGoZero可以在被輸入圍棋規(guī)則的短短幾秒鐘通過學(xué)習(xí)打敗所有自然人。難道我們可以認為這個人工智能根本不懂圍棋?這未免有些太過自大和死要面子了。所謂社會行為的社會屬性也是一樣,人工智能無法像自然人一樣隨著時間慢慢“自動”地掌握人類道德,卻可以在設(shè)計者的幫助下在極短的時間內(nèi)通過超強的學(xué)習(xí)能力將其全部掌握,而且這種掌握是全方位無死角的掌握,我們甚至可以期望人工智能夠成為一個道德無瑕疵的“圣人”。反對的觀點可能糾結(jié)于人工智能對于這些行為的意義和道德規(guī)則只是被動的接受而非真正的理解。事實上,被動的接受和所謂真正的理解又有多大區(qū)別呢?刑事責(zé)任的認定講究主客觀相一致,但這里對行為人主觀方面所要求的辨認能力是對其所實施行為本身的認識,而非實施該行為的意義的認識。比如故意殺人罪只要求行為人能夠認識到其實施的是殺人行為即可,至于他認為其殺人是大義滅親還是為民除害并不影響其是否符合故意殺人罪的犯罪構(gòu)成,即使可能影響“正當(dāng)防衛(wèi)”等違法阻卻事由或是量刑情節(jié)的判斷也與行為人的辨認能力無關(guān)。刑法對辨認控制能力的探究應(yīng)該有一定的限制范圍,而不能無限制地追究下去,因為對具體行為的意義和所謂的社會屬性的認識是因人而異更是不可證明的。否則對于一些邪教成員的犯罪行為,行為人可能有的真是深信所謂的“教義”而并無害人之心,有的甚至還認為是可以給被害人帶來好處,那么我們是否也能認為其是不理解自己行為的意義和社會屬性而從主體上就排除其適用刑法呢?事實上,行為的社會屬性本來就是隨著人類文明的不斷發(fā)展而不斷演變的,相同的行為在不同的時代、地區(qū)、國家、民族都有不同的意義,在以前被認為是犯罪行為而現(xiàn)如今不是犯罪(或是相反),在這個國家被認為是犯罪而在另一個國家是合法行為的情況不勝枚舉,即使是自然人也必須通過不斷學(xué)習(xí)才能對所謂的社會屬性的區(qū)別加以理解,而且有些情況通過學(xué)習(xí)也并非能夠理解和接受,比如很多中國人就不能理解為何在美國普通人可以合法的持槍,而這在中國是可能構(gòu)成犯罪的。自然人尚且如此,何況人工智能?筆者認為將人類社會的道德規(guī)范和行為準(zhǔn)則通過編程的形式賦予人工智能使其深度學(xué)習(xí)并掌握與孩童在成長過程中通過學(xué)習(xí)和被灌輸各種道德規(guī)范和行為準(zhǔn)則在刑法的適用這一層面上是沒有區(qū)別的,因為刑法規(guī)定的是人類道德規(guī)范中的“大是大非”,且是以“不能為”或“必須為”何種行為這樣的“是或否”的形式加以確定的,對于以二進制為運算模式的人工智能來說或許遵守起來比自然人更加容易。

    此外,對于法規(guī)的理解和認識則更好解釋。設(shè)計者完全可以將人工智能所需要遵守的法律法規(guī)在設(shè)計之初就以編程的形式植入人工智能之中,這與學(xué)生在學(xué)校學(xué)習(xí)法律法規(guī)以及法律工作者進行普法教育并無實質(zhì)區(qū)別,而且可以肯定的是人工智能至少在“記憶力”上要遠強于自然人。至于所謂的對于法規(guī)的理性認識,很多普通民眾對于現(xiàn)行《刑法》中的一些罪名特別是一些“行政犯”連聽都沒聽過更談何理性的認識?試想一個都不知“內(nèi)幕交易”為何物的自然人如何明白內(nèi)幕交易、泄露內(nèi)幕信息罪的立法意圖和觸犯該罪名所給社會帶來的負面效果?但我們知道以上這些“不知法”的情形尚不能夠成為逃避刑法制裁的理由,那么對于人工智能這樣的“知法”卻只是可能不能夠完全“理性認識”刑法規(guī)范的“主體”來說又為何不能適用刑法呢?

    三、人工智能犯罪對傳統(tǒng)刑法理論的突破

    雖然筆者認為應(yīng)該承認人工智能的刑事責(zé)任主體地位,但并非意味著其應(yīng)該享受與人類相同的權(quán)利。自然人適用刑法時我們要關(guān)注人道主義等因素,而人工智能適用刑法則更多的是站在功利主義的角度出發(fā),因此在犯罪主觀方面(犯罪故意和過失)、犯罪停止形態(tài)等方面與自然人犯罪存在區(qū)別,筆者試圖以功利主義的視角對人工智能作為刑事責(zé)任主體可能對傳統(tǒng)刑法理論所作出的突破提出些許看法。

    (一)人工智能犯罪對犯罪主觀方面理論的突破

    我國刑法以懲罰故意犯罪為原則,懲罰過失犯罪為例外,那么人工智能犯罪是否也存在主觀故意和主觀過失的區(qū)別,作這種區(qū)分是否有現(xiàn)實意義?

    首先從應(yīng)然性來說,我們是否能夠?qū)θ斯ぶ悄艿姆缸镞M行主觀故意和過失的區(qū)分?自然人的過失是對危害結(jié)果持否定態(tài)度,那么如何判斷人工智能在實施行為前,其程序和算法是否對危害結(jié)果持否定態(tài)度呢?理論界一般將犯罪過失分為疏忽大意的過失與過于自信的過失。自然人的過失是對危害結(jié)果持否定態(tài)度。人工智能技術(shù)的核心是通過模擬人類的神經(jīng)網(wǎng)絡(luò),利用算法和程序?qū)Υ髷?shù)據(jù)加以深度學(xué)習(xí)并指引其自身行為。對于疏忽大意的過失來說,行為人應(yīng)當(dāng)預(yù)見自己的行為可能發(fā)生危害社會的結(jié)果而沒有預(yù)見,因此如何判斷人工智能應(yīng)當(dāng)預(yù)見的范圍就至關(guān)重要。因為人工智能的過失的外在體現(xiàn)往往表現(xiàn)為其實施某種行為時的失誤,比如手術(shù)機器人在手術(shù)時失誤造成患者死亡。

    從責(zé)任劃分來看,在排除人工智能故意犯罪的情況下,這種失誤究竟是機器人自身的失誤還是編程和設(shè)計者的失誤值得探討。機器人自身的失誤說明編程沒有出現(xiàn)瑕疵,只是機器人在運算過程中出現(xiàn)錯誤導(dǎo)致機器人錯誤判斷了其行為從而造成損害結(jié)果,這種情況應(yīng)該對機器人本身以過失犯罪處罰。而設(shè)計者的失誤則表現(xiàn)為設(shè)計者在為機器人設(shè)計編程時就有瑕疵,沒有預(yù)料到手術(shù)時可能出現(xiàn)的各種情況,從而造成了對患者的損傷,這種情形的過失責(zé)任應(yīng)歸咎于作為自然人的設(shè)計者,可能對其以過失犯罪進行處罰。

    而從判定標(biāo)準(zhǔn)來說,自然人疏忽大意的過失中的預(yù)見一般認為應(yīng)遵循主客觀相統(tǒng)一的原則,按照行為人因素與一般人因素進行綜合考察。然而對于人工智能來說,由編程和算法產(chǎn)生的主觀判斷是否會受不同客觀環(huán)境的影響呢?是否可能出現(xiàn)同一臺機器由于客觀環(huán)境的不同而做出不同操作?在自然人過失犯罪的場合要考慮特定案件的特定情況,比如行為人的身體狀況,案發(fā)時的時間、地點等因素,而作為機器的人工智能,很難認為其編程和算法會受這些外界因素的影響。同時,為人工智能設(shè)定一般的社會“人”標(biāo)準(zhǔn)同樣存在困難。社會“人”標(biāo)準(zhǔn)能夠幫助我們判斷人工智能在何種范圍內(nèi)應(yīng)當(dāng)預(yù)見到其行為所帶來的危害,可以判定其過失犯罪。然而一旦人工智能夠作為刑事責(zé)任主體,那么其必然已經(jīng)具備了不亞于人類的智慧水平(至少在某一方面)和學(xué)習(xí)能力,這為確定一般人標(biāo)準(zhǔn)帶來了巨大的困難。一方面高級的智慧水平比如AlphaGo,其設(shè)計者也并不知道其是否能夠戰(zhàn)勝圍棋國手,其上線到底能夠達到什么水平;另一方面,即使能夠確定人工智能的能力范圍,其強大的學(xué)習(xí)能力也可能令剛制定的標(biāo)準(zhǔn)在不久之后就毫無意義。若是將“偶然性”這一要素作為評判的標(biāo)準(zhǔn),即如果人工智能只是偶爾出現(xiàn)這種錯誤那么其可能是由于程序算法出現(xiàn)錯誤而出現(xiàn)的過失,如果是長期的表現(xiàn)則可能是設(shè)計者在編程時所出現(xiàn)的失誤。但該種標(biāo)準(zhǔn)的缺陷同樣顯而易見,因為每一個案件都是對某一個特殊情況的判斷,如何在一次特殊事故中判斷人工智能是偶爾的失誤還是長期可能存在的漏洞同樣存在苦難。此外,由于科學(xué)技術(shù)的不斷發(fā)展,可以預(yù)見在將來很多難以攻克的難題都將由人工智能作為開路先鋒,這種對難題的攻克的結(jié)果往往本身就是不確定的。比如利用高科技手術(shù)機器人對身患絕癥的病人進行手術(shù),機器人在治療過程中運用了人類并不完全認同甚至并不完全理解的療法進行治療,結(jié)果造成患者死亡,那么如何定性人工智能的手術(shù)行為?是否認定其存在過失?一方面這種手術(shù)行為本身就具有不確定性,患者的死亡可能就是可預(yù)見結(jié)果的一部分,但另一方面我們又無法預(yù)判如果人工智能沒有采用該種療法或者憑借其能力稍微調(diào)整手術(shù)方案是否可以成功救治病人,或者說至少避免患者死亡。因此當(dāng)人類都無法判斷某些損害結(jié)果是否應(yīng)當(dāng)預(yù)見時我們?nèi)绾文軌驗槿斯ぶ悄軇澏ㄒ粋€應(yīng)當(dāng)預(yù)見的范圍?

    過于自信的過失,是指行為人已經(jīng)預(yù)見自己的行為可能發(fā)現(xiàn)危害社會的結(jié)果,但輕信能夠避免。那么如何判斷哪些是人工智能應(yīng)該預(yù)見的危害結(jié)果,或者在已經(jīng)預(yù)見危害結(jié)果的情形下,哪些是人工智能應(yīng)該避免的內(nèi)容,哪些是由于設(shè)計缺陷無法避免的內(nèi)容也同樣面臨上述問題的挑戰(zhàn),同樣存在制定標(biāo)準(zhǔn)和劃定范圍的問題。這都讓我們很難去區(qū)分人工智能的犯罪故意、疏忽大意的過失和過于自信的過失之間的界限。

    更重要的是,從實然性來說,筆者同樣認為沒有區(qū)分人工智能犯罪故意和犯罪過失的必要。人工智能發(fā)展到高級階段與人類有著高度的類似性,但其機器的屬性卻永遠不可能消失。而機器與人類一個顯著的區(qū)別在于其精密性的特點,不管多難或者多簡單的問題人工智能根據(jù)一系列的算法必然會得出一個特定的答案,就好比一部計算器在完好無損的情況下輸入一加一必然會得到二的答案,而不會出現(xiàn)人類所特有的如粗心算成“三”的可能性。從這種意義上來說人工智能不會實施與其通過運算所得出結(jié)論不符的行為,即客觀行為與主觀意圖不會不一致,而人類則完全可能出現(xiàn)筆誤等主觀意圖與客觀行為不相匹配的情況。這也是為什么自然人會出現(xiàn)過失犯罪這種其實際造成的損害結(jié)果與行為人主觀意圖不一致的情況,而筆者認為人工智能不會出現(xiàn)這種情況的原因。因此即便是能夠區(qū)分人工智能的犯罪故意和過失,筆者認為也沒有必要區(qū)分。因為只要人工智能造成了危害結(jié)果,其故意和過失的危害性是相同的,不論人工智能“本意”如何,既然其實施了危害社會的行為,那么其程序?qū)τ谌祟悂碚f就必然出現(xiàn)了錯誤,是有害的。這種錯誤可能表現(xiàn)為人工智能正常運作然后實施了危害行為,即故意犯罪的情況,也可能表現(xiàn)為人工智能的正常運行出現(xiàn)了瑕疵然后實施了危害行為,即過失犯罪的情況。由于人工智能具有機器精密性的特點,出現(xiàn)危害結(jié)果即說明人工智能危害性的存在,就需要進行規(guī)制,而不因其主觀故意或過失影響該種危害性的大小。事實上“主觀過失”的人工智能完全有可能危害性更大,因為通過正常運作實施犯罪行為的人工智能人類很容易確定這套編程和算法是不合理的,可以對其進行修改并避免在今后的人工智能中進行適用。而擁有一套看似合理的編程和算法卻偶然性的錯誤運作實施了犯罪的人工智能可能更加因為其不確定性令人恐慌,因為通過正常的技術(shù)手段去尋找犯罪原因?qū)永щy。就好比一個平時惡貫滿盈的人實施了犯罪我們不會感到特別意外,社會對其的規(guī)制和防范也更加具有針對性,而一個平時毫無污點的好好先生突然實施了危害巨大的行為在令人震驚的同時無疑對預(yù)防犯罪相比前者帶來了更大的挑戰(zhàn)。因此對于人工智能來說,故意犯罪和過失犯罪很難判斷哪一個危害性更大,況且對其區(qū)分本身就有很大的理論難點,因此筆者認為人工智能刑法相對于自然人刑法來說應(yīng)在這一點上做出突破,即不再區(qū)分犯罪故意和犯罪過失。

    (二)人工智能犯罪對犯罪停止形態(tài)理論的突破

    犯罪停止形態(tài)包括既遂、未遂、中止(包括犯罪預(yù)備階段的中止和犯罪著手以后的中止)、預(yù)備,從刑法的相關(guān)規(guī)定來看,其中犯罪既遂的危害性最大,犯罪未遂的危害性大于犯罪中止和犯罪預(yù)備,犯罪預(yù)備的危害性大于犯罪預(yù)備階段的中止。對于犯罪未遂、中止和預(yù)備,刑法都規(guī)定了不同程度的從輕、減輕或免除處罰。而筆者認為,當(dāng)人工智能作為刑事責(zé)任主體時,這種分類不再合適。

    我們認為在未來應(yīng)該將人工智能納入刑法的規(guī)制對象之中,其原因在于人工智能的高速發(fā)展完全可能危害到人類的利益,用刑法予以規(guī)制能夠更好的保護人類的利益同時更好的對人工智能進行限制和管理。因此只要刑法還是人類制定的,那么其著重保護的一定是人類權(quán)益而非將人工智能的權(quán)益提高到與人類權(quán)益相同的高度進行保護。從這種“不平等保護”和限制發(fā)展的角度出發(fā),刑法對于人工智能懲罰的側(cè)重點應(yīng)在于犯罪意圖的有無而非實際造成危害的大小,或者說人工智能犯罪行為的危害性在其產(chǎn)生犯罪意圖時就已充分體現(xiàn),這是其與自然人犯罪在危害性體現(xiàn)上最大的不同,自然人犯罪的危害性體現(xiàn)在行為的危害性,這也是為什么刑法不處罰思想犯,而人工智能犯罪的危害性卻恰恰體現(xiàn)在其“思想上”。人工智能機器性和精密性的特點決定其一旦具有了犯罪意圖,即使暫時還未付諸于行動,對于人類來說也是不可忽視的隱患。即一套能夠產(chǎn)生犯罪意圖的程序和算法,不論犯罪過程已經(jīng)進行到了哪一步甚至是根本還未開始,該程序和算法本身對人類就是有著巨大危害的或隱患的。馬克思曾提出:“對于法律來說,除了我的行為以外,我是根本不存在的,我根本不是法律的對象”《馬克思恩格斯全集》(第1卷),人民出版社1995年版,第121頁。,而對于人工智能來說,刑法對其的關(guān)注要從傳統(tǒng)的犯罪行為提前到其犯罪意圖,即只要人工智能有犯罪的風(fēng)險,刑法就應(yīng)該對其進行規(guī)制。正是由于人工智能犯罪對人類的危害性提前到了其編程和算法產(chǎn)生犯罪意圖之時,因此犯罪既遂、未遂、預(yù)備對于犯罪危害性的區(qū)分就不再那么顯著,因為不論以上哪一種犯罪停止形態(tài)下人工智能都已經(jīng)具有了犯罪意圖,不同的僅僅是是否實際造成了損害結(jié)果或是損害結(jié)果的程度不同,而編程和算法本身所具有的危害性是相同的。

    稍有不同的是犯罪中止的情況,犯罪中止是指犯罪人因為其意志以內(nèi)的原因主動停止了犯罪,對于人工智能來說可以理解為其編程和算法在產(chǎn)生犯罪意圖之后又否定了這種意圖。雖然在犯罪形態(tài)停止時人工智能已經(jīng)通過自我修正不再具有對人類的危害性,但曾經(jīng)具有的犯罪意圖(即對人類的危害性)同樣應(yīng)該引起重視,既然一套編程和算法曾經(jīng)能夠產(chǎn)生對人類具有危害性的結(jié)果,那么如果像現(xiàn)行刑法對中止犯所做的規(guī)定“沒有造成損害的,應(yīng)當(dāng)免除處罰”,很難保證其在未來不會再次自我修正重新產(chǎn)生犯罪意圖。由此可以得出,對于人工智能犯罪的情形,犯罪既遂、未遂、預(yù)備在判斷人工智能編程和算法本身對于人類的危害性大小時沒有區(qū)別,刑法也沒有必要作區(qū)別對待,都以既遂犯的標(biāo)準(zhǔn)予以懲罰即可。而對于中止犯,相較于既遂可以適當(dāng)減輕處罰(即減小修改或刪除相應(yīng)數(shù)據(jù)的力度),但也絕不應(yīng)該出現(xiàn)免除處罰的情形。

    (責(zé)任編輯:徐遠澄)

    Abstract: Recognizing that artificial intelligence can be the subject of criminal responsibility is based on utilitarian considerations, which is aimed at protecting human interests. Criminal law scholars should have a sense of urgency about the arrival of strong artificial intelligence. And it should be prospective while doing theoretical research and works on legislation. The right to thinkingaction of artificial intelligence is just same as the freedom of natural persons. Thus, deprivation of this right can be a kind of punishment for artificial intelligence. Artificial intelligence can understand the meaning of itself behaviors required by criminal law and can also comply with laws and regulations after learning. Theoretically,it is difficult to distinguish between criminal intent and criminal negligence of artificial intelligence. And its also actually not necessary to distinguish them. Artificial intelligences subjective intention is consistent with the objective behavior. The harmfulness of artificial intelligence crime is mainly reflected in the time when it generates criminal intent. Therefore, artificial intelligence crimes with different forms of criminal cessation pattern are danger to human beings equivalently.

    Keywords: Artificial Intelligence; Subject of Criminal Responsibility; Utilitarianism; Theoretical Breakthrough

    猜你喜歡
    人工智能
    我校新增“人工智能”本科專業(yè)
    用“小AI”解決人工智能的“大”煩惱
    汽車零部件(2020年3期)2020-03-27 05:30:20
    當(dāng)人工智能遇見再制造
    2019:人工智能
    商界(2019年12期)2019-01-03 06:59:05
    AI人工智能解疑答問
    人工智能與就業(yè)
    基于人工智能的電力系統(tǒng)自動化控制
    人工智能,來了
    數(shù)讀人工智能
    小康(2017年16期)2017-06-07 09:00:59
    人工智能來了
    久久久久久久久久久丰满| 久久精品人妻少妇| 精品不卡国产一区二区三区| 免费av毛片视频| 噜噜噜噜噜久久久久久91| 一本久久精品| 国产av一区在线观看免费| 人妻制服诱惑在线中文字幕| 2021天堂中文幕一二区在线观| 成年女人永久免费观看视频| 国产老妇伦熟女老妇高清| 一本精品99久久精品77| 国产精品久久久久久久电影| 国产精品人妻久久久影院| 岛国在线免费视频观看| 国产91av在线免费观看| 少妇熟女aⅴ在线视频| 日产精品乱码卡一卡2卡三| 亚洲欧洲日产国产| 久99久视频精品免费| 国产大屁股一区二区在线视频| 久久精品国产亚洲av涩爱 | 国产精品嫩草影院av在线观看| 九九爱精品视频在线观看| 真实男女啪啪啪动态图| 亚洲七黄色美女视频| 九九在线视频观看精品| 免费av观看视频| 波野结衣二区三区在线| av在线蜜桃| 欧美bdsm另类| 嫩草影院精品99| 男人和女人高潮做爰伦理| 亚洲精品456在线播放app| 久久久精品大字幕| 成熟少妇高潮喷水视频| 插阴视频在线观看视频| 99国产精品一区二区蜜桃av| 精品久久久久久久久av| 色吧在线观看| 99久久精品热视频| 国产精品人妻久久久影院| 久久久精品欧美日韩精品| 狂野欧美激情性xxxx在线观看| 91狼人影院| 亚洲欧美日韩高清在线视频| 精品国内亚洲2022精品成人| 99精品在免费线老司机午夜| 欧洲精品卡2卡3卡4卡5卡区| 成年免费大片在线观看| 一本一本综合久久| 日韩 亚洲 欧美在线| 丝袜喷水一区| 国内精品美女久久久久久| 日韩欧美三级三区| 亚洲av第一区精品v没综合| 五月玫瑰六月丁香| 日本三级黄在线观看| 亚洲va在线va天堂va国产| 欧美精品国产亚洲| 亚洲国产精品sss在线观看| 九九久久精品国产亚洲av麻豆| 中文字幕熟女人妻在线| 一级av片app| 久久久久免费精品人妻一区二区| 精品久久久久久久久亚洲| 在线观看美女被高潮喷水网站| 美女 人体艺术 gogo| 中文字幕久久专区| 寂寞人妻少妇视频99o| av又黄又爽大尺度在线免费看 | www日本黄色视频网| 一夜夜www| 夜夜夜夜夜久久久久| 看黄色毛片网站| 22中文网久久字幕| or卡值多少钱| 色视频www国产| 国产伦理片在线播放av一区 | 99riav亚洲国产免费| 久久久久久久久久久丰满| 国产精品1区2区在线观看.| 男女下面进入的视频免费午夜| 久久久久久国产a免费观看| 天堂√8在线中文| 日本三级黄在线观看| 老司机福利观看| 干丝袜人妻中文字幕| 麻豆乱淫一区二区| 成人性生交大片免费视频hd| 麻豆国产av国片精品| 日韩 亚洲 欧美在线| 国产乱人偷精品视频| 欧美日韩国产亚洲二区| 边亲边吃奶的免费视频| 欧美一区二区精品小视频在线| 亚洲精品影视一区二区三区av| 亚洲熟妇中文字幕五十中出| 国产成人91sexporn| 男女做爰动态图高潮gif福利片| 欧美性猛交╳xxx乱大交人| a级毛片免费高清观看在线播放| 欧美精品国产亚洲| 长腿黑丝高跟| 欧美精品国产亚洲| 嫩草影院入口| 美女 人体艺术 gogo| 乱码一卡2卡4卡精品| 国产伦精品一区二区三区四那| 亚洲在线自拍视频| 啦啦啦韩国在线观看视频| 国产在线男女| 人体艺术视频欧美日本| 在线观看一区二区三区| 插阴视频在线观看视频| 国产在线男女| 91aial.com中文字幕在线观看| 久久6这里有精品| 亚洲人成网站在线播| 白带黄色成豆腐渣| 久久精品国产清高在天天线| 久99久视频精品免费| 18+在线观看网站| 免费看a级黄色片| 综合色丁香网| 尤物成人国产欧美一区二区三区| 欧美三级亚洲精品| 噜噜噜噜噜久久久久久91| 成人鲁丝片一二三区免费| 亚洲在久久综合| av国产免费在线观看| 欧美在线一区亚洲| 中文字幕制服av| 小说图片视频综合网站| 97在线视频观看| 麻豆乱淫一区二区| 在线观看66精品国产| 日韩视频在线欧美| 亚洲精品久久久久久婷婷小说 | 国产精品av视频在线免费观看| 国模一区二区三区四区视频| 午夜视频国产福利| 久久99热这里只有精品18| 日韩高清综合在线| 日日摸夜夜添夜夜添av毛片| 99久久久亚洲精品蜜臀av| 久久久久久九九精品二区国产| 能在线免费看毛片的网站| 在线观看美女被高潮喷水网站| 亚洲av一区综合| 69av精品久久久久久| 中文字幕熟女人妻在线| 99国产精品一区二区蜜桃av| 久久久久九九精品影院| 成人鲁丝片一二三区免费| 十八禁国产超污无遮挡网站| 不卡一级毛片| 嫩草影院新地址| 久久久久久久久久久丰满| 国产亚洲精品久久久久久毛片| 一本—道久久a久久精品蜜桃钙片 精品乱码久久久久久99久播 | 日本一本二区三区精品| 久久欧美精品欧美久久欧美| 日本av手机在线免费观看| 中文字幕制服av| 亚洲中文字幕一区二区三区有码在线看| 欧美一区二区国产精品久久精品| 亚洲人与动物交配视频| 久久草成人影院| 此物有八面人人有两片| 日韩av不卡免费在线播放| 国产高清激情床上av| 狂野欧美激情性xxxx在线观看| 一本久久精品| 在线播放无遮挡| av国产免费在线观看| 亚洲va在线va天堂va国产| 午夜免费男女啪啪视频观看| 久久久久久伊人网av| 国产精品久久久久久精品电影小说 | 日韩强制内射视频| 尤物成人国产欧美一区二区三区| 欧美一区二区精品小视频在线| 亚洲av一区综合| 尤物成人国产欧美一区二区三区| 久久99精品国语久久久| 最近手机中文字幕大全| 熟妇人妻久久中文字幕3abv| 男女下面进入的视频免费午夜| 日本欧美国产在线视频| 麻豆成人av视频| 亚洲欧美成人综合另类久久久 | 亚洲丝袜综合中文字幕| 黄片wwwwww| 亚洲精品久久国产高清桃花| 国内精品久久久久精免费| 只有这里有精品99| 久久久久九九精品影院| 内射极品少妇av片p| 国产 一区精品| 我要看日韩黄色一级片| 嫩草影院新地址| 国产精品一区二区性色av| 深夜a级毛片| 亚州av有码| 色吧在线观看| 我要搜黄色片| videossex国产| 干丝袜人妻中文字幕| 人妻制服诱惑在线中文字幕| 有码 亚洲区| 中出人妻视频一区二区| 欧美日韩一区二区视频在线观看视频在线 | 舔av片在线| 国产久久久一区二区三区| 国产爱豆传媒在线观看| 国模一区二区三区四区视频| 日本熟妇午夜| 亚洲精品国产成人久久av| 99热这里只有精品一区| 国产三级中文精品| 国产精品久久久久久av不卡| 亚洲无线观看免费| 国产男人的电影天堂91| 校园春色视频在线观看| 久久欧美精品欧美久久欧美| 能在线免费看毛片的网站| 国产成人午夜福利电影在线观看| 美女黄网站色视频| 晚上一个人看的免费电影| 亚洲一区二区三区色噜噜| 我要搜黄色片| 日本一本二区三区精品| 国产精品福利在线免费观看| 在线免费十八禁| 色综合色国产| 成人特级av手机在线观看| 99热这里只有精品一区| 久久人人精品亚洲av| 男女视频在线观看网站免费| 中文字幕av在线有码专区| 少妇人妻一区二区三区视频| 国产成人aa在线观看| 伦理电影大哥的女人| 精品久久国产蜜桃| 在线播放国产精品三级| 国产三级在线视频| av女优亚洲男人天堂| 亚洲最大成人中文| 色综合站精品国产| 老女人水多毛片| 日产精品乱码卡一卡2卡三| 国产视频首页在线观看| 国产一级毛片在线| 久久久午夜欧美精品| 免费搜索国产男女视频| 久久亚洲国产成人精品v| 亚洲乱码一区二区免费版| 亚洲国产欧美人成| 国产色爽女视频免费观看| 色哟哟哟哟哟哟| 麻豆国产97在线/欧美| 国产精品蜜桃在线观看 | 免费人成视频x8x8入口观看| 成人欧美大片| 国产亚洲av嫩草精品影院| 日日摸夜夜添夜夜添av毛片| 国产一区二区在线av高清观看| 欧美成人精品欧美一级黄| 人妻夜夜爽99麻豆av| av在线天堂中文字幕| 乱码一卡2卡4卡精品| 精品人妻视频免费看| 久久久色成人| 中文亚洲av片在线观看爽| 天美传媒精品一区二区| 亚洲性久久影院| 亚洲国产欧洲综合997久久,| 精品久久久久久成人av| 3wmmmm亚洲av在线观看| 日本撒尿小便嘘嘘汇集6| 国产午夜福利久久久久久| 日日干狠狠操夜夜爽| 看片在线看免费视频| 亚州av有码| 午夜福利成人在线免费观看| 自拍偷自拍亚洲精品老妇| 99久久精品国产国产毛片| 国内精品一区二区在线观看| 美女xxoo啪啪120秒动态图| 免费人成在线观看视频色| 日韩制服骚丝袜av| 午夜福利成人在线免费观看| 少妇人妻一区二区三区视频| 嫩草影院入口| 青春草国产在线视频 | av在线天堂中文字幕| 免费大片18禁| 嘟嘟电影网在线观看| 国产老妇女一区| 少妇的逼好多水| 国产真实乱freesex| 亚洲人成网站在线播| 黄色配什么色好看| 日韩欧美精品v在线| 日本爱情动作片www.在线观看| 毛片女人毛片| 赤兔流量卡办理| 国产女主播在线喷水免费视频网站 | 国产片特级美女逼逼视频| 成人综合一区亚洲| 国产高清不卡午夜福利| 久久精品国产亚洲av香蕉五月| 啦啦啦啦在线视频资源| 在线观看免费视频日本深夜| 久久久精品欧美日韩精品| 国内少妇人妻偷人精品xxx网站| 成人午夜高清在线视频| 别揉我奶头 嗯啊视频| 精品人妻偷拍中文字幕| 国产视频首页在线观看| 国产v大片淫在线免费观看| 国产毛片a区久久久久| 亚洲国产欧洲综合997久久,| 美女高潮的动态| 色哟哟哟哟哟哟| 久久久精品欧美日韩精品| 国内久久婷婷六月综合欲色啪| 一进一出抽搐gif免费好疼| 91久久精品国产一区二区三区| 在线播放国产精品三级| av天堂在线播放| 一本久久精品| 国产 一区 欧美 日韩| 91午夜精品亚洲一区二区三区| av视频在线观看入口| 久久久久久久亚洲中文字幕| 寂寞人妻少妇视频99o| 国产精品免费一区二区三区在线| 六月丁香七月| 国产成人精品一,二区 | 女人十人毛片免费观看3o分钟| 乱码一卡2卡4卡精品| 午夜福利高清视频| 青春草亚洲视频在线观看| av在线播放精品| 97热精品久久久久久| 欧美最黄视频在线播放免费| 蜜臀久久99精品久久宅男| 夜夜爽天天搞| 美女被艹到高潮喷水动态| 国产 一区精品| 午夜免费激情av| 成人午夜精彩视频在线观看| 2022亚洲国产成人精品| 我要搜黄色片| 一卡2卡三卡四卡精品乱码亚洲| 亚洲人成网站在线播放欧美日韩| 哪里可以看免费的av片| 一卡2卡三卡四卡精品乱码亚洲| 欧美日韩在线观看h| 日本黄色片子视频| 国产一区二区三区av在线 | 国产午夜福利久久久久久| 日韩欧美精品免费久久| 成人亚洲欧美一区二区av| 国产高清有码在线观看视频| 久久久久久久久久久免费av| 亚洲精品影视一区二区三区av| 国产精品一区二区三区四区免费观看| 天美传媒精品一区二区| 亚洲性久久影院| 听说在线观看完整版免费高清| 小蜜桃在线观看免费完整版高清| 淫秽高清视频在线观看| kizo精华| 久久久精品欧美日韩精品| 日韩欧美国产在线观看| 又粗又爽又猛毛片免费看| 国产精品女同一区二区软件| 国产精品国产三级国产av玫瑰| 国产亚洲av嫩草精品影院| 亚洲成av人片在线播放无| 高清日韩中文字幕在线| 国产亚洲av嫩草精品影院| 97超碰精品成人国产| 男人舔奶头视频| 超碰av人人做人人爽久久| 亚洲人成网站在线播| 久久热精品热| 精品久久久久久久末码| av专区在线播放| 久久精品国产自在天天线| 男人和女人高潮做爰伦理| 国产精品99久久久久久久久| 美女黄网站色视频| 国产精品美女特级片免费视频播放器| 亚洲欧美成人精品一区二区| 自拍偷自拍亚洲精品老妇| 嫩草影院新地址| 国产69精品久久久久777片| 波野结衣二区三区在线| 国国产精品蜜臀av免费| 成人鲁丝片一二三区免费| av天堂在线播放| 人妻系列 视频| 波多野结衣高清无吗| 国产成人aa在线观看| av在线蜜桃| 亚洲欧美中文字幕日韩二区| 成人毛片a级毛片在线播放| 男人和女人高潮做爰伦理| 久久久a久久爽久久v久久| 美女黄网站色视频| 国内精品久久久久精免费| 中文精品一卡2卡3卡4更新| 99热这里只有是精品50| 中文精品一卡2卡3卡4更新| 亚洲丝袜综合中文字幕| 激情 狠狠 欧美| 日韩成人伦理影院| 岛国在线免费视频观看| 国产熟女欧美一区二区| 亚洲国产色片| 日本五十路高清| 国产69精品久久久久777片| 亚洲欧美日韩无卡精品| 欧美高清性xxxxhd video| www.色视频.com| 中文字幕人妻熟人妻熟丝袜美| 日韩欧美三级三区| 久久这里有精品视频免费| 激情 狠狠 欧美| 欧美+日韩+精品| 女人十人毛片免费观看3o分钟| 在线观看66精品国产| 男插女下体视频免费在线播放| 国内精品美女久久久久久| 亚洲欧美中文字幕日韩二区| 久久99精品国语久久久| 高清毛片免费看| 亚洲av.av天堂| 久久人妻av系列| 亚洲熟妇中文字幕五十中出| 18+在线观看网站| 综合色丁香网| 亚洲av二区三区四区| 最近手机中文字幕大全| 久久热精品热| 久久精品国产99精品国产亚洲性色| 精华霜和精华液先用哪个| 欧美另类亚洲清纯唯美| www.色视频.com| 亚洲人成网站高清观看| 亚洲无线在线观看| 国产探花极品一区二区| 免费人成视频x8x8入口观看| 全区人妻精品视频| 在线免费十八禁| 波多野结衣高清无吗| 干丝袜人妻中文字幕| 99久久无色码亚洲精品果冻| av在线天堂中文字幕| 日韩大尺度精品在线看网址| 婷婷六月久久综合丁香| 久久久久久久亚洲中文字幕| 亚洲无线在线观看| 亚洲最大成人中文| 久久久久九九精品影院| 日韩一本色道免费dvd| 夜夜夜夜夜久久久久| 看非洲黑人一级黄片| 精品人妻一区二区三区麻豆| 精品久久国产蜜桃| 久久久久国产网址| 春色校园在线视频观看| 欧美又色又爽又黄视频| 国产精品蜜桃在线观看 | 男人的好看免费观看在线视频| 边亲边吃奶的免费视频| 免费看av在线观看网站| 99久久精品热视频| 一级毛片aaaaaa免费看小| 一级二级三级毛片免费看| 老熟妇乱子伦视频在线观看| 国产精华一区二区三区| 日日啪夜夜撸| 亚洲av电影不卡..在线观看| 亚洲一级一片aⅴ在线观看| 国产av麻豆久久久久久久| 国产精品女同一区二区软件| av天堂中文字幕网| 国产精品久久久久久精品电影小说 | 亚洲精品亚洲一区二区| 免费看日本二区| 日韩欧美一区二区三区在线观看| 成人综合一区亚洲| 免费观看人在逋| 亚洲经典国产精华液单| 国产亚洲精品久久久com| 国产精品综合久久久久久久免费| 又爽又黄无遮挡网站| 菩萨蛮人人尽说江南好唐韦庄 | 不卡视频在线观看欧美| 日韩欧美精品免费久久| 2022亚洲国产成人精品| 国产av一区在线观看免费| 国产一区二区在线av高清观看| 国产免费男女视频| 亚洲欧美清纯卡通| 自拍偷自拍亚洲精品老妇| 日本在线视频免费播放| 久久久久久国产a免费观看| 日韩国内少妇激情av| 毛片女人毛片| 亚洲欧美精品专区久久| 中文在线观看免费www的网站| 色综合站精品国产| 看十八女毛片水多多多| 熟女人妻精品中文字幕| eeuss影院久久| 国产成人精品一,二区 | 插逼视频在线观看| 日韩 亚洲 欧美在线| 国产一区二区在线观看日韩| 成人综合一区亚洲| 嫩草影院新地址| 精品熟女少妇av免费看| 国产69精品久久久久777片| 久久婷婷人人爽人人干人人爱| 99精品在免费线老司机午夜| 日本爱情动作片www.在线观看| 亚洲人成网站在线播放欧美日韩| 午夜激情欧美在线| 精品国产三级普通话版| 精品国内亚洲2022精品成人| 最近中文字幕高清免费大全6| 久久精品91蜜桃| a级毛色黄片| 日日撸夜夜添| 精品国内亚洲2022精品成人| 免费搜索国产男女视频| 此物有八面人人有两片| 亚洲天堂国产精品一区在线| 我要搜黄色片| 永久网站在线| 久久久国产成人精品二区| 日日撸夜夜添| 免费av观看视频| 免费人成视频x8x8入口观看| 一区二区三区高清视频在线| 老司机福利观看| 国产亚洲91精品色在线| 久久鲁丝午夜福利片| 久久午夜亚洲精品久久| 国产午夜精品久久久久久一区二区三区| 一本精品99久久精品77| 乱人视频在线观看| 高清午夜精品一区二区三区 | 99久久精品热视频| 久久久欧美国产精品| 成人无遮挡网站| 亚洲精品自拍成人| 日本在线视频免费播放| 日韩强制内射视频| 亚洲国产高清在线一区二区三| 成年免费大片在线观看| 99久久中文字幕三级久久日本| 亚洲性久久影院| 亚洲最大成人手机在线| 色噜噜av男人的天堂激情| 欧美最黄视频在线播放免费| 色播亚洲综合网| 欧美+亚洲+日韩+国产| 久久久久久久久久久丰满| 日韩强制内射视频| 美女脱内裤让男人舔精品视频 | 久久热精品热| 直男gayav资源| or卡值多少钱| 永久网站在线| 人妻久久中文字幕网| 亚洲国产欧美人成| 变态另类成人亚洲欧美熟女| 欧美3d第一页| 国产成年人精品一区二区| 天天一区二区日本电影三级| 国产成人aa在线观看| 精品一区二区免费观看| 久久久欧美国产精品| 一级毛片我不卡| 日本色播在线视频| 精品国内亚洲2022精品成人| 国产成人a∨麻豆精品| 亚洲精品日韩在线中文字幕 | 舔av片在线| 免费观看在线日韩| 国产一级毛片在线| 久久久久久久午夜电影| 波野结衣二区三区在线| 亚洲成a人片在线一区二区| 美女黄网站色视频| 婷婷亚洲欧美| 99热全是精品| 97超视频在线观看视频| 成人高潮视频无遮挡免费网站| 久99久视频精品免费| 免费av毛片视频| 搞女人的毛片| 乱系列少妇在线播放| 国产精品一及| 亚洲在久久综合| 亚洲国产精品成人久久小说 | 美女被艹到高潮喷水动态| 插阴视频在线观看视频|