• <track id="oztn4"></track>
    <sup id="oztn4"><form id="oztn4"></form></sup>
    
    
    <mark id="oztn4"></mark>
  • <dfn id="oztn4"><samp id="oztn4"></samp></dfn>
      《地爆天星小姐》电影 ,麦子交换2免费观看2023年上映时间表 ,莫妮卡《爱我几何》,大牛影库战狼6欧式少女全部视频,三年大片国语版在线看,日本空姐电视剧,电影魔镜号中文字幕,和部长一起去出差旅是第几集
      全球「AI學術頂會」精華匯聚地
      您正在使用IE低版瀏覽器,為了您的雷峰網賬號安全和更好的產品體驗,強烈建議使用更快更安全的瀏覽器
      此為臨時鏈接,僅用于文章預覽,將在時失效
      人工智能 正文
      發私信給陳圳
      發送

      1

      【重磅】人工智能長篇報告:1.5萬字告訴你AI的應用究竟對人類社會經濟有哪些影響

      本文作者: 陳圳 2016-10-08 15:08
      導語:本文為2016年7月7日由白宮和紐約大學信息法律協會聯合舉辦的“AI Now”人工智能研討會內容之總結。

      雷鋒網按:本報告為2016年7月7日由白宮和紐約大學信息法律協會聯合舉辦的“AI Now”人工智能研討會內容之總結。文章來源 The AI Now Report, 中文全文由 網易智能 豬廠智能菌獨家編譯,雷鋒網已獲授權轉載。

      AI Now與會人員有微軟研究院、紐約大學的凱特·克勞福德(Kate Crawford)、谷歌開放資源研究與安全團隊創始人梅雷迪思·惠特克(Meredith Whittaker)等,完整名單見文末。

       前  言  

      人工智能(Artificial Intelligence,簡稱AI)是一系列技術的集合,其下包括機器學習、推理、感知和自然語言處理等。人工智能的概念和應用65年前就已開始,不過最近AI的進步和應用讓這種技術再次成為熱議。隨著AI被更廣闊地應用到人類社會和經濟生活各個方面,新的機遇和挑戰隨之而生。其巨大的潛在影響讓人類不得不謹慎思考AI技術的發展與應用。

      于今年7月舉行的“AI Now”研討會是由白宮科技政策辦公室和美國國家經濟委員會聯合推動的一系列研究的最后一個環節。此前的一系列研究分別從不同的角度對AI進行了分析研究,從政策法規到AI的安全控制,再到AI公益以及如何挖掘AI的更多潛能。

      這次“AI Now”則主要就未來十年AI在社會和經濟領域的影響進行討論。來自全球多個領域的專家學者集聚一堂,發表自己的觀點。討論的問題包括:現階段AI的迅速發展造成了哪些問題?如何更好地理解與使用AI來創造更公平公正的未來?

      社會和經濟的問題多不勝數,本次“AI Now”主要圍繞“醫療”、“勞工就業”、“AI公平”以及“AI道德”準則展開討論。

      之所以選擇“醫療”和“勞工就業”作為主要話題,是因為目前這兩個領域中AI滲入廣泛,AI所能帶來的問題在這兩個領域中較為突出和明顯。而“AI公平”和“AI道德”則是未來大家都關注的問題:AI會有助于世界大同還是會加劇社會不公?以及如何確保AI的利益被全體人類享用?

      該研討會的舉行旨在讓AI能夠更好地造福人類社會。通過眾多專家學者聚集一堂進行討論的方式,本次“AI Now”研討會對人工智能學界內外都具有顯著意義。

      問題和建議  

      研討會對未來AI所可能造成的情況做出了預見,并分別給出相應的建議。需要聲明的是,下列建議融合了全體與會人員的智慧,并不代表個人或某組織的立場。

      隨著AI愈加緊密地被應用到社會經濟生活的方方面面,以下列出的問題和對應的建議可以作為投資者和相關領域從業者在對來的參考指南。

      1、問題:AI的發展和應用有賴于特定的基礎設施和人、物資源。這些基礎資源的短缺無疑會限制AI的發展,對這些基礎設施和資源的掌握在AI發展前期變的至關重要。

      建議:從多個渠道改善發展AI的資源基礎。注重數據集、計算機、相關人才教育培訓等配套領域的建設。

      2、問題:雖然目前AI水平還在初級,不過在多個領域AI已經作為人工輔助的角色存在,并且對勞動關系產生了影響。奧巴馬經濟顧問委員會的主席杰森·弗曼(Jason Furman)就表示,低技術的體力勞動是最有可能被AI和自動化機械取而代之的職位。如果機器人開始和人類競爭工作,人力資源的分配也將迎來變革。

      建議:更新自己的思維和技能,來應對AI參與所帶來的就業結構的改變。未來AI機器將承擔絕大多數低技術水平的工作職位,人們需要調整自己的技能儲備和收支方向以應對新形勢。

      3、問題:AI和自動化的過程通常都是在人們目所不及的幕后進行。缺少了人類的參與,機器可能做出有失公允或不慎恰當的決定。隨著AI應用的進一步增長,對AI判斷和勘誤將變得更加重要,也更加困難。

      建議:支持AI校準和勘誤的研究,AI錯誤危害評估程序也應提上日程。這些研究應和AI的突飛猛進配套發展,就像人類系統中司法之于行政。如此能夠及時發現AI犯下的錯誤,并避免嚴重后果。

      4、問題:針對AI模式下公私機構公平和問責制的研究似乎與當前美國一些法律相忤,比如計算機欺詐與濫用法案(CFAA)和數字千年版權法案(DMCA)。

      建議:需要澄清的是,無論是計算機欺詐與濫用法案還是數字千年版權法案,都沒有限制相關研究。

      5、問題:盡管AI正以飛快的速度被運用在醫療、勞工等諸多領域,但目前人類沒有一個公認的辦法來在評估AI所帶來的影響。

      建議:支持AI影響評估系統的研究。而且該領域的研究應該和政府機構通力合作,使成果能為政府行政所用。

      6、問題:那些因部署AI而權益受到損害的人,其聲音往往被忽視。

      建議:在打造AI系統的時候,受影響者的意見應該被聽取。AI應由各方共同設計以免有失公允和太過激進。

      7、問題:AI的研究主要集中在電子技術上,對于人性方面問題的關注常常不足。在未來,計算機科學領域的成員將益加呈現同質化和單一化對特點,這不利于AI開發者的眼界和經驗,進而影響到AI產品的打造。

      建議:AI研究員和開發者應該盡量多元化,開發人員的多樣與多元也會帶來更豐富紛呈的AI產品。未來AI領域應該多多支持跨學科研究,從而使得AI系統能夠融合電子計算、社會科學以及人文氣息。

      8、問題:現有的道德準則已經不能應對AI在現實中所面臨問題的復雜性。(比如在醫療、執法、犯罪判決以及勞務等等)同時,在大學里的計算機課堂上,盡管這些理工課程也逐漸開始重視道德教育,然而并未徹底貫徹到實踐中。

      建議:同美國人工智能協會(AAAI)、美國計算機協會(ACM)以及電器和電子工程師協會(IEEE)這些專業機構進行合作,推動產生可以面對新形勢的道德準則。同時在學校課堂上貫徹落實這些新道德準則的教育。每個有志于計算機科學的學生在專業課之外也應接受公民權利、自由等道德教育。相應的,那些有AI滲入的領域(比如醫療場所)的從業人員也應該對這些新道德標準有所知悉。

      目前關于人工智能的四個關鍵性問題    

      我們現在將對目前關于人工智能的四個關鍵問題進行深入探討,為讀者提供一個了解業內專家見解以及建議的機會。相關探討包括每個關鍵問題所面臨的挑戰、機遇以及可采用的干預措施。

      1. 社會不公  

      人工智能系統如何造成偏見以及歧視等社會不公現象?

      人工智能系統在高風險決策領域的作用越來越重要——從信貸、保險再到第三方決策以及假釋問題。人工智能技術將代替人工決定誰會獲得重要機遇,而誰又將被拋棄,由此將會引發一系列關于權利、自由以及社會公正問題。

      有些人認為人工智能系統的應用有助于克服人類主觀偏見帶來的一系列問題,而有些人則擔心人工智能系統將會放大這些偏見,反而會進一步擴大機會的不均等。

      在這場討論中,數據將會起到至關重要的作用,引發人們的強烈關注。人工智能系統的運行往往取決于其所獲得的數據,也是這些數據的直觀反映。其中也包括這些數據的來源以及收集過程中的偏差。從這方面來講,關于人工智能的影響是與相應的大數據技術密切相關的。

      從廣義上講,數據偏差有兩種形式。第一種是采集的數據客觀上不能夠準確反映現實情況(主要歸因于測量方法的不準確;數據采集不完整或過于片面;非標準化的自我評價以及數據采集過程中的其他缺陷)。第二種在數據采集的過程中主觀上存在結構性偏差(諸如在關于職業數據的采集中有目的性地通過主觀性的重男輕女來預測職場成功率)。

      前一種的數據偏差可以通過“凈化數據”或者改進數據采集過程來加以解決。但后一種則需要復雜的人工干預措施。值得注意的是,雖然有很多機構都為解決這種問題做了大量的工作,但對于如何“檢測”數據偏差尚無定論。

      當采集的數據存在上述偏差時,用這種數據所訓練的人工智能系統也會存在相應偏差,其產生的模型或者結果不肯避免的會復制并放大這種偏差。在這種情況下,人工智能系統所作出的決策將會產生差別效應,從而引發社會不公。而這種不公平要比人為偏見和不公隱晦的多。

      在以風險控制為主導的行業中,隨著人工智能系統的廣泛應用,導致人與人之間的細微差別異化對待等現象顯著增加,在保險以及其他社會擔保行業尤為如此。人工智能系統的應用能夠使公司更加有效地通過“逆向選擇”來識別特定群體以及個人,從而有效避免風險。

      諸如在醫療保險領域,人工智能系統會對投保人的特征以及表現行為進行分析,并對那些被識別為特殊疾病或者是未來發病率高的投保人收取更多保費。在這種情況下,對于那些健康狀況不佳且經濟能力差的人群尤為不利。這就是為何批評者經常會指責稱,即便人工智能系統的預測準確,保險人行為理性,但效果卻常常是帶來負面影響。

      保險業的競爭或許會加劇這種發展趨勢,最終人工智能系統的應用或許會加劇這種不平等性。當然,相關反歧視法律法規中的規范性原則能夠為解決這些問題帶來幫助,雖然這種方法可能不是最有效、最公平的。

      此外,對人工智能系統進行設計和部署也很重要,但現有的法律框架或許會使相應研究受到阻礙。諸如如計算機欺詐和濫用法(CFAA)和數字千年版權法案(DMCA)都對這方面研究進行了限制,因此當下也需要對現行法規進行改革,確保必要的研究能夠順利進行。

      人工智能將受益少數人?

      人工智能系統為經濟價值的產生帶來了新的方式,也對經濟價值的分配產生了新的影響。在某種程度上,人工智能系統的價值分配會使一部分群體受益,從而延續或加劇現有的薪資、收入以及財富分配差距。

      那些有能力研發人工智能技術的組織將會加劇這種不平等性。據預測,人工智能是一個每年市值達到數十億美元的龐大產業。開發人工智能技術需要大量的前期投資,其中包括海量的計算資源以及大數據,兩者的成本都非常之大。

      這導致人工智能的開發和應用被限制在一個特定的范圍之內。在這種情況下,那些擁有強大數據以及計算能力的企業才能夠通過人工智能系統深入了解市場動態,從而獲取更多優勢,為自己帶來“富者更富”的馬太效應,帶來更多成功。

      從另一方面來說,人工智能以及自動化系統能夠降低商品和服務成本,如果這些降低的成本能夠使消費者受益,那么人工智能就可以縮小貧富差距。在這種情況下,人工智能系統能夠提高整個社會的生活水平,甚至于引發一個漸進式的再分配效應。

      此外,人工智能也會帶來全新的生活方式。在人工智能環境下,那些工作落伍的人有機會需求獲取資源的新方式,而工作受到影響的人也能夠通過人工智能創造新的就業機會。換而言之,人工智能能夠緩解勞動力危機,讓人們自由追求生活以及工作新方式,從而提高社會的整體福利。

      盡管如此,一些評論家指出,人工智能系統會使得某些工人的技能多余化,那些被自動化所取代的工人不得不尋求新的就業機會。即便這部分工人能夠找到新的工作,這種工作也常常是低附加值的,且工作穩定性更低。從這個角度將,人工智能以及自動化系統反而消除了就業機會。

      更進一步,如果學習新的工作技能非常昂貴,工人們或許會認為這種職業技能培訓與新工作并不成正比。在這種情況下,人工智能系統不僅會增加社會不公,更會帶來永久性的失業以及貧窮。這就是為何理解人工智能系統對勞動力的潛在影響是理解其對經濟平等性影響的重要方面。

      和以往許多技術一樣,人工智能技術也往往反映了其創建者的價值觀。因此,也可以通過在人工智能開發、部署、維護階段的多元化來推動人工智能技術的平等性。

      當前,在人工智能甚至于整個計算機科學家技術行業,女性以及少數民族從業人員所占比例還很少。這種現狀也在一定程度上導致整個技術缺乏包容性,導致一定的偏見,延續或限制相關從業者對其他群體的考慮。

      人們也越來越清楚的認識到,人工智能領域從業者的多樣性有助于人工智能系統滿足不同人群的利益。為了解決偏見、歧視和不平等問題,人工智能團隊需要一個更廣泛的視角。

       2.  勞工關系   

      目前有關就業和AI系統的討論往往都集中在對人們未來將會失業的擔憂上。最新的研究表明,還存在更加復雜、影響更加直接的問題,這些問題不僅僅影響勞工市場,還影響雇主與雇員之間的關系、權力動力學、職業責任和工作在人類生活中的角色。

      許多傳統經濟研究人員正在密切追蹤美國國內勞工市場和企業機構,以此來考量AI系統的影響。這類研究可帶來非常重要的定性數據,能夠促進對宏觀經濟趨勢和勞工供需狀況的理解,比如未來將會有多少工作崗位。

      與此同時,社會科學研究則評估工作屬性和工作動力的改變正在如何改變人們的日常生活體驗。這兩個研究視角對于衡量AI系統短期對勞動力的社會影響和經濟影響都必不可少。

      AI會影響工作崗位需求嗎?

      自動化技術在經濟中的角色遠非新議題,事實上對于AI系統影響的考慮是出現于長期以來的討論。

      雖然表面來看勞工需求會隨著自動化技術的日益普及而下降,畢竟需要做的工作將會很有限,但也有經濟學家并不這么認為,他們稱該觀點是“勞動合成”謬論。他們指出,隨著一個行業的生產力的提升(由于自動化技術或者其它因素),新行業也會誕生,因而會產生新的勞工需求。

      例如,1900年農業在美國勞動力中的占比為41%,到2000年該占比只有2%。兩位勞工經濟學家大衛·奧特爾(David Autor)和大衛·多恩(David Dorn)稱,即便出現這種劇變,失業率長期來看并沒有出現上升,就業人口比率實際上反而出現提升。另外兩位經濟學家詹姆斯·亨廷頓(James Huntington)和卡爾·弗雷(Carl Frey)則給出了可怕的預言:AI系統將會大大減少工作崗位。

      還有人在爭論勞動市場的變化和波動是否與技術進步有關,是否只是因經濟政策而出現。這類看法聚焦于現有的法律體系和監管機制對于AI和自動化系統的發展應該擔當什么樣的角色。例如,羅伯特·戈登(Robert Gordon)認為當前的創新浪潮其實并沒有它們表面上看起來那么具有變革性。

      不少持相反意見的人則稱,勞動市場正因為技術變化而發生重要轉變。這些人包括約瑟夫·斯蒂格利茨(Joseph Stiglitz)和拉里·米歇爾(Larry Mishel),他們認為,要保護勞動力,就必須要對AI和自動化系統相關的監管和其它政策變化上保持高度的重視。

      奧特爾、多恩等經濟學家發現“就業兩極分化”現象正變得非常明顯,即中等技能崗位在減少,而高等技能和低等技能的崗位則在增加。雖然未來可能會出現新的崗位,但它們往往都收入比較低,不受歡迎。

      例如,許多支持AI系統的工作事實上需要由人類去完成,他們需要維護那些基礎設施,照顧系統的“健康狀況”。這種勞動力往往不大顯眼,至少從媒體的報道和人們對AI的印象來看是這樣。因此它往往受到低估。這類工作包括負責清潔辦公室和維護工作的清潔工,負責維修服務器故障的維修工,以及有位記者所說的“數據衛生工”(能夠“清理”數據,為數據分析做好準備)。

      AI系統對勞動力的影響相關的問題應當不僅僅包括未來是否會創造出新崗位,還應當包括那些崗位會否是能維持生計的體面工作。

      此外,有關AI系統和勞工市場未來的討論通常都專注于傳統上被認為是低收入的工人階級崗位,如制造業、卡車運輸、零售或者服務工作,但研究表明,未來各行各業都將受到影響,其中包括需要專業訓練或者高學歷的專業工作,如放射學或者法律。關于這一點,未來將需要解決職業責任和義務方面的新問題。

      AI將會如何影響主雇關系?

      近年來,研究人員開始研究依靠大數據的AI和自動化系統(從Uber到應用于大型零售商的自動化調度軟件,再到工作間監視)正在如何改變雇主與雇員之間的關系。

      研究發現,雖然這類系統可以用來賦能員工,但該類技術也可能會引發大問題,如剝奪員工權利,加劇就業歧視問題,以及催生不當勞動行為。

      例如,AI驅動的勞動力管理和調度系統正越來越多地被用來管理勞動力,助力按需經濟的增長和“朝不保夕族”(precariat)的崛起。雖然部分研究人員稱恰當的調度能夠帶來很有價值的彈性,但到目前為止,更多的研究發現受該類系統管制的員工存在情緒緊張和缺乏安全感問題。

      由這類系統管理的員工的不利體驗包括長期不充分就業,財務狀況不穩定,缺少傳統全職員工能夠獲得的福利保障,無力為家庭或者自我照顧(又或者因為忍受不了該類工作往往要求的隨時待命性質而尋找別的工作)做規劃。此外,受這些問題影響的員工更多是女性和少數族裔。

      另外,基于AI系統的新遠程管理模式會加大將“系統”所做的嚴重影響員工的決策歸責于雇主的難度。因此,員工更容易受到剝削。

      例如,像Uber這樣的由大數據和AI驅動的平臺會遠程控制行駛路線、定價、報酬甚至人際交流方面的標準——這些決定傳統上說通常都有人工親自管理。

      除了模糊化特定決策的性質和邏輯之外,這類遠程管理通常并不被認為是“雇員管理”。

      由于這些新管理模式不大符合現有的監管模式,像Uber這樣的公司會將自己標榜為技術公司,而非雇員的管理者。按照這一理念,這類公司將自己視作促進連接的平臺,因此不會像傳統雇主那樣對雇員負責。依照這種模式,雇員最終要承擔權益保障(如減輕稅項負擔、醫療保健和其它的勞工保障)和潛在救濟模式的就業帶來的風險。

      3.  醫療健康  

      像我們現在所看到的大多數已被應用到醫療健康領域的AI系統,它們幾乎都依賴于大型數據庫,這些AI系統會通過各種復雜的統計模型和機器學習技術,從其所收集到的海量數據中,自動提煉出各種重要信息。

      那些已投入使用的醫療數據信息源(仍處在不斷增長當中)——包括電子病歷(EHRs)、臨床和醫保數據庫、從各類消費電子產品和App上傳來的健康數據——目前已經被大量地應用到AI系統的實踐,這些AI系統具有極大的能改善社會醫保水平的潛力。

      無論是臨床診斷、病人護理,還是施藥;無論是藥品生產、組織管理,還是醫保信息交互,這些AI系統都為醫療從業者的工作起到了極大的助力。

      AI是如何被融入到醫學研究和醫療健康的?

      將AI系統融入到醫學研究,具有令人極為欣喜的應用前景,它能幫助我們更好地理解那些疾病的病理,幫助我們開發出更多的新式治療手段,實現更為精準的醫學診斷,甚至還能私人訂制地為個人生產出特制的藥品。

      然而,鑒于目前仍存在的將AI應用到醫療領域的局限和偏見,它們或將阻礙這些應用前景的實現,而這就需要研究人員更為細心謹慎地去探索這一前沿的技術。

      目前,這些將AI技術應用到醫療領域的局限,包括有不完整或不準確的研究數據,即未含蓋到特定的少數群體,除此之外,尤以美國醫保系統為代表的復雜醫療補貼激勵制度,也將在一定程度上阻礙到了AI醫療技術的應用。舉個簡單的例子,目前的一些醫療補貼制度會更支持個別種類的藥物研發,或是更傾向于補貼個別治療方案。

      醫療研究數據時常會表現出客觀、通用的屬性,但在實際應用的過程中,這些研究結論往往會表現出片面、暫時和只針對某些團體或病癥的特性,而AI系統根據這些“片面”數據所分析和建立出的模型,可能會引出、建立或是衍生出一些錯誤的猜測。

      所幸的是,這樣的錯誤情況是可以避免的。如果一個AI系統所收集的數據不存在上面我們所提到的那些瑕疵(假設這點是可以被保證的),或是該AI系統所使用的數據框架像隨機對照試驗方法(randomized control trials, RCTs)或是其它公共醫療數據庫那樣,具有自行矯正這些問題的能力,能減小其內在錯誤偏差的話,它就能有效地避免重大誤差的出現。

      假設這些誤差微小到可被忽略,將AI系統融入到醫療健康研究和臨床實踐中心的一個最有可能實現的應用前景,是讓AI去協助醫生進行病癥診斷,從海量數據中發現規律性的模式,從而幫助醫生更早地揪出那些藏匿在身體深處的“狡猾”病灶。

      事實上,AI系統目前已經可以完成對部分病癥的診斷了,這其中就包括了白血病。在檢查和臨床護理環節,AI系統在一些情況下,也有幾率能減少,甚至預防誤診情況的出現。須知,誤診是可以致命的,AI輔助診斷技術的價值之高,可想而知。

      在這方面,AI系統在診斷和確立病癥的環節上,正扮演越來越重要的角色。然而,也正是因為如此,研究人員必須警惕,要避免出現因AI錯誤猜測,而推斷出“正?!被蚴恰捌骄钡冉】禒顩r描述的情況的發生。

      類似的,我們只需要回顧一下美國在1973年前的那段歷史,就想象出當AI出現誤診時,會發生什么樣慘劇。彼時,美國精神病學協會(American Psychiatric Association)將同性戀作為一種精神疾病列入到了它權威的精神病診斷和統計手冊當中,這樣一來,悲劇的出現就不可避免了。

      同樣的,當AI系統被直接地應用到病人護理時,它們將涉足到診斷和臨床管理的方方面面,而這也時常將隔開看護者同病人之間的距離,所以,適當地明確出AI“專業程度”的局限,是非常重要的。

      一名人類外科醫生在上崗之前,會先上醫科大學,在經歷過層層嚴苛的考核后,他們的醫術才能獲得世人的承認,然而,我們要如何造出一個出色的AI大夫來協助,或者甚至是取代一個有“文憑”的人類名醫呢?

      這樣一個AI醫療系統意味著它需要具有絕對準確的專家級權威水平,不會出現誤診或是診斷偏頗的情況。這種級別的信任代表著這些AI系統無論是在出廠的能力評估上,還是在檢測其極限能力上,都可以接受更少的審查,而這也將制造出那些,目前還未被醫學倫理框架所囊括的新型倫理問題。

      除此之外,我們還需要關注類似于這樣的AI醫療系統在醫保領域內被布置于何處,使誰受益等等這樣的問題。盡管讓醫療健康惠及所有人,讓大家都能負擔得起確實是一種需求,但已有大量的證據表明,取得醫保和健康數據的權限并未被公平地分配,在多數情況下,窮人、非白人和女性群體常常處于劣勢地位。

      讓AI系統融入到醫保體系,非但不會根除這些系統性的不平等問題,反而還有可能會放大這種問題的嚴重性。雖然AI系統可以實現合適的定制化醫療護理,讓各式各樣的人都獲益,但它也可以被故意培養成過濾掉那些之前就常常被忽視、被服務不周的外圍群體。

      如果這些群體沒有被給予適當的考慮的話,這反過來也將影響到AI系統所構建出的預測模型。AI預測模型會被那些能用上這種AI系統的特權群體所上傳的健康數據所不斷的固化,從而只能有效反饋出富人的“健康狀況”,并最終構建出一個會完全排斥“邊緣人群”的健康與疾病的整體認知模型。

      鑒于目前美國存在的醫保財政的亂象,這樣的憂患確實是值得人們投入更多關注,就像這樣的亂象在過去影響到醫療技術的整合一樣,它也必然會在未來影響到AI醫療系統的布置和效用,

      基于這樣的考慮,人們在推動AI醫療系統不斷發展的同時,也在不斷努力地去降低AI醫療系統造價,而這也將促使那些利益相關者(比如政客、保險公司、健康機構、制藥企業、雇主和其他人)把他們的注碼,寄托于大規模的健康數據收集和AI系統的研制上,以此來幫助他們更好地維護他們在模型研發和醫保護理上的經濟利益。

      然而,將這些信息技術和AI系統整合到醫院和其它醫療健康體系所需要的關鍵培訓、資源和那些正在進行當中的必要維護,并不總是能夠得到支持,或者說并不總是能處于“不差錢”的狀況。而這種情況其實已經導致了技術資源和技術能力的分配不均。

      訓練AI所需的數據收集和病患觀察將如何影響到個人隱私?

      AI系統對數據量的極度依賴和對病例觀察的需求也自然而然地催生出了對病人隱私、秘密和安全保護等等急迫的問題。

      目前,對AI醫療系統高性能期許的實現依賴于通過各式各樣的設備、平臺和互聯網來源源不斷地獲取到海量的病患數據,而這一過程也不可避免地會涉及到某些人或機構會在利益的驅使下,做出出格的監視行為。、

      與此同時,像同態加密(Homomorphic encryption)、差分隱私(differential privacy)和隨機隱私(stochastic privacy)這樣的技術帶給了我們應對這些亂象現象的新的希望,它們可以讓AI系統實現在不“查閱”數據的情況下,直接地去“調用”它們。

      雖然就目前來說,這些新技術仍處于研發的初步階段,連一個通用應用程序都還沒有被開發出來,但它展現出能令人鼓舞的應用前景。

      除此之外,隨著近期美國政府對循證醫學(Evidence ?based medicine)的推廣和《平價醫保法案》(Affordable Care Act)已由原先的按服務收費轉變至按治療行為收費的這一變化,監管行為背后所涉及到的經濟利益問題和對敏感健康數據消費的問題,都在不斷地加劇惡化當中。

      至于那些保險公司,在AI系統入局的情況下,其所需面對的對驗證交叉補貼方案合理性的呼聲的壓力也在與日俱增。

      舉個例子,盡管美國政府在2008年就頒布了《基因資訊平等法》(Genetic Information Nondiscrimination Act),但出于對保險分層管理的需求,保險公司對能獲取到遺傳危險率信息的興趣也在日益增長。事實上,差別定價目前已經成為了數據分析供應商的一項業內通用做法,而這反過來也進一步地鞏固和加劇了目前的不平等現象。

      此外,“智能設備”和其它能讓AI系統獲取到所需數據的聯網傳感器也已讓追蹤和監視變得無處不在,而這也將目前的那些隱私保護政策的覆蓋范圍不斷地拓寬,像《醫療健康可攜性和責任法案》(Health Insurance Portability and Accountability Act)就是在這一考慮下的產物。

      隨著AI系統被越來越多地融入到健康和電子消費產品上,病人因細分數據而被重新定義,或是由代理數據來預測出他們的身份、所患疾病和其它健康信息的風險,正不斷地升高。

      除此之外,那些驅動這些數據收集設備的軟件也常常是為私人所持有,而不是開源的(不受外部審查審計的約束)。雖然,美國政府最近簽署的法令對《數字千禧年著作權法案》(Digital Millennium Copyright Act)中的相關條例進行了免除,讓審查外部醫療設施的代碼成為可能,但更為重要的或許是審查那些內部醫療設施,然而這種行為并未被這一豁免權所囊括到。

      總的來說,相關業內專家們都已經對在物聯網設備上,布置聯網技術所潛在的重大安全隱患做過警告了,在這些警告中,有很多就是專門針對醫療設備安全問題的。

      AI將如何影響患者和醫療保險供應商?

      那些已被實現或是有望被實現的AI技術,對健康護理系統的構建有著深遠的意義,對需要照顧的病患,或是那些虛弱體質的人也意義非凡。

      人們對于AI系統,進行了許多美好的構想,寄予它們護理工作調解員的角色,并相信它們在未來有可能完全取締了護工的工作。這一轉變前景樂觀、經濟,且高效,很可能會改善患者與醫生或其他護工之間的關系和他們的工作方式。

      能展示AI系統具有代替或者協助人工護理工作的潛力的例子非常之多,包括有機器人外科醫生、虛擬管家和陪護機器人等等。這些例子逐漸引發了一些爭論,比如代理照顧和陪同護理的社會意義是否可以讓非人類的機器來代替?

      當機器替代人工時,它是否能不僅僅只是增強人工的專業性,而能做到真正的獨當一面呢?當我們認為一臺機器有能力“護理”病人時,它具備了哪些“護理”能力呢?我們又是如何定義“護理”這個詞呢?這些我們以為的“以為”是否是站在病人權益的角度上,去考慮的呢?

      就目前來說,雖然陪護機器人在取代人工護理工作上,還未取得什么明顯的效果, 但由AI驅動的APP和聯網設備能讓病人取回對自己健康管理的控制權的前景正在與日俱增,而這也預示著AI醫療系統同病人的直接交互,正處于早期發展階段。。

      這種人與AI的直接交互其實也是一把雙刃劍。一方面,它能讓病人康復地更快、對自身病情有更多的了解。另一方面,這種變革也需要他們擔負更多的風險。這些風險包括它可能會誤導病患,影響他們可能會接收到的信息的質量和準確性,而這也是美國聯邦貿易委員會(FTC)在近些年來,所要傳達給我們的擔慮。

      除此之外,這些搭載了AI的APP也可以將原先醫療從業者所需要承擔的責任轉移病人本身,但這對病人來說不見得是什么好消息,因為并不是所有人都有時間、財力和AI技術獲取渠道,來實現對他們自身健康的護理。

      那么,什么樣的患者能優先享受到這些仍在不斷改進當中的AI醫療技術的紅利呢?對于那些“裝備”不良卻想管理和維護自己個人數據的病患來說,他們所接受到的健康看護是否是不合格的呢?

      再者,那些搭載了AI技術的應用的設計者和研發者在這一社會演變過程中,又需要扮演什么新的角色?需要承擔哪些新的責任?

      那些始終處于風口浪尖的醫學道德倫理,又將如何融入到這些與眾不同的,新式工程技術的載體上呢?

      4. 道德責任  

      AI系統的部署不僅將引發新的責任,也將對職業道德、研究道德、甚至公共安全評估等現有領域造成挑戰。

      近來,人們對道德和AI系統的討論傾向于優先考慮很久以后可能會出現的AI系統,例如,“奇點”的來臨,或超級智能的發展。

      也就是說,這種討論往往并未關注AI系統在短期或中期內會產生的道德影響,例如,當前已投入使用的大量任務型AI系統引發了新挑戰、可能加劇不平等、或從根本上改變權利機制。

      當代AI系統上能夠執行各種各樣的活動,這類技術會引發各種隱性和顯性后果,因此可能對傳統倫理框架提出新挑戰。AI系統被部署在人類社會中時或許會引發不可預測的相互作用和后果。

      在資源配置以及讓權力和信息集中或重組的潛力方面,我們迫切需要處理一些關鍵問題來確保AI技術不會造成傷害,特別對于已被邊緣化的群體。

      我們如何向AI授予權力或委派AI展開決策?

      AI系統在社會和經濟領域內的融合需要我們把社會問題轉變為能夠被AI解決的技術問題。這種轉變無法保證AI系統產生的錯誤會少于它將取代的現有系統。瑞安?卡洛(Ryan Calo)指出,人們通常以為,AI系統(如,自主駕駛汽車)犯的錯誤將少于人類。實則不然。復雜程度不高的AI系統無法避免地會犯一些人類不會犯的新錯誤。

      在許多領域中,倫理框架往往需要產生記錄,例如,病歷、律師的案卷、或研究人員向機構審查委員會提交的文件。此外,人們還面向患者、客戶或感覺自己遭遇了不公正待遇的對象設立了補救機制。

      當代的AI系統往往無法提供此類記錄或補救機制,要么因為技術上無法實現,要么因為設計者并未考慮此類記錄或機制。

      這意味著,受到影響的特定群體或個人往往無法對AI或其他預測系統的決策進行檢驗或質疑。這會惡化各種形式的權力不對等現象。而權力不對等是一個很重要的倫理議題。

      當受到影響的個人無法對這類自動化決策展開檢驗、質疑或上訴時,他們就處在了權力相對缺失的位置上。

      這帶來的風險是,AI系統不僅將削弱弱勢群體的質疑權力,而且將賦予設計方更多定義道德行為的權力。這種權力能夠以十分微妙的形式呈現出來。例如,各種自動化系統往往被用來從某種方向來影響或“微調”某些個體,而很大程度上扮演決定或支配角色的是設計部署此類系統并從中獲利的一方。

      若要從零開始構建AI系統,以實現糾正上述不平衡現象等目標,這本身就要受到實力差距的限制。打造和維護AI系統需要大量的計算資源和大量數據。而擁有海量數據和計算資源的企業相對缺乏這類資源的企業擁有更多的戰略優勢。

      我們如何在現有的各種行業中應對與AI相關的倫理問題?

      隨著AI系統在不同行業環境(如,醫學、法律、金融)中的融入愈加深入,我們還將面臨跨越不同行業的新的道德困境。

      例如,AI系統在保健環境中的應用將對醫療專業人員道德準則中秉持的核心價值(如,涉及保密、護理的連續性、避免利益沖突以及知情權)造成挑戰。

      隨著醫療業的不同利益相關方推出了各種各樣的AI產品和服務。對這些核心價值的挑戰可能會以全新的和意想不到的方式呈現。

      當一名醫生使用的AI診斷設備在受訓時使用了一家醫藥公司的藥品試驗數據,而這家公司是某種藥物處方的既得利益者,那么這位醫生應如何遵守避免利益沖突的誓言?

      雖然這是個假想的情況,但這點明了在修訂以及更新職業道德準則的過程中必須解決的棘手問題。

      同樣地,負責管理AI研發及維護的專業協會也有必要考慮采取相應的措施。例如,美國人工智能協會(AAAI)應制定相關的道德準則,而美國計算機協會(ACM)以及電氣和電子工程師協會(IEEE)需認真修訂相關的道德準則。

      ACM和IEEE現有的道德準則已擁有20年以上的歷史,不用說,這些準則不僅無法解決與人類機構、隱私和安全相關的核心問題,而且也無法預防AI和其他自動化決策系統可能產生的危害。隨著AI技術進一步被整合到重要的社會領域中,這一點正變得越來越重要。

      盡管更多的高等教育機構在技術和科學專業的教學中已開始強調職業道德的重要性,但這番努力仍處在初期,還有進一步的拓展空間。而民權、公民自由和道德實踐等領域的知識還未成為學生們畢業時必須掌握的要求范圍。此外,有一點是值得注意的,若有人違背醫藥界道德準則,他需承擔的懲罰包括失去行醫權力,這一點并不適用計算機科學或許多其他相關領域。

      目前還不清楚大多數計算機科學家是否熟知ACM或IEEE準則中的核心內容。我們也不清楚,企業雇主是否會因為其他鼓勵或壓力因素而選擇不遵守這種不具約束力的法規。因此,從實用角度看,除了僅僅對倫理框架進行改寫和更新外,有必要關注范圍更廣的鼓勵機制,并確保對倫理準則的遵從并不是事后才想起的事項,而是相關專業領域需要關注的核心問題,以及AI領域學習和實踐中不可或缺的組成部分。

      闡述建議  

      下面我們將進一步闡述上面簡要提到的建議背后的基本原理。

      1、多元化和拓寬AI開發和部署所必需的資源——如數據集、計算資源、教育和培訓的使用,包括擴大參與這種開發的機會。特別是關注當前缺乏這種訪問的人口。

      正如在AI Now Experts研討會期間很多人提到的,這些開發和培訓AI系統的方法費用高昂并只限于少數大公司?;蛘吆唵蔚卣f,在沒有大量資源的情況下DIY AI是不可能的。培訓用AI模式要求有大量數據——越多越好。同時還要求有巨大的計算能力,而這費用不菲。

      這使得即使要進行基礎研究都只能限于能支付這種使用費用的公司,因此限制了民主化開發AI系統服務于不同人群目標的可能性。投資基本的基礎設施和使用合適的培訓數據,有助于公平競爭。同樣,開放現有行業和機構里開發和設計過程,以多元化內部紀律和外部評論,可幫助開發更好服務和反映多元化環境需求的AI系統。

      2、升級使公平勞動行為具體化的定義和框架,以適應AI管理部署到工作地時出現的結構性變化。同時研究可替代的收入和資源分布、教育和再培訓模式,以適應未來重復性工作日益自動化和勞動及就業態勢不斷變化。

      在AI Now Experts研討會上,奧巴馬總統首席經濟學家賈森·福爾曼(Jason Furman)指出,在美國每小時工資只有不到20美元的工作,83%都將面臨自動化的嚴重壓力。對于每小時工資在20-40美元的中等收入工作,這個比例也高達31%。

      這是勞動力市場一次巨大轉變,可能導致出現一個永久失業階層。為確保AI系統的效率在勞動力市場不會導致民眾不安,或社會重要機構如教育(有一種可能是教育不再視為就業的更好途徑)的解散,在這種巨大轉變出現,應該徹底研究替代性資源分布方法和其他應對引入自動化的模式,制定的政策應該為組織良好的各種落實測試開路,控制可能導致的災難性后果。

      除了“替代工人”外,AI系統也對勞動力市場也有其他多重影響。例如,它們改變了權力關系、就業預期和工作本身的角色。這些變化已經對工人產生深遠影響,因此在引入AI系統時,在考慮如何表述公平和不公平做法上,理解這些影響很重要。例如,如果開發實際作為管理層行事的AI系統的公司,可被視為科技服務公司,與雇主不同的是,職員可能不受現有法律保護。

      3、在設計和部署階段,支持研究開發衡量和評估AI系統準確性和公平度的方法。同樣地,也支持研究開發衡量及解決一旦使用出現的AI錯誤和損害的方法,包括涉及通知、矯正和減輕這些因AI系統自動決策導致的錯誤和損害的問責制。這些方法應優先通知受自動決策影響的人們,并開發對錯誤或有害判斷提出異議的方法。

      AI和預測性系統日益決定了人們是否能獲得或失去機會。在很多情況下,人們沒有意識到是機器而非人類在做出改變人生的決定。即使他們意識到,也沒有對錯誤界定提出異議或拒絕有害決策的標準流程。我們需要在研究和技術原型化上投資,確保在AI系統日益用于做出重要決策的環境中,確保基本權利和責任受到尊重。

      4、澄清無論是反電腦欺詐和濫用法案還是數字千年版權法案不是用于限制對AI責任的研究。

      為了進行對檢驗、衡量和評估AI系統對公共和私人機構決策的影響所需的研究,特別是有關如公平和歧視的關鍵社會關切,研究人員必須被清楚地允許跨大量域名并通過大量不同方法測試系統。然而,某些美國法律,如反電腦欺詐和濫用法案(CFAA)和數字千年版權法案(DMCA),規定與電腦系統甚至互聯網上公開可訪問的電腦系統“未授權”互動為非法,可能限制或禁止這種研究。這些法律應該澄清或修改,明確允許促進這種重要研究的互動。

      5、支持在現實環境中AI系統對社會經濟生活影響的強大評估和評價方法的基礎性研究。與政府機構合作將這些新技術集成到他們的調查、監管和執法能力中。

      我們當前缺乏對AI系統社會經濟影響評估和理解的嚴格做法。這意味著AI系統在融合到現有社會經濟領域,部署在新產品和環境中,卻不能衡量或精確計算它們的影響。這種情況類似于進行試驗卻不愿記錄結果。為確保AI系統帶來的益處,必須進行協調一致的研究開發嚴格的方法,理解AI系統的影響,當使用這種方法時可幫助形成跨部門和政府內部的標準做法。這種研究及其結果可比作早期預警系統。

      6、在與這些人聯合開發和部署這種系統時,與受自動決策應用和AI系統影響的社區代表及成員合作,聯合設計可問責的AI。

      在很多情況下,這些受AI系統影響的人將是對AI系統環境和結果最權威性的專家。特別是鑒于當前AI領域缺乏多元化,那些受AI系統部署影響的人實際上從事提供反饋和設計方向,來自反饋機制的這些建議可直接影響AI系統的開發和更廣泛的政策框架。

      7、加強行動提高AI開發者和研究者的多元化,拓寬和融合所有觀點、環境和學科背景到AI系統開發中。AI領域應該也結合計算、社會科學和人文學,支持和促進針對AI系統對多個觀點影響的跨學科AI研究。

      計算機科學作為一個學科領域缺乏多樣性。特別是嚴重缺乏女性從業者,在AI里這種情況更為糟糕。例如,雖然有些AI學術實驗室由女性掌管,但在最近的神經信息處理系統大會上,與會者只有13.7%是女性,這次大會是該領域最主要的年度大會之一。

      缺乏多元化的圈子不大可能會考慮這些不在其中人的需求和關注。當這些需求和關注成為部署AI的社會經濟機構的中心時,理解這些需求和關注很重要,AI開發反映了這些重要的觀點。關注開發AI人群多元化是關鍵,除了性別和代表受保護人群外,包括除計算機科學外各種學科的多元化、建立依賴來自相關社會經濟領域學習的專業知識的開發實踐。

      在計算機科學之外和計算機科學之內AI子領域的社會經濟領域,進行AI影響的徹底評估將需要多數這種專業知識。由于很多環境下AI被集成和使用——如醫學、勞動力市場或在線廣告——本身是學習的豐富領域。為真正制定AI影響評估的嚴格流程,我們將需要跨學科的協作,建立新的研究方向和領域。

      8、與專業組織如美國人工智能進步協會(AAAI)、美國計算機協會(ACM)和電氣及電子工程師協會(IEEE)合作,更新(或制作)專業道德準則,更好地反映在社會經濟領域部署AI和自動化系統的復雜性。為任何想掌握計算機科學的人開設公民權、公民自由權和道德培訓課程,反映了教育中的這些變化。同樣,更新專業道德準則約束引入AI系統的專業人士,如適用于醫生和醫院工作者的道德準則。

      在醫學和法律等職業中,專業人士的行為受控制可接受和不可接受行為的道德準則約束。專業組織如ACM和IEEE確實制定了道德準則,然而這些準則過時了,不足以解決復雜社會經濟環境中使用AI系統帶來的具體并常常是微妙的挑戰。雖然醫生確實遵守了約束他們對待病人行為的職業道德,但AI系統的發展,如幫助醫生診療和治療病人,出現了現有職業道德準則不總是能解決的道德挑戰。職業準則和計算機科學培訓必須更新,以反映AI系統建造者對因使用這些系統遭受不同程度不利影響的人所負有的責任。在AI用于增強人類決策時,職業道德準則應該包括在AI系統受到利益沖突左右的時候鑒定責任的保護措施。

      AI Now與會人員名單

      聯合主席:

      凱特·克勞福德(Kate Crawford) 微軟研究院、紐約大學

      梅雷迪思·惠特克(Meredith Whittaker)谷歌開放資源研究與安全團隊創始人

      核心研究團隊:

      瑪德琳·克萊爾·伊莉絲(Madeleine Clare Elish)哥倫比亞大學

      梭倫·巴羅喀斯(Solon Barocas)微軟研究院

      埃倫·普拉塞克(Aaron Plasek)哥倫比亞大學

      卡迪迦·費里曼(Kadija Ferryman)新學院

      程序委員會:

      瑞安·卡洛(Ryan Calo)華盛頓大學

      埃德·菲爾頓(Ed Felten)白宮科技政策辦公室

      埃里克·霍維茨(Eric Horvitz)微軟研究院

      塔拉·里昂(Terah Lyons)白宮科技政策辦公室

      海倫·尼森鮑姆(Helen Nissenbaum)紐約大學

      穆斯塔法·蘇萊曼(Mustafa Suleyman)谷歌DeepMind負責人

      拉坦亞·斯威尼(Latanya Sweeney)哈佛大學

      黃安娜(Nicole Wong)前美國政府CTO

      雷鋒網注:中文全文由網易智能獨家編譯,網易智能為網易科技旗下專注AI、VR/AR等前沿科技領域的內容平臺和社群,服務于人工智能、VR\AR等行業的從業者和關注者。轉載請注明來源、作者及本文鏈接,違者必究。(微信公眾號搜索“豬廠智能菌”并關注,回復“紐約大學報告”或“AI Now”獲取1.5萬字PDF中文版和英文版全部報告。)

      原文鏈接:人工智能長篇報告:1.5萬字告訴你AI的應用究竟對人類社會經濟有哪些影響

      雷峰網原創文章,未經授權禁止轉載。詳情見轉載須知。

      【重磅】人工智能長篇報告:1.5萬字告訴你AI的應用究竟對人類社會經濟有哪些影響

      分享:
      相關文章
      最新文章
      請填寫申請人資料
      姓名
      電話
      郵箱
      微信號
      作品鏈接
      個人簡介
      為了您的賬戶安全,請驗證郵箱
      您的郵箱還未驗證,完成可獲20積分喲!
      請驗證您的郵箱
      立即驗證
      完善賬號信息
      您的賬號已經綁定,現在您可以設置密碼以方便用郵箱登錄
      立即設置 以后再說
      主站蜘蛛池模板: 爱的精灵下载| 电视剧外姓兄弟| 美容院5HD| 饥渴游戏| 哪里逃1VLH| 花谢花开花满天| 美丽教师意大利未删减版在线看| 法国少女农场在线看| 圣斗士星矢黄金魂| 这么多年免费观看完整版| 《瑜伽的狂热》动漫在线观看 | 酒店1-50集| 流浪汉电影| 空间逆袭全集免费| 你是迟来的欢喜免费观看| 大力女子都奉顺| 理发店里的特殊待遇电影| 魔装学园合集| 女人当官第一部免费观看| 电影美容院的待遇5| 大剑在线观看免费全集高清版| 《法国空乘10》成人版| 戏说慈禧电视剧| 韩剧想你国语版| 快递员的特殊待遇2| 王牌对王牌第六季免费观看| 昼颜电影完整版高清免费在线观看| 牛郎织女全集| 送你一朵小红花在线观看| 越南战场满天星| 外出孙艺珍| 黑执事08| 最棒的情人沼,不关乎工作与家庭| 震撼性丑闻| 《3/3》电影完整版在线观看| 微微一笑很倾城资源| 月升沧海免费观看| 小凤(下)| 欲把老师变舅妈| 反叛的鲁鲁修r2| 插曲的痛30全集免费观看高清版第二期 | 商务旅行中戴绿色帽子的女老板同行台词 | 火云传奇| overflower第一季全集下载| 我和我们一起电视剧免费观看剧情| 爱上黑道女友完整版| 好奇害死猫| 盲战安志杰在线观看完整版| 黑人和女教师尝鲜| 郭德纲最新相声全集| 诱人的教师在线完整版| 木下檀檩子在线| 女同地带| 马桶人73集part2| 水管修理工HD| 挚爱游戏樊治欣全集免费观看| 包青天在线观看| 一起去吃拉面吗| 电视剧娘家的故事3| 法国满天星《女飞行员》观看| 父亲的战争| 法国航空空姐2016中文版视频| 泷泽萝拉第二部字幕| 激动的惑星| 《美丽妻子替丈夫还| 巜电车痴汉玩弄人妻HD| 《流星花园2》在线观看| 锦月如歌电视剧观看| 韩国年轻的母年轻线在6| 牙医姐妹电影在线看完整版高清| 哥布林的窑洞动画在线播放| 朱卫民推杆| 高压监狱第二部在线观看完整免费高清原声满天星 | 大王别慌张免费观看全集| 飞跃疯人院| 老婆6电视剧免费播放| 红苹果免费追剧| 做aj的电视剧大全免费中国人 | 牙医姐妹 在线| 扫毒1国语版免费观看| 农场主的女儿们更新49集| 高清《解语花》曹宝儿| 好运来电影在线观看| 东乡族自治县| 武驰人生萧战短剧免费观看高清| 隐私欲望| 斯巴达第四季未删减版在线看| 南山兵哥全见版全集在线观看免费 | 仙女屋全集在线播放| 电视剧水上游击队| 我在北京挺好的第6集| 免费观看已满十八岁电视剧国外飘花| 侏罗纪公园4免费高清国语版| 空间逆袭全集免费| 要爸爸播种在线观看| 土豆粉培训| 邻家特工中文版| 重生把自己嫁了| 创:战神| 战狼10高清国语免费观看影视| 一夜新娘第三季高清免费观看| 卫生间的圣母像| 和上司女部长出差完整版免费观看| 排球少年免费观看| 有你真好天堂飘雪| 《特殊诊所》苍井空| 爸爸我是你媳妇中字头剧情介绍| 叶问外传张天志在线观看免费版| 做aj视频电视剧大全| 黑名单第一季第三集| 郑州刚发生的打架的事| 杰克影院满天星免费观看方法| 野花免费观看韩国电影| 你的微笑很美电视剧免费观看| 年轻的保险销售员8| 在夫面前被强行侵犯的人妻| 银瓶梅电视剧高清免费观看| 暖暖高清中文免费| 台剧《浪漫女家教》中文字幕版| 大刀王五电影完整版免费观看| 使徒行者2粤语在线观看| 美女在线观看完整免费高清原声满天星奔跑吧 | 《维修人员的培训》| 刘老根1| 混战姐妹4免费观看| 苹果范冰冰无删减| 二战德军发泄室正版| 电影《封神2》高清版| 拳击手2满天星| 庆余年免费观看| 凯登克罗斯全部电影在线观看| 《雪中悍刀行》| 恋爱假期| 插式治疗专业医院1-5集| 美容院特殊待遇免费看| 无间道风云下载| 美国水蜜桃5观看| 秘密花园电影百度影音| 星辰影院免费观看爱情而已| 锵锵锵免费完整观看在线观看电影| 夫妇以上恋人未满| 股海明灯| 男女一起愁愁愁免费观看全集高清完整版| 去有风的地方在线观看免费观看| 无间罪之僵尸重生| 赤焰战场2| 82板杨敏思版本1-5电视剧免费观看就是| 杀手保镖| 古墓丽影法国版| 大蛇5国语版完整版| 《大兵的寝室》美剧免费观看| 主妇的战争电视剧免费观看全集 | 蝙蝠侠传奇第二季| 靳东甄子丹当选全国政协委员| 黑鹰坠落满天星女版| 猎刃电视剧在线观看| 生死卧底全集| 酋长的女儿红辣椒| 蜜桃成熟时33d免费在线观看| 朱门巧妇| 憨豆电影| 马说韩愈| 公民凯恩电影| 野丫头电视剧免费观看全集 | 地牢女孩在线观看完整版高清| 男人女人愁愁愁电视剧免费观看最新| 回复术士的重来人生观看| 恋空电影下载| 私人家教1983版电影免费观看| 万物生长| 皇家猎杀| 《外卖员的特殊待遇》| 大声呼喊你回来电视剧| 侏罗纪世界1电影免费版高清 | 孤男寡女粤语| 酒井法子电影| 成全完整版动漫在线看视频免费 | 江湖恩仇录高清| 林肯律师 第四季未删减| 朝云暮雨完整版免费观看电影| 韩剧千次的吻电视剧中文免费观看| 法国女超人HD版在线观看 | 美乃雀电影| 盖世英雄方世玉电影| overflow樱花| 第一夫人在线观看| 求婚大作战| 97免费在线观看| 森林里的熊先生冬眠中动漫完整版| 魔兽主页| xl司令第一季全集无马赛克在线观看完整版 | 义乌2手车| 作家的谎言的电影| 高柳家的花嫁在线| 隐龙老爸不好惹短剧免费观看| 铁猴子传奇之怒火狼牙| 学生的朋友3| jux-422| 美版女儿国满天星| 获取信息的方法| 卖百科全书的女人完整版| 零上十八度软床| 极品家丁5200| 《之后2》电影| 飞女正传结局| 电视剧蝶影全集免费观看下载| 《超级保镖》全集观看| 锵锵锵锵锵锵锵锵电视剧免费观看| 农场主三姐妹美国1976豆瓣| 灭火宝贝2009美版俄罗斯学院| 从答应到皇后:宫斗小能手全集免费| 秦香莲电视剧| 《以爱为营》电视剧| 读你原唱| 女特警电视剧2024免费播放| 侵犯高傲女教师在线观看| 不怕开水烫| 郝板栗七部曲免费观看| 狂飙在线观看免费全集高清| 侄女的开发日记免费动漫观看| 霍比特人 百度影音| 法国空姐3免费高清原声满天星奔跑吧| 晴天女秘书| 肉脯团电影完整版| 夜半梳头中的黄段开头| 跟着部长出差免费观看| 青梅竹马是消防员风车| 拳镇山河| 水电工艳遇在线观看| 小舍得电视剧| 杰克影院满天星免费观看方法| 秋香怒点唐伯虎| 妻子6在线观看免费播放电视剧| 宫瀬里子| 国产宾馆真实人妻互换| 妈妈的职业2观看全集免费高清中文| 一起又看流星雨吧| 好妈妈高清在线播放中文| 墨西哥三部电影| 搞笑一家人第2部| 卫青不败由天幸| 一起愁愁电视剧30集全免费看| 沙琪玛妈妈吃蜡瓶糖冰| 北大女生包里最全聊天记录| 《金牌销售》1| 舞男情未了 任达华| 樊振东爆冷出局事件| 孟姜女哭长城电视剧全集免费| 高压监狱电影在线观看完整免费高清原声满天星在线 | 米林县| 好奇心害死人| 《误杀3》大结局| 暖婚短剧全集免费观看| 先锋影院日韩| 点燃我温暖你电视剧| 幻灭电视剧| 插曲的痛第60集免费观看高清强制 | 动漫《送货员》| 麦乐迪和继父演的电影是什么| 黑名单第三集| 驻马店市| 我叫白小飞第二季| 真维斯属于什么档次| 九层妖塔西瓜| 再见龙生你好人生| 《棋魂》电影免费播放| 美国伦理片激战丛林珍妮免费在线观看全集兵王影视 | 小智解说lol优酷| 昌黎二中| 无法抗拒的他在线观看第8集| 男女生一起愁愁视频| 心灵诡计| 妈妈的职业8结局原声在线看视频免费| 破坏之王电影免费观看完整版国语| 《索命舞娘》| 羁绊5.7| 拥抱太阳的月亮国语版| 《公的浮之手中字电影| 电视剧雪豹| 一念永恒樱花版免费观看| 诱人的岳喷奶水HD中文字幕| 黛玉传下载| 电影《军中乐园》| 纸钞屋在线观看免费观看完整版| 侄女开发日记樱花动漫第2季最新更新| 余味毛豆豆| 妖精的尾巴高清版| 《家属》| 上海滩赌圣国语| 绣春刀1| 社长夫人用身补偿客户怎么说| 非你莫属 潘石屹| 无人观看完整电视剧在线观看| 密探未删减| 善良的嫂子在线视频| 八妻子视频观看| 都是天使惹的祸免费观看| 东乌珠穆沁旗| 星汉灿烂电视剧结局| 与我同眠 bt| 卢克凯奇在线观看| 跑男最新一季| 法国空乘5在线观看| 《开始捉迷藏 第二季》未删减| 中国达人秀街舞卓君| 厨神王妃厨艺:征服王爷全集免费| 两人世界插曲30分钟| 雪静瑜伽之自然瑜伽| 今天开始当杀手| 《怪盗女谍》天海翼| 这么多年电影免费观看| 甜蜜的惩罚真人版的剧名叫| 脉开头的四字成语| 金殿斗智| 壮志凌云1(法国)满天星不卡| 策驰影院免费| 网购迪士尼套餐最终民警护送入园 | 离婚协议电视剧全集| 塔日酒店未删减版在线观看| 海天雄鹰免费观看| 宇宙面包店未删减| 莫妮卡《爱我几何》免费版| 再见那一天| 掌心里的海| 灯光也暗了 音乐低声了| 双人精油按摩调情刺激阴茎高潮伦理免费电影 | 飙速战车队免费全集在线观看| 地心历险记2 720P| 《四位妇女按摩完整版》| 女大学生的沙龙室 电影| 美丽小蜜桃7免费播放全集电视剧 德国炸毁最现代化电厂 | 亲爱的热爱的全集观看| 准备击球电视剧| 插曲的痛30集| 盗墓笔记重启免费观看完整版| 刁蛮婆婆俏媳妇| 贝蒂的农场1980| 美丽人妻秘书还债社长| 韩国电影后宫| 战争与音乐电影完整版免费观看| 女战狼10高清完整版在线观看视频 | 杨贵妃免费观看| 正负之间电视剧在线观看完整版| 女子护卫队满天星| 爱情怎么翻译?电视剧| 怪医文三块高清全集| 《overflower》第1季免费观看全集动漫 | 电影《在丈夫面前被劫匪欺负》电影 | 我在未来等你| 大象电视剧| 上错花轿嫁对郎电视剧全集观看 | 监狱风云2 电影| 名侦探柯南迅雷看看| 天衣美津| 食物链删除的片段原声| 夏晚晴天电视剧| 美丽乡村浪漫事| 《西游 降魔篇》| V酒店第一季完整版在线观看| 芭比美人鱼历险记| 喜宝电影在线观看免费| 斗六市| 大兵的寝室线观看兵的寝室| 缘之空 在线观看| 爱死亡 机器人| 倔强驱魔师1-5集免费动漫| 隔离七日晴| 史努比动画片| 韩短剧《治疗》观看| 和最讨厌的前男友一起去出差旅日剧| 年轻的嫂子2免费电影在线观看| 善良的丈母娘韩国| 金刚狼1迅雷下载| 美丽小蜜桃2荷尔蒙| 黑土火影片子在线观看| 家有九凤电视剧全集完整版| 0verflower第一季真人版| 梦想成为魔法少女2| 特种兵之火凤| 我和我的父辈 在线完整版| 《特殊游泳教练》免费观看下拉 | 营盘镇的警事| 一次邂逅| 性解秘| 特利迦奥特曼国语免费观看| 新来的瑜伽教练| 小巷人家电视剧观看| 怪医黑杰克剧场版| 今天我休息老电影| 美国禁忌3在线观看| 柳州局长聊天记录| 老公我要电影免费观看| 战神第一集| 日韩yellow| 警察故事2电影| 南北妈打演员表| 新精武门粤语版| 《部长出差的日子》电影中文字幕| 魔女2在线| 小爸爸全集在线观看| 科尔| 动漫xlx| 风向GO 第二季| 司藤电视剧免费观看全集| 小姑娘1中汉字| 法版《执行秘书》在线观看| 一拳超人第二季在线观看免费| 伊波拉病毒国语高清| 《社长夫人的美貌》哪里能免费看 | 何赛飞获金鸡奖最佳女主角| 傻王闯天下主题曲| 《千金小姐赤子板栗》| 韩国电影姐姐的朋友1在线观看中文| 电视剧《下海》| 绅士品格国语版全集| 游泳女教练未删减版在线观看视频 | 魔女宅急便迅雷下载| 《是上司也是老婆》第二季| 两个妈妈吗| 731恐怖女体实验| 国产小姑娘电视剧| 《孽债》第二部视频,需要爸爸播种| 翻云覆雨国语| 流浪地球在线播放| 制服诱惑2 地下法庭| 法国满天星古墓丽影全集| 移动迷宫2| 电视剧《福贵》在线观看| 需要妈妈播种籽2| 渔夫荒淫史在线| 不扭扣的女孩| 我爱长发飘飘| 拔哥的故事电影| 神木丽电影| 女状元文武:双全惊天下短剧全集| 婚巢电视剧全集| 电影《剑雨》免费观看| 舒淇的全部三电影| 飞驰人生二| 护士的秘密电外国| 剩女的代价2| 龙年手抄报简单又好看| 天后手册短剧免费观看 | 高清《挡不住的疯情》| 满天星2电影免费播放| 天下长河电视剧免费观看| 小时代在线观看| 游戏规则 电影| 牙医姐妹郝板栗1986| 天地争霸美猴王免费观看完整版| 年青的嫂子| 第十四个目标| 与女部长出差的日子电影在线观看| 年轻的母亲在线观看中文版完整版 | 电影 保镖| 木下檩檩子的电影全集| 百媚千娇全集在线观看| 科学的超电磁炮| 天堂旅店意大利1976| 急诊护士免费观看| 爱情图鉴之暗恋| 电视剧今生有你全集| rbd-509| 1984美式保罗1-4| 种其因者须食其果短剧大结局| 绯闻女孩第一季全集| 名人带路| 加菲猫电影国语| 销售的销售秘密3hd中字2017| 动画片喜羊羊与灰太狼免费观看 | 朝花若锦电视剧免费观看| 战狼6高清国语免费看| 向往的生活第六季免费看| 要过好日子下载| 电视剧启航| 禁忌4年转一代| 高压监狱法版免费观看| 新白娘子传奇50集免费看高清 | 一个妈妈的女儿第二集| 精英律师第二部全36集| 韩国三级维修师傅的艳遇 | 海底捞回应女大学生包间留宿| 哪吒闹海免费| 私人航空2法国电影| 灵媒泰国恐怖片在线观看| 密室死斗| 渔夫的妻子赛伦| 孤岛 电影| 狙击手拉苏尔电影免费观看完整版| 待嫁老爸 电视剧| 《示范销售避孕套》免费观看| 神探狄仁杰 第四部| 情深深雾蒙蒙| 地铁电影| 《法国空乘5》电影免费观看 | 鹿鼎记 电影| 毒医肥尸电影在线完整版| 硝烟散尽| 爱即所求电影| 风火雷电破手势图解| 台湾原始部落无删减版电视剧| 高压监狱2免费观看完整版在线播放| 随唐演义 全集高清| 高清《月鳞绮纪》电视剧| 古墓丽影(法国版)女版播放| 铜锣铜钹铿锵锵锵在线观看2023年| 一人之下电视剧第二季| 无敌少侠 第四季未删减| 神马电影男神马电影| 强奸轮奸影片免费播放| 大侠霍元甲免费播放| 大岛优子快播| 宦海奇官粤语| 法国护士伦理在线播放| 新假面骑士| 顶级人生第二季13集免费观看全集| 新妈妈再爱我一次电影| 年轻的继拇3| 甲午风云| 陆贞传奇18| 哈利波特1免费完整版在线观看| 牝教师在线观看| 年轻的邻居天美| 火线三兄弟多少集| 天龙八部舒畅第几集| yy农场| xl司令34集全免费观看| 神采飞扬完整版在线观看高清免费| 名侦探柯南迅雷看看| 功夫吉他| 《熟睡被义子侵犯电影高清| 灼人秘密免费观看高清| 大威虎看世界| 房奴试爱《高潮》| 黑丝在线观看| 电视剧黑金地的女人| 部长出差的日子电影免费观看| 特战荣耀免费观看| 噬血狂袭第五季| 怪异韩国电视剧在线观看| 正在播放:【传媒】MDSR0006-2 《小凤新婚》下集-高冷新妻性奴 - 17 | 韩国必胜韩国语影视| 隐形帽子韩国电影完整 | 沐浴之王在线| 斗破苍穹第121集完整版观看| 黄色仓库视频| 因为遇见你 电视剧| 天赐的声音第5季综艺| 哈利 波特与死亡圣器下| 3对1初次体检4| 风骚的邻居电影| 动漫美女性侵| 母亲5集全集免费观看完整版| 妹妹皇后| 我的女友妈妈韩字的ID是谁| 极限挑战第2季 综艺| 相门嫡女全集免费| 女友的妈妈4完整视频有翻译英文| 天美影院电视剧在线播放| 美乃雀电影免费在线观看| 年轻的丈夫 电影| 咱们结婚吧全集免费观看| 侵犯天海翼搜查官| 人口第一大省首现负增长| 《水电维修工的艳遇》| 从结婚开始恋爱电视剧全集| 女警交换夫妻| 不完美的受害人| 越剧名段方亚芬| 妈妈的职业2韩剧结局| 南少林三十六房| 陈芊芊传闻中的电视剧免费观看| 杜拉拉之似水年华36| 《over flower》1~8集动漫| 阳阳电影| 僵尸福星仔下载| 遇龙电视剧完整版免费| 《需要爸爸播种籽2》| 上课时胸罩不小心掉下来的事| 年请的母亲4| 成全在线观看高清动漫| 决战万仙阵在线观看| 中国汉字听写大会直播| 芭比公主全集国语| 《无憾》完整版电影| 吸血鬼日记第四季快播| 电影叶问4| 龙城生死恋| 黑白配国语高清在线| 杨敏思版1-5集免费观看| 月嫂苏媚的小说免费阅读| 彩翼儿童美术| 神明代理人| 丰满的继牳伦理8伦理| 师奶madam国语版| 一人之下第五季免费观看完整版| 老版天师钟馗全集| 兰考县| 男女一起愁愁愁免费观看91 | 西游降魔电影完整版| 专业六爻| 17·3电影免费播放高清 | 迫在眉睫| 台剧《浪漫女家教》在线看全集| 打人女司机为何不构成寻衅滋事| 《汤摇庄的幽奈同学》| 我们生活的年代 电视剧| 小生怕怕粤语| 海贼王480| 圣斗士星矢 圣域传说| 私人航空完整版在线观看| 《斯巴达1帝国女版》海盗在线观看 | 电视剧出逃的公主| 做aj的电视剧大全免费观看中国人 | 东厂西厂短剧全集免费播放| 落魄贵族琉璃川1-2集在线播放| 寿星新人类,肥尸哥主演 | 规章制度的作用| omoflow| 夏日重现动漫| 《格林童话》免费观看| 《激战丛林》电影在线播放| 双枪李向阳之再战松井| 《最后的羔羊》完整版播放| 《四平青年》| 正在缩小的男人电影| 欧美女人ooozzzxxx| 千金复仇:仇人覆灭全集免费| 《妻子3》免费高清电视剧| 电影《孟良崮》| 修理工与人妻出轨HD电影| 铿锵玫瑰之女兵排| 何以为家电影| 插曲的痛第60集全集能看见的全部私密处| 宋祖英老公是谁| 亦舞之城电视剧在线观看| 特殊的保险销售员2上映时间| 玉米男孩| 电影长津湖在线观看| 《少女农场》电影在线| 铁扇公主肚子疼| 三年电影免费完整版| 日本战狼12免费国语| 《禁忌家族》大结局| 台湾佬娱乐11kkhh| 四川少女免费观看电视连续剧| 曹云金官场斗| 战狼6免费观看完整版下载| 日本版新战狼6观看| 赵氏孤儿 高清| 盗墓笔记电视剧资源| 高清海达| 坎贝奇《无憾人生》| 《法国高压监狱1完整版| 孟买酒店| 千树万树梨花开描写的是什么| 一个陌生女人的来信下载| 学生的妈妈5字ID5中字 | 斗破苍穹100集免费观看| 新疆教育厅原厅长带头编问题教材| 斗罗大陆第108集| 《航空服务4》电影| 美丽樱桃完整在线观看| 梦之安魂曲| 美版假面骑士龙骑| 即刻上场电视剧免费观看| 美味快递在线| 北下关小学| 耶伦抵京 中美双方握手近20秒| 电影急诊护士| 百家讲坛慈禧全集| 比思特区东方美人| 广州spa| 奔跑吧有情人| 《公的浮之手中字》免费| 大熊喷哭自己| 斗罗大陆173集免费| 五年级上册习作三| 巴达卢佩的玫瑰在线播放 | 永不消失的番号| 《酒店服务员》在线观看| 黎明前的抉择36集免费演员| 美国电影《要爸爸播种2》的导演是谁| 电影《卢旺达的玫瑰》在线观看| 一步之遥在线观看完整版免费| 电视剧夏妍的秋天| 熊出没丛林总动员| 都安| 3对1三人一次性体检什么电影| 一起长大 电视剧| 抓紧我放弃我电视剧| 张紫妍 顶楼的大象| 《荣誉守则》在线观看 | 内衣推销员2未删减版| 卿卿日常在线观看电视剧| 胭脂电视剧| 再见莫妮卡原版| 聊斋花姑子| 日本空姐| 塔尔萨之王免费观看西瓜| 在黑暗中翻滚| 董古董奇遇记| 月里二嫂猪肉换米| 电影《一路西向》| 尖峰时刻 3| 王朝的女人·杨贵妃完整版 | 女官升职记:宫女到女相全集免费| 援交女教师| 女友的妈妈 双字id| 私人女性监狱变态版在线观看| 之后电影| 夏日福星粤语版| 寂寞护士公与媳| 1985美式保罗聚家聚会 | xl真人版| 权在手:后宅主母全集免费| 奇妙萌可第四季免费观看| 电视剧天大地大| 控制女上司在线观看| 怦然心动20岁第三季| 再见亚特兰蒂斯| 约翰尼盖尔克奇| 痛30集全播放免费观看| 熟女泻火| 性感乳房裸体电影按摩| 正负之间台剧免费观看| 动感之星妖精第139集在线播放| 公之孚| 悄悄地喜欢你免费观看| 聊斋志异之婴宁全集| 熟睡被义子侵犯完整版| 电视剧福贵全集免费播放| 鉴宝狂少:捡漏我是专业的短剧全集| 仙剑奇侠传2| 金银悔1手机版免费版| 媛崽好困原视频完整版| 人间水蜜桃6免费观看电视剧 | 伊波拉病毒1-3三部| 法国灭火宝贝1-4集| 维斯塔小镇家长会2免费观看| 之后3在线观看完整版| 太康县| 韩国伦理电影大全五月天| 叶罗丽第11季正片免费观看| 宫雪花武则天| 寒门赘婿全集免费| 2001个疯子在线观看| 《唤醒》:凯登·克罗斯| 金银梅5普通话版| 断背山完整版下载| 樱兰高校男公关部真人版| 绅士和小姐电视剧免费观看韩剧网| 义子的侵犯电影完整版| 电影黄河绝恋| 恋爱先生全集| 年轻的瘦了5| 三家店于魁智| 素食主义者电影| 夫妻的世界完整版免费观看| 坎贝尔《无憾》| 喜庆农家全集| 即时是空3电影免费观看完整版国语| 锵锵锵锵游戏免费完整观看视频| 魔术师库诺看得见一切电视剧| 埃洛伊塞| 三秒后野兽住在联谊会角落| 《快递员的艳遇》中字| 沙琪玛妈妈吃蜡瓶糖冰| 女欢女爱第一季| 五哈第三季| 女超人2013麦乐迪马克斯在线观看免费 | 异形2电影| 得闲炒饭 下载| 《动漫迷情4》全集免费观看动漫| 欧式少女18集视频大全| 幸福密码| 祈今朝 电视剧| 苍兰诀电视剧在线观看完整版免费| 冯小刚:《非3》带着笑声告别| 法国护士长在线| 地下室骑马| 小野纱里奈| 肉身佛3步骤| 战狼9欧式少女电影| 老师好在线全集免费观看| 求佛mtv| 疯狂小女生法国版| 鬼子来了在线观看| 超级乐8点| 爱我几何电影完整无删减免费观看在线| 真章幻梦馆| 花样男子大结局| 播放泰罗奥特曼| 浮之公手| 铁甲钢拳 电影| 锦衣之下全集免费高清| 少年包青天第一部全40集| 落翅女的黄昏在线观看完整版电影| 电视剧挣扎| 欧美战狼4免费完整版| 日本电影出差3| 师傅全集| 无双短剧完整版免费播放| 金瓶梅新版| 小岳岳相声| 公之浮手| 渔夫荒野史1987台湾版主演是谁 | 爱情而已电视剧免费观看全集完整版| 安斋电影| 战狼6免费观看在线播放完整版视频软件下载 | 美国女儿要爸爸播种电影免费观看| 原振侠与卫斯理| 金刚2帝国崛起免费播放| 公交车电影免费观看电视剧在线播放| 沂蒙小调光头王老五| 爽剧全部免费观看| 星球大战女版满天星免费观看| 裸体监狱女子监狱| 大奉打更人电视剧观看| 苍狼传世| 青春须早为电视剧免费观看| 惊天危机在线完整版免费观看| 女超人满天星在线观看| 私人女性监狱免费观看途径| 高清《余罪2》全集在线观看| 五遁忍术| 斗破苍穹167在线观看| 我推的孩子第8集| 蜜桃17| 爱我几何无删减在线观看完整版意大利 | 金瓶梅TV| 异装癖的女人| DTF圣路易日记未删减| 黑夜中的她短剧免费观看| 后营露营无增减第二季预告| 摇啊摇摇到外婆桥剧情简介| 在线播放:SSPD-128 怪盜 女蝶 天海翼-凌辱快感 - 国产高清传媒 | 呕吐娃娃韩国版| 千金美人足小电影| 冰雪奇缘百度影音| 《恋爱禁区》电影| 张新伟遗书| 东京食种第一季免费观看| 总统夫人在线观看罗丽星克莱尔| 日本战狼6| 假面骑士欧兹| 《唐朝诡事录2》| 《入青云》36集免费| 朝花若锦电视剧免费观看全集高清| 清风阁我爱干视频| 我的女友妈妈韩字的ID是谁|