沈巋:論軟法的實行機制—找九宮格會議室—以人工智能倫理規范為例

 

摘要:軟法的普遍存在,并不料味著其實在地獲得了遵照和履行。人工智能範疇的軟法—人工智能倫理規范—被證共享會議室實存在“實效赤字”,其緣由在于:人工智能倫理規范的非強迫性,抽象性、含混性,疏散、凌亂與疊床架屋,自愿遵照的動力缺乏,合規悖論,社會體系論窘境,以及人工智能成長壓服束縛的宿命論。但人工智能倫理規范因其機動快捷性、多樣適配性、一起配合實驗性、現實壓力性、跨國實用性而依然有奇特價值。經歷研討表白,組織機制、合規壓力機制、合規鼓勵機制、技巧方式論機制、基準機制以及軟硬法互念頭制,可推進軟法的直接實行。價值共鳴與經濟邏輯的聯合、內涵來由和內在推進的聯合,是軟法取得更多實效之道。

 

一、題目:軟法何故發生實效

軟法效率或有用性(validity)——其“應該”獲得遵照和實行的性質——在于壓服束縛力,而不在于強迫束縛力。軟法只需不與硬法或硬法準繩、精力相抵觸,又年夜致合適必定范圍內社會對更好的“公共善”的認知和等待,就具有獨佔的效率。由于軟法制訂者的威望性、“公共善”的承認水平、軟法制訂經過歷程的協商性和溝通性等存在差別,軟法的壓服束縛力有強弱之分,但配合之處是,軟法的“應該”并不幫助以強迫實行的制裁裝配。由此而言,軟法的應該有用與軟法的現實有用,并非一回事。前者是規范意義上的存在,后者是現實意義上的存在。

但是,軟法的慣例界說自己又意味著其是在必定范圍內產生實效的,很難想象,沒有實效又沒有硬法屬性的行動規定,可以當得上“軟法”稱呼。于是,一個需求處置的題目是,軟法又是若何發生或許取得廣泛實效的。軟法自提出和公布之后,至其現實上發生後果,一定會有時光距離,無論該距離之是非若何。有著軟法性質的行動規定,在其問世伊始,凡是并不會立即、即時收獲後果,除非其只是對曾經被廣泛遵照和實行的慣常做法付與規定的情勢。這種破例的情況較為少見,究竟,盡年夜大都軟法是將來導向的,是等待人們為了更好的“公共善”而遵守新的行動規定或轉變本來的行動規定。盡管軟法的性命力源于其本身內涵的壓服力,可是,僅僅憑仗這個內涵屬性或內涵來由,就等待一個被提議的軟法可以演化為真正意義軟法,應當是過于幻想化的奢看。由於,指向更好“公共善”的軟法凡是需求讓行動人累贅更多的遵守或實用本錢。假如沒有適合有用的機制可以削減或抵消如許的本錢,那么趨利避害的行動選擇偏向或許良幣防止被劣幣驅趕的念頭,往往會壓服軟法內涵來由的吸引力,從而使其無法獲取廣泛後果。這就是在軟法具有內涵來由使其取得應然效率之外切磋軟法何故發生實效的意義地點。

羅豪才、宋好事已經在國際軟法學的扛鼎之作《軟法亦法——公共管理召喚軟法之治》中指出,“法依附國度強迫力保證實行”的表達并不正確。對于法的實行—行將法的效率轉化為法的實效—而言,國度強迫力保證是不成或缺的,但二者之間又不是必定的關系。法的實行可所以行動人:(1)由於從眾而習氣性遵從;(2)出于承認而自愿遵從;(3)遭到鼓勵而服從;(4)迫于社會言論等疏散的社會壓力而遵照;(5)迫于組織的壓力而遵從;(6)懾于國度強迫力的應用或要挾應用而遵從。由此,法的實效發生方法是多樣化的,法的實行機制重要有自愿遵從、習氣性遵從、社會強迫遵從、國度強迫遵從四種方法。這些會商是作者在反思和修改“法”的界說經過歷程中睜開的,其終極指向一個包涵硬法和軟法在內的全新的“法”概念,在這個概念組成中,法的實行機制被歸納綜合為“公共強迫”和“自律”。毫無疑問,在以上所列六項之中,除國度強迫遵從僅實用于硬法以外,其余諸項皆可在軟法的實行位年齡相仿的男演員。另外三人都是中年男子。經過歷程中浮現。

但是,就本文關懷的題目而言,以上諸項,或許只要鼓勵、社會壓力、組織壓力是值得追蹤關心的使軟法發生實效的方法。由於,從眾性的遵從顯然不是軟法從建議到廣泛遵照的機制,“從眾”自己就意味著曾經存在廣泛實效。自愿性的遵從是出于對軟法內涵來由的承認,是軟法實行的一種動力。只是,在硬法前提下的自愿性遵從,除了在價值認同上有有形收益外,至多還有防止國度強迫制裁的收益。而前文曾經說起,軟法前提下的自愿性遵從,不只不會有防止制裁的利益,甚至能夠會招致遵從者支出更多的本錢或價格,其也就很難成為軟法發生實效的強無力機制。

當然,羅豪才、宋好事教學在群情“法的實行”時,并未凸起對軟法實行的特殊追蹤關心,其說起的鼓勵、社會壓力、組織壓力,更多是在實際層面上針對一切律例范(包含硬法和軟法)實行的邏輯睜開,完善軟法實行的豐盛例證。更為主要的是,由於沒有將軟法何故發生實效題目提到明顯的、專門的地位,沒有列進有興趣識要處理的議題之中,所以鼓勵、社會壓力、組織壓力能否就能歸納綜合一切的或盡年夜部門的軟法實行機制,也就天然不會有較為明白的闡述。

而從比擬法的視野察看,域外軟法研討者對軟法實效題目有著更多的、更直接的追蹤關心。例如,德國不受拘束柏林年夜學傳授米莉亞姆·哈特萊普(Miriam Hartlapp)于2019年頒發其對歐盟軟法在歐盟成員國的現實後果停止的研討,指出軟法的符合法規性或合法性(legitimacy)并不是推進軟法實行的要害,真正起感化的是行動人能否能在實行中獲益。而軟法的能夠硬法化(hardeningout)是與軟法實行并行的。德國波茨坦年夜學傳授安德里亞斯·齊默爾曼(Andreas Zimmermann)則于2021年切磋了不具有法令束縛力的文件—以體諒備忘錄為例—是若何在國際法之下發生法令後果的,指出重要是由於此類文件與具有法令束縛力的文件產生互動所致,而這種互動是由很多法令機制供給的。美國亞利桑那州立年夜學傳授蓋瑞·馬秦特(Gary E.Marchant)和研討員卡洛斯·伊格納西奧·古鐵雷斯(CarlosIgnacio Gutierrez)于2020年一起配合完成關于人工智能軟法直接實行的文章以為,軟法勝利與否是高度依靠特定情境的,取決于遵照軟法的本錢與可行性、對遵照軟法的鼓勵以及謝絕遵照或沒有遵照軟法的后果;他們描寫了九個有助于人工智能軟法加倍有用、加倍可托的機制和經過歷程,并暗示可以有更多其他的。相干研討不成盡數,但以上數例曾經表白:一方面,如本文之前所述,論者們都偏向于一個基礎條件,軟法的實效更多取決于遵照軟法給行動人帶來的利益,包含好處之增添和晦氣之削減;另一方面,使行動人取得利益從而可以增進軟法收取廣泛後果的機制遠不止于鼓勵、社會壓力、組織壓力。

但是,對于軟法的建議者、推進者、研討者而言,或許需求一種軟法實行機制類型學對各色各樣、五花八門的實行機制停止回類小樹屋,從而構成絕對固定又具有開放性、包涵性的思想東西,以增進為軟法實行停止有興趣識的配套機制建構。“絕對固定”意味著構成一些明白的分類概念,每個概念因其抽象性而可收容“家族類似”的詳細情勢化的軟法實行機制;“開放性、包涵性”意味著本文沒有或不克不及述及的、實行中已有或許將來能夠有的更多情勢的實行機制,也可認為這些類型概念所包容。本文即要摸索軟法有哪些類型的實行機制可以增年夜其發生實效的能夠性。

鑒于軟法在各個公共管理範疇廣泛存在,為使研討加倍聚焦,本文選擇人工智能的軟法實行作為重要研討對象。人工智能為不可勝數的研討者、開闢者、利用者舞蹈教室帶來異樣不可勝數的年夜鉅細小好處,在強盛的好處驅動下,人工智能疾速成長,而列國當局即公共監管者的態度更多是允許而不是克制其成長,尤其是在人工智能最後方興日盛的階段,這個態度隨同的就是基于軟法的規制。即使跟著人工智能風險的清楚化,對分歧風險停止分類治理和把持的硬律例范日漸增多,但也不克不及完整代替這個範疇軟法的主要位置。需求特殊指出的是,人工智能管理的軟法情勢重要是倫理規范(ethics)。篇幅所限,本文有意就科技倫理與軟法之間的關系睜開會商,盡管這也是具有主要價值的、屬于軟法本體論—軟法是什么—的議題。美國的蓋瑞·馬秦特傳授和瑞士的艾菲·瓦耶納(Effy Vayena)傳授等人將人工智能倫理規范視為軟法一種情勢的退路,也是本文采取的。

本文將從三個方面睜開切磋。起首,第二部門依據既有研討,對人工智能軟法管理的近況停止現實描寫,指出人工智能倫理規范的“風起云涌”無法掩飾其存在的宏大的“實效赤字”;其次,第三部門剖析軟法“實效赤字”的緣由地點,以及即使這般,人工智能管理為什么需求并且依然需求軟法;再次,第四部門則提醒有助于軟法實行并發生實效的機制,并對其停止分類,瑜伽場地以期樹立具有領導意義的實際東西。本文的最后結語是對全文重要不雅點的總結,并且誇大軟法的落地實行、取得廣泛遵照,需求價值共鳴與經濟邏輯的聯合、內涵來由與內在推進的聯合。

二、人工智能軟法及其“實效赤字”

瑞士的艾菲·瓦耶納傳授、馬塞洛·林卡(Marcellolenca)傳授和安娜·喬賓博士(Anna Jobin)等在《全球人工智能倫理指南圖景》一文中指出,曩昔五年之間,私營公司、研討機構和公共範疇組織發布了大批的人工智能倫理準繩和指南,以應對人工智能惹起的擔心。這些倫理指南并不具有法令上的束縛力,而是壓服性質的,其可以被稱為非立法性政策文件或軟法。為了研討分歧集團在符合倫理的人工智能應當是什么、將來決議人工智能成長的倫理準繩是什么等題目上能否告竣共鳴,以及假如有不合,差別之處在哪里以及能否可以息爭,他們在全球范圍內搜集了84個含有人工智能倫理規范的文件。

對這些文件的研討表白:第一,公共範疇組織(包含當局組織和當局間組織)與私範疇(包含公司及其同盟)發布的倫理規范在多少數字上年夜致相當,意味著兩個範疇都對此高度器重。第二,非洲、南美洲、中美洲、中亞等地域缺乏代表,意味著人工智能倫理規范國際話語中的權利不服衡。第三,經濟加倍發財的地域正在塑造人工智能倫理規范的會商,這能夠會惹起對處所性常識、文明多元主義和全球公正的關心。第四,人工智能倫理準繩重要有:(1)通明;(2)公理、公正戰爭等;(3)不損害(Non-maleficence);(4)義務和回責;(5)隱私;(6)造福人類;(7)不受拘束和自治;(8)信賴;(9)可連續成長;(10)莊嚴;(11)社會連合。第五,沒有一個準繩是全部文件庫中配合的,盡管通明、公理和公正、不損害、義務以及隱私是比擬集中的,有跨越一半的指南觸及。第六,一切十一項準繩都存在本質內在的事務的不合,決議不合的重要原因有:(1)若何說明倫理準繩;(2)為什么它們是主要的;(3)它們與什么題目、什么範疇、什么舉動者相干;(4)它們應當若何獲得履行。基于這些發明,該文作者以為:在政策層面,需求各方好處相干者更多的一起配合,以在倫理準繩內在的事務自己和它們的履行上構成分歧和趨同;對于全球而言,將準繩付諸實行、追求人工智能倫理規范(軟法)和立法(硬法)的協同是下一個步驟需求做的主要任務;今朝,這些非立律例范能否會在政策層面發生影響,或許它們能否會影響個別實行者和決議計劃者,還拭目以待。

艾菲·瓦耶納傳授等提出的履行題目、實效有待察看題目,在他們研討結果發布前后,曾經有研討者停止了響應的摸索并給出了答覆:基礎有效。“算法察看”(Algorithm Watch)是一個位于德國柏林和瑞士蘇黎世的非當局、非營利組織,其主旨在于為一個算法和人工智能在此中是加大力度而不是減弱公理、人權、平易近主和可連續成長的世界而奮斗。該組織于2019年發布了“全球人工智能倫理指南清單”,對全球范圍內旨在為以符合倫理的方法開闢和實行主動決議計劃體系確立準繩的框架和指南停止匯編。該清單于2020年4月28日更換新的資料后,有跨越160個指南包括在此中,觸及中國的有:北京智源人工智能研討院結合北京年夜學、清華年夜學、中國迷信院主動化研討所、小樹屋中國迷信院盤算技巧研討所、新一代人工智能財產技巧立異計謀同盟等高校、科研院所和財產同盟配合發布的《人工智能北京共鳴》(2019年5月25日)。中國人工智能財產同盟發布的《人工智能行業自律條約(征求看法稿)》(2019年5月31日)。國度新一代人工智能管理專門研究委員會發布的《新一代人工智能管理準繩—成長擔任任的人工智能》(2019年6月17日)。

顯然,“算法察看”編撰的清單,沒法囊括世界范圍內一切以指南、準繩、原則、建議、自律條約等情勢浮現的人工智能倫理規范。一是此類軟法在多少數字上難以計數,某個時光節點上的搜集不見得完全;二是此類軟法在天生上不受主體、法式等的嚴厲限制,很是快捷、方便,故搜集的時光節點以后很快又會有新的軟法呈現。以中國為例,2017年7月8日國務院發布《新一代人工智能成長計劃》,此中就多處說起人工智能倫理規范扶植的意義、重點和時光線,盡管其自己并未直接提出詳細的倫理規范。而2018年1月18日中國電子技巧尺度化研討院發布的《人工智能尺度化白皮書(2018年版)》曾經明白,人工智能的成長應該共享會議室遵守人類好處準繩、通明度準繩和權責分歧準繩等倫理請求,固然其絕對粗拙、簡單。這是在“算法察看”搜集或更換新的資料的時光節點之前的情形。而在該時光節點以后,我國的國度新一代人工智能管理專門研究委員會又于2021年9月25日發布了《新一代人工智能倫理規范》,比擬體系地提出了“促進人類福祉”“增進公正公平“”維護隱私平安“”確保可控可托“”強化義務擔負“”晉陞倫理素養”等六項基礎倫理規范,又系列地供給了治理、研發、供給和應用規范。

但是,沒法囊括并不是題目的要害地點,由於“算法察看”于2019年發布此項研討初步結論時就曾經指出會有更多的指南,而該組織的察看結論則是加倍主要、更惹人注視的。2019年,“算法察看”發布的《<人工智能倫理指南>:有束縛力的許諾仍是點綴門面?》一文指出,彼時搜集的83個指南之中,盡年夜大都都是行業主導的,由於自愿的自我監管長短常受接待的防止當局監管的手腕。德國的思愛普(SAP),美國的賽捷(Sage)、臉書(Facebook)、谷歌(Google)等公司既規則了外部準繩,也公布了普通指南。此中一部門是公司作為財產同盟——如“人工智能伙伴關系”(Partnershipon AI)——成員發布的,一部門是行業協會引導發布的。最為主要的是很少有指南附帶管理或許監視機制,可以確保這些自愿許諾獲得遵照和實行。2020年,“算法察看”數據庫中指南多少數字跨越160個,或許是自愿許諾的,或許是提出性的,此中只要10個是有實行機制的。即便是世界上最年夜的工程師專門研究協會“電氣與電子工程師協會”(InstituteofElectricalandElectronicEngineers,以下簡稱IEEE)制訂的倫理指南,在很年夜水平上也是沒有實效的共享空間,由於臉書、谷歌和推特(Twitter)等年夜型科技公司都沒有履行這些指南,盡管它們的很多工程師和開闢職員都是IEEE的成員。

“算法察看”兩份陳述的結論對人工智能倫理指南的實效基礎持否認立場。並且,這并不是其一家之言。此前,來自美國北卡羅來納州立年夜學的研討職員停止了一項研討,他們找了63名軟件工程專門研究先生和105名軟件開闢專門研究職員,并將其分紅兩組。一組是明白唆使其應用美國盤算機協會(AssociationofComputingMachinery,以下簡稱ACM)制訂的倫理規范,另一組是對比組(controlgroup),即沒有看到ACM倫理規范。研討職員讓被測試者答覆十一個有著簡略情境先容的選擇題,每個題都觸及倫理決議計劃。研討結論是:無論是先生仍是專門研究開闢職員,看過和沒有看過倫理規范的被測試職員對題目的答覆,沒有統計學意義上的明顯差別。這表白倫理規范并不會對軟件開闢發生本質性影響。人工智能倫理規范基礎都是由技巧專家(為主)、法令專家(為輔)研討和制訂的,其盼望經由過程技巧的、design的專門研究常識來應對人工智能/機械進修的倫理題目,并將design作為倫理審查的中間,是以,上述針對軟件工程專門研究先生和軟件開闢專門研究職員的測試成果驗證了倫理規范的“實效赤字”題目。人工智能倫理規范的大批產出背后暗藏著較為可不雅的投進和收入,但其支出即實效遠遠少于本錢,是以本文稱其為“實效赤字”。

那么,人工智能倫理規范能否真的如上述測試所表示的那樣“實效性幾近于零”呢?本文并不認為然。起首,人工智能倫理規范并不純潔是被置之不理的。科技鉅子發布的此類軟法,或多或少地對其本身發生拘謹感化。例如,谷歌公司自2018年發布《人工智能準繩》(AIPrinciples)以來,每一年城市發布更換新的資料陳述,而在陳述中,其會向大眾闡明本身在踐行準繩方面的盡力、獲得的提高、取得的經驗。2023年陳述就提到:“這是我們每年發布的《人工智能準繩》停頓陳述的第五版,經由過程年度陳述,我們持之以恆對我們若何將準繩付諸實行堅持通明。我們于2018年初次發布《人工智能準繩》,旨在分送朋友公司的技巧倫理章程,并使我們對若何擔任任地研討和開闢人工智能堅持義務心。天生式人工智能也不破例。在本陳述中,我們將具體分送朋友在研討和開闢包含Gemini家族模子在內的新型天生式人工智能模子經過歷程中所采用的符合準繩的方式。準繩只要在付諸實行后才幹施展實效。這就是我們發瑜伽場地布這份年度陳述——包含學到的艱巨經驗——的緣由,目標是讓人工智能生態體系中其別人可以或許鑒戒我們的經歷。”谷歌公司的年度陳述自己的真正的性、其在陳述中反應的踐行準繩之盡力在多年夜水平上履行了其準繩,還缺少中立的、客不雅的、完全的評價。谷歌公司在2019年宣布不再與美國國防部續約,結束向其供給人工智能的輔助以剖析海內軍事無人機監控錄像,也被以為是在其員工抗議此項目激發倫理爭議和憂慮的情形下作出的決議,而不是自愿實行其人工智能倫理規范的成果。盡管這般,年度陳述及其公然至多意味著該公司愿意向大眾報告請示其在人工智能倫理規范履行方面的提高,也瑜伽教室愿意將本身置于普遍的監視和隨時能夠呈現的批駁之下。

其次,盡管人工智能體系的利用實行在符合倫理規范方面表示較差,但在一些準繩——如隱私、公正、可說明性——的利用上仍是有著較為顯明的提高。例如,世界范圍內曾經開闢了很多維護隱私的數據集應用和進修型算法應用技巧,這些技巧經由過程應用password、隱私區分或隨機隱私等方式,使人工智能體系的“視域“”變暗”。不外,吊詭的是,人工智能花了數年時光獲得的宏大提高,恰好是由於有大批的數據(包含小我數據)可用。而這些數據都是具有隱私侵略性的社交媒體平臺、智妙手機利用法式以及有著有數傳感器的物聯網裝備搜集的。

再者,人工智能倫理規范還會在“微不雅倫理”層面上獲得表現。固然在微觀層面上,由抽象、含混文句構成的人工智能倫理規范的實行乏善可陳,可是,在人工智能倫理題目惹起普遍器重的情形下,從倫理到“微不雅倫理”(如技巧倫理、機械倫理、盤算機倫理、信息倫理、數據倫理)的改變也在產生,并且有很好的實效。例如,緹姆尼特·吉布魯(Timnit Gebru)的研討團隊提出了尺度化的數據表,列出分歧練習數據集的屬性,以便機械進修練習者可以檢討特定命據集在多年夜水平上最合適他們的目標,數據集創立時的初志是什么,數據集由什么數據構成,數據是若何搜集和預處置的等等。由此,機械進修練習者可以在選擇練習數據集會議室出租時作出更明智的決議,從而使機械進修變得更公正、更通明并防止算法輕視。這一在“微不雅倫理”上的任務結果,遭到了微軟、谷歌和國際商用機械公司(IBM)的喜愛,開端在外部試用數據家教集的數據表。“數據養分項目”(DataNutritionProject)采納了部門結果,“人工智能伙伴關系”也在樹立相似的數據表。

將貓裹起來:「給我吧。」最后,在道理上,軟法的“履行實效”凡是是需求一段時光才幹浮現出來的。軟法的明顯特色在于壓服,而不在于強迫,壓服的時光本錢天然是不成防止的。但是,從2016年還很少有人工智能倫理規范,到此刻全球范圍內這般多的當局、非當局組織、年夜型企業等主體發布或更換新的資料此類規范,曾經表白正在構成一種品德共鳴,即人工智能的開闢、應用應該承當起倫理義務。而這個品德共鳴,美國哲學家卡爾·波普爾(Karl Popper)以為迷信界早在核兵器和生化兵器題目上就曾經有了:認可存在一系列特定的要挾,必需預備一批特定的人、一套特定的東西和一組特定的不雅念以應對要挾。從這個角度看,人工智能倫理規范至多曾經取得了“推介實效”,或許其會像企業社會義務一樣,后者花了幾十年的時光,才部門地解脫了“洗綠”或“洗白”的掩飾名聲,制訂了很多公司必需遵守的全球尺度。當然,這最后一點并不盼望以掉包概念的方法,把本文追蹤關心的“履行(實行)實效”主題延長到“推介實效”,只是盼望在察看研討“履行(實行)實效”時增加一個“時光—經過歷程”維度。

三、“實效赤字”緣由及為什么依然需求軟法

(一)人工智能倫理規范“實效赤字”緣由

成長迄今未至十年的人工智能倫理規范,實效即使不克不及簡略地回為零,也在總體上沒有到達解除或極年夜緩解人們對人工智能倫理的掛念、擔心的目的。其緣由重要有以下七個方面。

第一,人工智能倫理規范的非強迫履行性。“人工智能此刻研討所”2017年的陳述指出,倫理規范組成柔性管理的一種情勢,是對硬性的傳統當局監管和法令監視的替換,且在人工智能範疇逐步獲得積極成長,但其有著實際局限性。要害局限在于其假定企業、行業會自愿采用和遵照。2018年的陳述持續指出:“盡管我們曾經看到制訂此類規范的高潮,……可是我們沒有看到強無力的會議室出租監視和問責,來包管這些倫理許諾的兌現。”軟法這一與生俱來的、阿喀琉斯之踵般的致命缺點,成了公認的人工智能倫理規范實效缺乏的最基礎緣由。

第二,人工智能倫理規范的抽象性、含混性。人工智能倫理規范并不是針對人工智能的,而是針對研討、開闢與利用人工智能的人類的,其目的是請求研討者、開闢者與利用者遵守必定的規范,以使人工智能帶來的倫理風險降到最低。是以,該規范越是詳細、明白,就越不難獲得遵照;不然,就很難落實或許存在各類有爭議的落實。但是,現今的人工智能倫理規范基礎是抽象的、含混的,盡年夜大都指南除了用“人工智能”一詞外,從不消或很罕用更為詳細的術語。而人工智能只是一個聚集術語,指向范圍極廣的一系列技巧或一個範圍宏大的抽象景象。沒有一個倫理指南令人注視地深刻到技巧細節,這表白在研討、開闢和利用的詳細情境與普通的倫理思想之間存在很深的鴻溝。盡管抽象性、含混性能夠被以為是不成防止和需要的,由於人工智能的利用極端普遍、成長快且將來

發佈留言

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *

Alexa Robertson

Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat.