美國：擔心軍事機器人程序可能變異危及人類

克里斯Chris

毫無疑問，未來戰爭中，自動機器人士兵將成為作戰的絕對主力。但是美國海軍研究室近日在關於機器人士兵的研究報告《自動機器人的危險、道德以及設計》中，對軍方使用機器人提出警告，建議為軍事機器人設定道德規範。研究人員認為，必須對軍事機器人提前設定嚴格的密碼，否則整個世界都有可能毀於他們的鋼鐵之手。



    報告中表示，為軍事機器人設定道德規範是一項嚴肅的工作，人類必須正視快速發展的機器人，它們足夠聰明，甚至最後可能展示出超過現代士兵的認知優勢。

克里斯Chris

帕特裡克·林博士在報告中表示：「現在存在一個共同的誤解：認為機器人只會做程序中規定它們做的事情。可不幸地是，這種想法已經過時了，一個人書寫和理解程序的時代已經一去不復返了。」


林博士說，實際上，現在的程序大都是由一組程序師共同完成的，幾乎沒有哪個人能夠完全理解所有程序。因此，也沒有任何一個人能夠精確預測出這些程序中哪部分可能發生變異。


    如何能夠保護機器人士兵不受恐怖分子、駭客的襲擊或者出現軟體故障呢？如果機器人突然變得狂暴，誰應該負責呢，是機器人的程序設計師還是美國總統？機器人應該有「自殺開關」嗎？林暗示說，唯一解決這些問題的辦法就是提前為機器人設定「密碼」，包括倫理道德、法律、社會以及政治等因素。

克里斯Chris

警告工程師不要急於求成

    報告還指出，現今美國的軍事機器人設計師往往急於求成，常常會將還不成熟的機器人技術急匆匆推入市場，促使人工智能的進步在不受控制的領域內不斷加速發展。更糟糕的是，目前還沒有一套控制自動系統出錯的有效措施。如果設計出現錯誤，足以讓全人類付出生命的代價。


    設計師的這種心理原因可能與美國國會的命令有關。美國國會規定：到2010年之前，三分之一的「縱深」打擊行動必須由機器人完成；到2015年前，三分之一的地面戰鬥將使用機器人士兵。

克里斯Chris

「機器人三定律」

    事實上，一個簡單的倫理密碼，比如「機器人三定律」早在1950年就已經出台，但它們還不足以控制自動機器人的倫理行為。「機器人三定律」是阿西莫夫最重大的科幻理論貢獻，他在名著《我，機器人》中寫著：

    一、機器人不得傷人或看見有人受傷卻袖手旁觀；

    二、除非違背第一定律，機器人必須服從人的命令；

    三、除非違背第一及第二條定律，機器人必須保護好自己。

－


    「三定律」在科幻小說中大放光彩，在一些其他作者的科幻小說中的機器人也遵守這三條定律。但是，截至2005年，三定律在現實機器人工業中仍然沒有應用。目前很多人工智能和機器人領域的技術專家也認同這個準則，隨著技術的發展，三定律可能成為未來機器人的安全準則。


(國際在線)

yangdv

其實我認為與其給作戰用的機械人一堆原則道得感,不如一開始就不要給它太高的AI,完全由人操作或下指令!!

因為所謂何為道德連人類自己都說不清楚,這樣的人類還要教機械人道德原則? 而且到底說戰爭是人在打的,機械人除了提高作戰效率外目的是要代替人類承受傷亡,給它太多的道德標準啟不是反其道而行?因為有誰能承受自己一生下來就是當異族的專用兵器(砲灰?)的事實呢?搞不好它們就會認為自己本身的存在就是不道德的,這樣的機器人能打仗?

[ 本文章最後由 yangdv 於 09-2-18 16:49 編輯 ]

莫古利

原文由 yangdv 於 09-2-18 16:42 發表
其實我認為與其給作戰用的機械人一堆原則道得感,不如一開始就不要給它太高的AI,完全由人操作或下指令!!

因為所謂何為道德連人類自己都說不清楚,這樣的人類還要教機械人道德原則? 而且到底說戰爭是人在打的,機械人 ...

機器人是未來戰爭的主力這點，其實在很多小說、電影、動漫畫中都提過，在沒有相互犧牲之下的戰爭，能稱之為戰爭嗎? 還是一場遊戲呢? 現在不是說AI高不高的問題，因為軟體沒有100%完美的，不過是現在還是未來，因為設計者是人類，所以軟體也會有出錯的一天或是一次，當好死不好死的錯誤發生了，是否會造成人類被視為有害的生物，就像是魔鬼終結者、還是機械公敵那樣。

所以我不認同機器人作為來為可能還有戰爭時，作為取代人類的位置，因為人類沒有就不會對於戰爭有所在乎，因為這可能只是場遊戲，就算是付於機器人三定律好了，人類也是一種貪婪的生物，難道真的有人永遠只會作低智能的機械人嗎? 不會~人類一直在挑戰極限，更是希望能製造出超越人類的AI，這就難保下一個出現在科幻電影的就是你我了。

yangdv

其實像魔鬼終結者、或是機械公敵就有一個共通點:他們都有高度AI,所以他們會思考什麼是有害的,當人類被歸類有害的,所以人類說它出錯了,所以答案出來了,人類要的只是一個作戰道具,而不是戰友,所以我就是說不希望''作戰''的機器人有AI,意思就是機器人作為戰爭只能幫人類打仗,不可以取代人類打仗
確實人類不可能永遠只製造沒有AI的機器人,所以才會有開板大的文章所提到的憂慮,也是我意見的重點,因為人類模棱兩可的道德定律沒辦法規範會思考而且可以取代士兵的戰鬥機器人,讓他們一定會認同我們的想法~