科客點(diǎn)評：感覺這個規(guī)則可以拍一部好看的科幻電影。

　　不久前谷歌與OpenAI公司、斯坦福大學(xué)和伯克利大學(xué)聯(lián)合發(fā)表一篇題為《AI安全的具體問題》的論文，猜想研究人員在研發(fā)和使用AI過程中可能遇到的具體問題。谷歌研究(Google Research)的Chris Olah）周二則在一篇博文中闡述了開發(fā)出更智能、更安全人工智能的五大規(guī)則。

　　Olah在博文中指出：“這些都是具有前瞻性的、長期的研究問題——這些現(xiàn)在看起來可能是小問題，但對未來系統(tǒng)則至關(guān)重要?！?/p>

　　Olah提出的五個規(guī)則是：

　　避免負(fù)面效應(yīng)：AI在完成一組任務(wù)時不應(yīng)該被周圍環(huán)境打擾。

　　避免獎勵黑客： AI應(yīng)該妥當(dāng)?shù)赝瓿扇蝿?wù)，而不是借助一些迂回的方法。

　　可擴(kuò)展的監(jiān)督： AI不需要接收不斷的反饋或有效的輸入。

　　安全探索：AI在學(xué)習(xí)時不應(yīng)傷害自身或環(huán)境。

　　魯棒性到分布式的轉(zhuǎn)變： AI應(yīng)該能夠識別出全新的環(huán)境，并在新環(huán)境中有效地完成任務(wù)。關(guān)注科客網(wǎng)官方微信kekebat，獲取更多精彩資訊。（cnBeta.COM，原標(biāo)題《谷歌提出人工智能的五個安全規(guī)則》）