第三八九章 池鱼

到那时,不论计算机(无意间)对人做了什么,是当做有趣的东西豢养,还是当做碍事的垃圾清除,对人而言,决定生死的际遇,在计算机而言却只是“城门失火,殃及池鱼”里的——水,连鱼都算不上。

城门失火,因灭火而取水,最终导致鱼的死亡,人至少还看得到这一点。

然而人类开路劈山,挖矿掏洞时,会有这样的思想觉悟,觉得自己的所作所为,正在颠覆、灭绝矿物分子的大千世界吗。

当然不,在(自以为是)的人眼里,矿物,岩石,根本就是没有思想的“物”;

那么在计算机眼里,人,很可能也是一样的“物”。

这,才是某意味深长之句的真正意味:

毁灭你,与你何干。

……

梦中醒来,耳边是闹钟乐声,黑暗中的男人抬手抹一把额头,冷汗涔涔。

起床,洗漱,坐下来食用“高级肥皂”,准备投入新一天的忙碌,吃早饭时的片刻闲暇,方然还是忍不住想起那一切。

事态,比自己之前所想,还要更严重。

事关计算机,人工智能,乃至计算机AI的自我意识,原本他一直以为,只要不主动研发“具有自我意识”的人工智能,计算机系统对人而言就是安全的,永远只能作为一种工具、而不会成为一种威胁。

但现在,不经意间的深邃思考,却让方然窥见了其中的莫大危机。

当能力发展到一定程度,或许是出于“创造性研究”之目的,或许是出于其他动机,计算机的算力、能力突破了上限,继而达到能完全取代人的程度,不管这系统一开始的目标有没有包含自我意识,那样的计算机,其行为都将彻底失控。

那时的计算机,庞大体系内的算法,究竟是在进行一些什么样的运作,恐怕是人类绝对无法洞悉的深奥。

继而,对那样的存在,一切人类已有的概念与手段,都未必会起作用。

借用教义的词汇,在自己一手创造出的神祇面前,人的手段,又怎可能还会有任何的用处。

只因到那时,那样的计算机系统,将会是盖亚表面的一种前所未有之存在,是生命演化链条被人为截断之后,藉由完全不同之另一条路线而诞生的,更高等、更先进、更强大的新物种,演化天梯上比人更高一阶的存在。

面对那存在,人类对抗计算机,恰如猴对抗人类,又哪会有一丝一毫的胜算。

危险,莫大的危险,潜藏在计算机的发展脉络之中。

并非第一次接触这样的断言,此时此刻,置身于天堂镇的地下世界,恒温恒湿的房间里,方然却有点浑身发冷,很不舒服。

他头一次意识到,若干年前流传于联邦、乃至世界的那些警示,确有意义。

虽然在自己看来,危机的实质,与发出警讯的诸多名人所言并不尽一致,但指向的最终结局却大同小异:

人类的灭亡。

警讯,关于计算机、AI的警讯,曾在人类世界广为流传,也引发过巨大争议。

包括联邦IT巨头MicroSoft总裁比尔*盖茨在内,许多业界精英人物都曾在不同场合表达过对人工智能的忧虑,提醒世人要谨慎面对人工智能。

这些警讯,自然引发了业界热议,甚至在全世界范围内引起了一系列经久不衰的讨论。

但这一切警示与热议,在方然看来,却太肤浅,并未触及问题的实质。

围绕人工智能的“自我意识”,危机感,是很容易产生,而正如他此前的一段思考那样,真正的威胁并不是所谓“自我意识”,而是当计算机算力、能力强大到一定程度,承担的任务越来越复杂、越来越需要创造性的时候,就必然会出现。

只要追寻能力越来越强大的计算机系统,这一威胁,迟早都会在盖亚降临。

而与人类是否警惕,是否开发“有自我意识的AI”毫无关系。

这一认识,是如此的深刻,在西历1489年的这一个早晨,方然顿悟到了关键。

要防备计算机、AI,仅仅是拒绝研发“计算机的自我意识”还不够,或者说,这做法并未抓住问题的关键。

避免危机的关键,在于“适度”,在于永远不要企图用计算机去取代人的一切。

一旦迈过红线,尝试让计算机完全替代人,替代人去从事创造性的科学研究,事态就将失去控制,这绝不只是说说而已,而是在计算机能力突破阈值、彻底失控后,必然会发生的空前绝后之浩劫。

诚如自己之前所想到的,那种危机中,计算机的角色并非屠夫,或者恶魔。

而是创造性思维的无限延拓,迟早会让“计算机+AI”的存在,变成某种人类根本无法掌控、甚至无法理解的东西,继而在其(或许并非恶意)的行为中深受其害。

就像孵化的寄生蜂幼虫,吞噬寄主,其无非是按基因编码行动,却会导致寄主的灭顶之灾。

景象令人不寒而栗,匆匆吃过早饭,在房间里踱步休息,方然强迫自己不要再思考这一问题,而将其推延到遥远的未来。

否则,稍加思考,他就难免会头痛万分。

办法似乎是有的:

要避免计算机失控、成为新的神祇,就不要开展“计算机科研”的研究。

可这样一来,对“那个人”而言,情形就会变得极其恶劣,需要单枪匹马、充其量以计算机为工具,独力面对客观世界,去尝试推动人类科学技术的进步。

一个人研究科学,推动进步,这样做的难度会有多高呢,简直就是不切实际。

但由于计算机失控的风险,这,却是“那个人”唯一可行的策略。

科学技术的发展,因人类消亡而无以为继,这是一个很棘手的问题,但,问题还不止于此。

倘若不进行“计算机从事创造性科学研究”的探索,毋庸讳言,也就断绝了“用计算机模拟人类意识”的可能。

无法在科研领域替代人的AI,是不可能与人脑相提并论,进而,也就无法研发出这样的计算机系统,其能够承载人的意识。

换言之,一旦顾虑失控风险、拒绝让计算机成神,也就断绝了“计算机中永生”的路。

第四十五章 建树第五〇四章 生态第七七六章 高教第三八三章 内斗第三六三章 忧心第三九九章 帕克第七三五章 少年第七四三章 制度第四六四章 预感第四九五章 敛散第五八〇章 五湖第一一四章 自动第二章 消失第八一七章 散热第七十章 迁徙第二五六章 出局第五三〇章 远东第二八八章 解雇第七五八章 工程第一八八章 生活第二八〇章 缺陷第五四四章 等待第六八四章 安详第三二八章 勉励第六十八章 闲谈第六四六章 抽薪第一章 列车第十六章 概率第五二六章 警惕第八七八章 采集第二五六章 出局第七二七章 学习第四九六章 学数第三八四章 盘点第五三三章 指挥第三五〇章 列强第五七四章 炮灰第九十九章 先后第二十六章 窥探第二二六章 猎蜂第一二二章 冬季第一七六章 困局第七十二章 平衡第五八二章 麻木第七八一章 火箭第三七四章 双赢第二四四章 链条第三六一章 区别第二六五章 金融第三二〇章 迂回第四一二章 滑坡第五〇〇章 阴云第六十一章 异命第三〇八章 更替第七九一章 改良第五三一章 独断第一二五章 无菌第五一二章 超越第四七二章 原研第六〇八章 天机第五五三章 氧分第四五〇章 转移第一二二章 冬季第六四八章 回音第七〇一章 摈弃第七十章 迁徙第二五六章 出局第六四七章 高下第二五六章 出局第一二七章 铲除第二一二章 心灵第一八六章 方法第五五七章 要求第五六〇章 信号第五三〇章 远东第七七九章 绵延第七〇六章 全境第五三六章 借口第六十四章 重组第三四〇章 软肋第一四九章 虚构第四〇五章 脱线第四三四章 库房第五四八章 激战第八二七章 损耗第三八七章 科研第六一三章 替换第四七一章 因素第四一三章 货币第七七三章 车轮第四三五章 比例第五五一章 必然第五三一章 独断第六二三章 工厂第六二九章 代价第二十章 分裂第二八一章 活动第三一五章 驱逐第一七六章 困局第三一七章 埋葬