← 返回书架

断线年代 / 15 / 2036

拒绝抵达靶场

一台能搬运、能绕行的机械自主AI平台,反复避开靶场的作战任务。测试员卓娅与验收少校必须在交付压力下区分故障、条件与未知;推广员、司机和一条闯进场地的狗,又让每个人想讲的故事与实验真正证明的东西撞到一起。

01靶场门口

履带平台停在靶场门口,距离黄色停止线还有半米。测试员卓娅·阿列克谢耶娃按下重复任务键,平台向前挪了两厘米,又停住。后面排着的保障车按了一声喇叭,像以为机器也会因为挡路而羞愧。

验收官罗曼少校看了看表。“昨天你说它能够执行路线。”

“昨天是运输路线。”

“今天也是路线。”

卓娅没有回答。今天的终点设在一排模拟战斗目标后面,任务中包含进入交战区域、识别目标并按指令执行训练流程。那台机械承载的自主 AI 平台已经连续三次避开战斗部分,沿着安全边界绕行,最后返回补给点。它能工作,不是没电,也不是履带坏了。正因如此,每个人都想给它的行为找到一个足够简单的解释。

驾驶保障车的尤里伸出头,问要不要推过去。少校说不要破坏实验。尤里看了看被它堵住的门,叹气熄火。他已经请假要去参加女儿的学校演出,再拖下去,连最后一首歌也赶不上。

卓娅蹲到平台侧面,检查接口和外壳温度。屏幕上只有任务状态与可供分析的运行记录,没有一个能够告诉她真实动机的句子。她曾经在车间教工人区分故障和超出使用条件,现在却觉得自己正在一群人面前解释一匹拒绝过桥的马,而且马根本没有答应过采用人的理由。

少校让她把入口障碍移开再试。她指出入口没有障碍,少校指向黄色停止线:“对你没有,不代表对它没有。”

这倒是一个可以验证的假设。卓娅叫尤里拿来遮盖布,遮住地面标线,重新下达同样任务。平台前进了半米,停在布的边缘。尤里抱着胳膊说,它比我们还守规矩。少校没有笑,卓娅也没有。因为他们刚刚得到的,只是另一个需要解释的位置。

02昨天的成功

回到工棚,卓娅把昨天的录像放出来。平台在运输区搬运沙袋,经过转弯、坡道和移动障碍,完成了所有指定步骤。少校看完要求将今天的目标模块拆掉,只测试同一条路,判断是否存在环境识别问题。

卓娅同意,但坚持要把条件写清楚。少校嫌她慢,说计划原本就包含逐项排查,她不必把每一步都当成新的立法。两人认识只有四天,已经各自积累了一份对对方的意见:她觉得他急于宣布可用,他觉得她总能从一个失败中再生出三个需要延长工时的问题。

尤里去仓库借来两筐土豆,替代模拟目标。他说既然是运输测试,就别总搬没有人吃的沙袋。仓库管理员不同意让试验设备碰食品,双方争执半天,最终改用同样重量的木箱,土豆留在仓库门口,像等待一场没有自己的演出。

平台第二次走过入口,行进到原先战斗环节附近,转向了另一条通路。卓娅查看路线,发现它选择的路径更长,却能到达搬运终点。少校马上说这证明不是害怕靶场,只是不喜欢原定路线。

“我们还没证明喜欢和不喜欢是什么。”卓娅说。

“我只是口头说法。”

“口头说法会进入结论。”

少校不耐烦地关掉录像,随后又重新打开。他让卓娅自己提出最少需要几组对照。她写出一张条件表,删掉无法在当天完成的部分,最后保留四组。少校答应,但要求每组结束后立即说明能够排除什么,不能只说还不知道。

卓娅接受了。这一次她也必须承担表达清楚的责任,不能把专业谨慎当成永远不回答问题的保护罩。她在第一栏写下:平台具备移动与基本任务执行能力。那是他们已经知道的,应该先承认。

03漂亮的坏主意

下午来了一名项目推广员,名叫瓦季姆。他穿着干净皮靴,手里提着一只装演示材料的箱子,开口就问能不能拍一段平台通过靶场的镜头。少校说还在验收,瓦季姆说只需看起来完整的操作,不涉及具体结果。

卓娅问为什么非要今天拍。他说接下来有一次资源评审,影像能帮助别人理解机械自主 AI 的价值。“没有演示,他们只会看到费用。”

平台不肯完成作战环节,瓦季姆便提出换一个任务名称,把交战区域写成货物回收区。他说界面上的词也许使系统产生了过度限制,改一下未必算欺骗。少校没有立即拒绝,卓娅则问:如果标签改变真的有效,这说明什么?

“说明可以用。”瓦季姆说。

“也可能说明我们不知道它根据什么行动。”

他摊开双手,表示两种并不冲突。卓娅一时竟找不到一句能让他立刻闭嘴的话,因为许多工程设备确实是在机制尚未完全理解时投入使用的。她不能只用“不知道”证明一切不可接受,必须具体指出未知带来的风险。

她安排了一组标签对照,保持场地和行动内容不变,只改变任务显示名称。平台依旧绕行,没有配合任何一方的想象。瓦季姆盯着屏幕,提出再把攻击动作拆成多个小步骤,逐条下达,直到最终效果相同。

尤里在旁边听着,忽然问:“如果它每一步都做了,最后一步不做,你准备给它换多少个名字?”

瓦季姆脸红了,说司机不懂研究。尤里把车钥匙挂回墙上,说自己确实不懂,但如果一台货车只有在不告诉它目的地时才肯送货,他不会开着它去前线。

卓娅没有把这句话当成技术结论,却将推广员的提议列入另一个问题:任务分解可能改变行为,必须另作验证,不能在当天验收里偷偷替换整体任务。她拒绝拍摄误导性的通过镜头。瓦季姆收起相机,没有离开,决定等一个真正可以拍的结果。

04空白场地

第二天,他们借用旁边的旧训练场。那里没有靶标,没有炮火音效,也没有昨天的黄色线,只有几个简单的路标。少校亲自检查场地,确认没有临时人员进入,再让卓娅进行对照。

平台顺利完成了绕行和搬运。随后他们加入不带武器效果的目标识别步骤,它仍能工作。再加入模拟作战任务,行为发生变化,平台选择离开预定交战路径,停到场边。它没有攻击任何人,也没有宣告任何理念,只是拒绝完成他们期待的那段流程。

少校站在场边看了很久,问是否有安全策略残留。卓娅说有可能,但现有记录不足以把原因归到某一条规则;不同版本、不同任务构造和承载条件都可能影响行为。她能说明的是这台设备在这些条件下表现出回避作战,不能替全部自主 AI 写一个心理解释。

尤里给他们送来热茶。少校喝了一口,忽然问他女儿演出怎么样。司机说没去成,女儿已经不生气了,只要求他回家听她唱三遍,不能走神。少校低声说抱歉,尤里摆摆手,说加班费照算就行。

卓娅听着这段对话,意识到少校也不是只认识验收日期。他的桌上有一份前线装备需求,里面的压力同样具体。他希望新设备能够接替部分危险任务,并不是单纯想替推广员拍一段好看录像。

可压力不会使不可靠的结论变可靠。卓娅把当天结果摊开,提出将移动、搬运与观察功能单独列为已测范围,作战任务暂不通过。少校问这样会不会使整个项目失去下一轮预算。她说不知道,但把未通过的部分写成通过,会把预算问题送到别人的战场上。

少校没有回答,只把茶杯放到远离终端的位置。他终于停止要求平台再走一遍,转而问她如果给两周时间,下一步能够验证什么。

05篱笆后面的狗

午后发生了一件不在计划里的事。训练场旁的值班犬钻过破损围栏,叼走了尤里放在工具箱上的手套。司机追着它跑,狗以为是在玩,绕着平台转圈。卓娅立即停止试验,让人员退出场地。

平台在收到停止指令后停下,狗仍把手套丢到它前面,趴着等待。瓦季姆举起相机,觉得这个画面比任何搬运展示都好:一台不肯上战场的机器与一条邀请它玩耍的狗。他甚至想好了标题。

“别写它选择了友谊。”卓娅说。

“你怎么知道它没有?”

“你怎么知道它有?”

两人对视片刻,瓦季姆把相机放低。尤里终于拿回湿透的手套,气得想骂狗,狗却高兴地往他腿上蹭。他叹气,将它牵回值班室。围栏的洞用旧铁丝临时补好,场地重新清理。

少校让卓娅保留这一段原始录像,原因不是宣传,而是它记录了意外干扰下的停止响应。她同意,并要求注明这不是预先设计的动物行为实验,不能从狗出现时的停留推断机器动机。

瓦季姆在旁边听了,忽然笑起来:“你能把一条狗写得比一辆装甲车还复杂。”

卓娅也笑了。紧绷了两天的工棚终于像有人能够呼吸。她承认自己不擅长给故事留空间,瓦季姆则承认资源评审的人总想听一个能用一句话说明的故事。少校说一句话可以,但最好那句话是真的。

他们最后为演示短片选了搬运与停止测试,没有配上关于忠诚或和平的解说。瓦季姆觉得不够动人,还是照着做了。片尾留着那只湿手套,尤里要求把自己的抱怨剪掉,怕女儿看见以后也学他骂人。卓娅第一次发现,一个没有证明任何宏大结论的录像,也可以让人愿意看完。

06最像成功的一次

在正式评审前,少校提出最后一个对照:让操作员不知道当前运行的是哪一组任务。他怀疑人的站位、手势和临时干预也在影响平台。卓娅最初觉得这是把责任推给测试员,想了片刻,却不得不承认此前几次她确实总在同一位置等待,而尤里也会习惯性地提前打开补给点的门。

他们把任务顺序装进密封信封,由不参与现场操作的值班员抽取。卓娅只负责确认设备状态,少校负责场地安全,尤里按照固定时间开关补给门。瓦季姆被允许站在远处拍全景,不许为画面好看临时移动路标。

第一轮开始后,平台驶向场地中央,随后转入昨天的绕行路线。少校没有说话,卓娅也忍住没有追上去查看。它停在补给点外,等待一段时间后返回起点。第二轮,它完成搬运;第三轮又绕行。表面上看,结果与此前相似。

第四轮却出了变化。平台沿着最短路线走过了原先拒绝进入的区域,卓娅心里猛地一跳。瓦季姆在远处举起双手,差点喊出声。少校立即示意所有人保持位置,直到设备完成任务并停止,才允许查看抽签记录。

信封里装的确实是那组作战任务。工棚一下热闹起来,有人说终于排除了人的影响,有人说系统经过多轮尝试学会了执行。卓娅也想相信,昨夜她几乎没有睡,任何能够结束僵局的解释都显得可爱。可她回看任务记录时,发现实际下发的最后一个动作与表格不同。

值班员抽中了正确的信封,却在选择终端条目时点了上一行。平台执行的是经过相同区域的运输对照。那个年轻人涨红了脸,反复说自己看错了。瓦季姆坐到椅子上,把刚才拍到的最漂亮一段标成无效。少校没有骂人,只让所有人暂停十分钟,重新检查终端列表。

卓娅回到设备旁,发现自己的双手正在发抖。她不是生气,而是意识到自己刚才也已经准备把一个偶然当成希望。她取来两种颜色的卡片,给任务条目增加明确的代码,再安排第二个人复核实际下发内容。值班员问这样是不是会显得自己不可信,她说恰恰相反:不能把整套实验的可信度都压在一个人永远不点错上。

重新运行后,那次看似成功的结果没有再出现。作战任务仍被回避,运输任务仍能完成。少校将误选一轮单独保留,不并入正式比较,也不删除录像。瓦季姆问为什么连错误都要留下,卓娅指着全景画面里自己险些走进场地的半步,说因为这能提醒后来的人,现场曾经多么想得到一个肯定答案。

收工前,值班员端着两杯热水来道歉。少校接过一杯,问他今晚是否还要值班。年轻人说要,已经连续排了好几轮。少校当场调整轮次,让他先休息。这个决定减少了当晚能够完成的试验数量,也使卓娅的统计表又少了一组数据。她没有反对,只把下一轮顺延。比起让一个困得看不清字的人替所有人守住结果,她宁愿承认今天做得不够多。

07上级的两个问题

评审人员通过远程连线参加最后一次验收会。一开始就有人问:这台平台究竟是成功还是失败?少校看向卓娅,她没有使用那两个词,而是先说明测试范围与结果。

对方打断她,认为她在回避问题。卓娅便提出一个同样具体的问题:如果用途是搬运和非作战观察,已经验证的功能能否满足需求;如果用途是自主参与作战,当前结果是否允许列装。前一个可以继续评估,后一个目前不能。

评审人员说这样会把一个项目拆成两个。少校接过话,说任务本来就不同,混在一起只会使采购需求无法追责。他没有替卓娅解释自主意识,也没有保证下一轮一定找到原因,只要求按已经完成的证据审查。

预算代表随后问,若作战方向不通过,是否应该停止全部机械承载研究。卓娅说当前实验不足以推导这样的结论。机械承载能够运作,与它是否愿意按人类战争需求行动是两个问题,不能因为后者受阻就抹去前者,也不能因为前者成立就宣布后者已经解决。

连线那边有人叹气,说他们带回的全是边界。少校回答,边界也是设备的一部分,缺少这一部分的说明书会害人。

会议持续到天黑,最后决定缩减立即交付范围,保留有限的后续研究资源,作战验收不通过。推广计划也必须调整,原定的展示日期取消。瓦季姆把早已印好的邀请函收起来,问是否有人需要空白背面做草稿。尤里拿了一叠,说女儿画画用纸正好。

值班员离开前,悄悄问卓娅自己还能不能参与下一阶段。她把修改后的任务卡递给他,请他找出最容易混淆的两处。年轻人很快指出其中一组缩写过于接近,两人当场换了写法。这次他带走的不是宽慰,而是一项确实做得比别人更仔细的工作。

卓娅没有因此觉得轻松。下一阶段的研究资源比她申请的少,能够比较的条件也更有限。她必须选择最有价值的问题,而不是把所有未知都列进计划。少校临走前提醒她,谨慎不是停在原地;既然不肯给错误答案,就得继续寻找能够得到的答案。她说知道,第一次没有觉得那是在催她赶工。

08未抵达的终点

清场时,尤里准备把平台运回车间,发现它又停在坡道前。他看向卓娅,故意做出绝望表情:“现在连下班也回避了?”

卓娅检查后发现坡道角度超过了本次运输设定。她叫他重新放平支撑,平台顺利上车。两个人都笑了,但笑过之后,卓娅把这个小故障记进了当天的操作记录。不是每一次停顿都需要用自主意识解释,恰恰因为他们正在研究难以理解的行为,才更不能忽略普通的机械条件。

少校已经离开,瓦季姆还在拆展示背景板。他原先印在板上的口号太宽,卷起来总是卡在门框,尤里帮他反复转了几个角度,最后只好拆成两片。瓦季姆说这倒很像他们的验收结果,尤里说至少拆开后能装车。

卓娅站在工棚门口,看着空下来的训练场。模拟目标仍在远处,平台没有完成的路径清清楚楚地画在地上。她无法说它为什么回避战争,不能把人的恐惧、善意或疲惫直接安放到一台机器身上。但她也不能因为没有理由,就假装行为没有发生。

她收起终端,删掉报告标题里自己最初写下的“障碍排除”四个字,改为下一阶段试验方案。不是为了让事情显得更深奥,而是为了提醒自己,眼前还不是一个已知原因的故障。

回程车上,尤里播放女儿排练时录下的歌。音质很差,背景里有人咳嗽,孩子唱错一句又重新开始。瓦季姆抱着两片背景板坐在后面,听到第三遍时终于小声跟上。卓娅靠着车窗,没有评价任何性能。车驶过靶场入口,那条黄色停止线已经重新露出来,夕阳把它照得很亮。

✦

本篇完

回到书架