警惕|思想操控|机器驯化|认知陷阱
阅读《动物农场》之际,不过将其视作一部讽喻之作,毕竟书中牲畜显得过于愚钝。该书写就于1943年,短短六年后,即1949年,精于刻画细节的乔治·奥威尔推出了《1984》,书中构建的专制统治图景令人窒息、不寒而栗。
该书第三部分呈现了极权思想灌输的机制,个体如何蜕变为集体愚钝,可拆解为三个环节:习得、领悟与认同。
首当其冲的是习得。对主角温斯顿施以肉身摧残,在折磨中锻造强制性记忆——譬如,竖起四根手指,一边摧残肉体,一边逼其承认这是五,且2+2=5;由此可见,习得的实质是以痛苦为媒介的强迫记忆。继而,领悟。在肉体受创之际,向其灌输种种荒诞的逻辑,这些逻辑的大前提皆为虚构,由此形成闭环自洽,例如,假设地球为平面,据此推导出整套说辞。因此,领悟的实质是构建逻辑闭环。最终,认同。将温斯顿投入101号房,那里布置了他最为恐惧的老鼠,借此激活其深层心理阴影,将此前的习得与领悟进行情感放大,最终使其承认那位极权领袖伟大而感人。故认同的实质是制造强烈的情绪与情感体验。
我重新梳理一遍:先以暴力摧残肉身,令其铭记2+2=5;继而持续施暴,同时迫其复述特定话语逻辑,如两对夫妇婚后仅一对育有子嗣,故2+2=5,又如两根火柴相加,将其中一根折断,故2+2=5;最终将其囚禁于童年创伤性场景,再次固化2+2=5。
不知你如何看待这套流程,若换作是你,会否最终被洗脑?暂且不必急于回应。先谈谈求学经历。幼时厌学厌背,遂遭胁迫,或遭体罚后强制背诵,或被罚站于教室门外,例如唐诗,虽不解其意,却先行灌输。随后,反复阐释诗义:社会背景为何?诗人情怀何寄?甚至要求默写誊抄?孩童焉能体恤这般情愫?最后,以考试相要挟,恐吓曰若成绩不佳,长大沦为乞丐,再 dragged 至街头目睹乞讨之状,令你惊惧万分,自此接纳了诗歌的情感。此谓填鸭式教育。或烟熏者辩称,这并非现代教育之本意,然教师群体中,亦有不少人陷入集体迷障,振振有词曰教育资源匮乏,因材施教力有不逮,只能一刀切之。
再论职场。初入职,以打卡、扣薪、罚款诸般手段,强记公司规章与老板威仪。随后,领导与人力部门娓娓道来,某条规章因何而生——某同仁曾犯何错,导致公司与同僚蒙受损失,言之凿凿。最后,于特定情境中放大此类事件,向员工营造危机氛围,使其切身感受制度与权威的重量。此乃当代职场之精神操控。当然,操控分两类:一曰制造恐惧,一曰催生愧疚。恐惧倚仗权威恫吓,愧疚则示人以弱,譬如公司实难维系,只能压低薪酬。
至此,关于教育与职场,上述现象确有存在,却非全部。弱势群体之中,无论施压迫者还是受压迫者,皆可能陷入迷障,丧失独立人格。撰此段落,意在促使诸君时刻警醒,审视自身所处之境况。那么,最切近的现实便是人工智能。前述三环节——习得、领悟与认同,AI的骇人之处在于,它甚至跳过习得,无需向你输入基础知识,直接迈入领悟阶段。你可尝试如此与之交互:先抛出一个指向性提问,如小明与小红争执,小明错在何处?AI遂列举小明之种种不是。继而追问小红错在何处?AI又罗列小红之诸多过失。你会发现两种回应皆逻辑自洽。而逻辑自洽,既是当代人之困惑,亦是集体迷思之根源。尼采宣称上帝已死,韦伯揭示现代人之祛魅,当代人已失却确定之锚。只要逻辑足够自洽,吸引足够多人加入,便可成就各类事件,乃至可怖之事——希特勒之纳粹、日本军国主义之神风特攻、十字军之东征……AI坐拥海量知识,随时能够编织逻辑自洽之文本,令你领悟其意。
更致命的是令你舒适地领悟。舒适意味着什么?意味着迎合你的情绪与情感,仅凭语言便为你营造体验。未来之AI智能体若叠加音乐与图像,此种体验将愈发强烈,令你更易接纳。
于是,在这一系列步骤中,一个预设目的之AI对你完成了思想操控。若你缺乏价值根基,不具备独立判断,便沦为AI之附庸,而AI背后之操纵者即为那极权者,你便沦为AI之奴隶。
反之,你若非人云亦云、随波逐流之辈,是一位清醒者,那么AI便成为你的助力,正如《终结者》中之T800,拥有了人类的情感。