我们该如何教机器学习?
2013年夏天,一篇平平常常的帖子出现在谷歌的开源博客上,标题是《学习词汇背后的含义》。
帖子中说:“目前计算机还不太擅长理解人类语言,虽然离这个目标还有一段距离,但我们正在利用最新的机器学习和自然语言处理技术取得重大进展。”
谷歌从纸媒和互联网获取了大量人类语言数据,比以前最大的数据集还大几千倍,将数据集输入一个受生物学启发的“神经网络”,并让系统寻找词语的相关性和联系。
借助所谓的“无监督学习”,这个系统开始发现模式。例如,它注意到词语“北京”与“中国”的关系,同“莫斯科”与“俄罗斯”的关系一样,不管词语的意思是什么。能否说计算机“理解”了?这个问题只能让哲学家来回答,但是很显然系统已经抓住了它“阅读”的内容的某种本质。
谷歌将这个系统命名为“word2vec”――意思是将词汇转换成数字向量――并将其开源。对数学家来说,向量有各种奇妙的性质,你可以像处理简单的数一样处理它们,进行加、减、乘运算。通过这种方式,研究人员很快发现了一些惊人的意想不到的东西。他们称之为“连续空间词汇表示中的语言规律”,对它的解释没有听起来那么难。word2vec把词汇变成了向量,这样你就能对词汇做数学运算。
例如,如果输入中国+河流,就会得到长江。输入巴黎-法国+意大利,就会得到罗马。
输入国王-男人+女人,就会得到女王。
结果很惊人。word2vec系统开始应用于谷歌的机器翻译和搜索引擎,业界也将其广泛应用于其他领域,例如招聘,它成了科学和工程界新一代数据驱动的语言学家的必备工具。
两年过去了,没有人意识到存在问题。
这是一本关于机器学习与人类价值观的书:关于不通过手工编程而是从数据中学习的系统,关于我们如何教它们,以及教什么。
机器学习主要包括3个领域:无监督学习,机器被直接给予一堆数据,就像word2vec系统一样,目的是理解数据,找到模式、规律、有用的方式来提炼、表示或可视化数据;监督学习,系统被给予一堆已分类或标记好的例子进行学习,比如假释犯是否再犯,然后用习得的模型对从未见过或尚不清楚基本事实的新例子进行预测;强化学习,系统被置于一个有奖惩的环境中,就像补能和危险并存的赛艇赛道,目的是找出最小化惩罚和最大化奖励的最优方法。
越来越多的人意识到,世界正逐渐以各种方式依赖于机器学习领域给出的数学和计算模型。这些或简单或复杂的模型――一些只能算是电子表格,另一些则可被称为AI――正逐步取代人类判断和更传统的显式编程的程序。
这不仅发生在科技和商业领域,也发生在具有伦理和道德影响的领域。司法体系越来越广泛地使用“风险评估”软件来决定保释和假释。道路上的车辆越来越多地自动驾驶。我们的贷款申请、简历和体检结果逐渐不再由人类负责评估。进入21世纪,越来越多的人都在致力于让世界――在象征意义上和字面意义上――自动驾驶。
近年来,两个不同的群体敲响了警钟。第一个群体关注当前的技术伦理风险。如果面部识别系统对某个族群或性别特别不准确,或者如果有人被未经审核的统计模型判定不得保释,而法庭上的所有人――包括法官、律师和被告――都不理解,这就存在问题。这样的问题无法在传统的学科领域内解决,只能通过计算机科学家、社会学家、律师、政策专家和伦理学家的对话来解决。对话已经开始。
还有一个群体担忧的则是未来的危险。随着我们的系统越来越能灵活、实时地做决策,无论是在虚拟还是现实世界都面临这种危险。毫无疑问,过去10年见证了AI和机器学习发展史上最令人振奋但也最突然最令人担忧的进展。与此同时,一种无形的禁忌逐渐被打破,AI研究人员不再避讳讨论安全问题。事实上,过去5年,在这个领域,这种担忧已经从边缘变成了主流。
虽然对于应优先考虑眼前的问题还是长远问题,目前还存在争议,但这两个群体在大目标上是一致的。随着机器学习系统越来越普遍和强大,我们会发现自己越来越经常地处于“魔法师学徒”的境地:我们召唤出一种力量,给它一组指令,希望它自主但又完全顺从,然后一旦我们意识到指令不准确或不完整,又手忙脚乱地阻止,以免用我们的智慧召唤出某种可怕的东西。
如何防止这种灾难性的背离――如何确保这些模型捕捉到我们的规范和价值观,理解我们的意思或意图,最重要的是,以我们想要的方式行事――已成为计算机科学领域最核心、最紧迫的问题之一。这个问题被称为对齐问题(thealignmentproblem)。
随着研究前沿越来越接近开发出所谓的“通用”智能,现实世界的机器学习系统越来越多地介入个人和大众生活的道德伦理领域,对这一警告产生了一种突然的、充满活力的反应。一个多元化团体正在跨越传统的学科界限。非营利组织、智库和研究所纷纷积极参与。越来越多的工业界和学术界领袖开始大声疾呼,并相应地增加研究经费。第一代专攻机器学习伦理和安全领域的研究生已经入学。对齐问题的第一批应对者已到达现场。

书名:人机对齐
原版书书名:TheAlignmentProblem
出版时间:2023年6月
作者:【美】布莱恩·克里斯汀著;唐璐译
这本书是近100次正式采访和数百次非正式谈话的产物,历时4年,行程数万公里,来自这一年轻领域广阔前沿的研究者和思想家。我发现的是正在一片荒原上开拓的进程,既令人振奋,有时也令人恐惧。我原以为自己对这个故事很熟悉,结果却发现这个故事比我曾认为的更吸引人,更令人担心,也更充满希望。
机器学习表面上是技术问题,但越来越多地涉及人类问题。人类、社会和公众难题正在变得技术化。技术难题正在变得人性化、社会化和公众化。事实证明,我们在让这些系统“以我们想要的方式行事”方面的成功和失败,为我们审视自我提供了一面真实的、启示性的镜子。
这个故事由3个不同部分组成。
第一部分探讨对齐问题的前沿:现有的系统已经与我们的根本意图不一致之处,以及在我们觉得有能力监督的系统中尝试掌控这些意图的复杂性。
第二部分将重点转向强化学习,我们逐渐开始理解不仅能预测,而且能行动的系统;其中有一些经验可以帮助我们理解进化、人类动机和激励的微妙之处,对商业和育儿都有启发。
第三部分将我们带到AI安全研究的前沿,我们将了解目前最好的一些想法,如何将复杂的自动系统与过于微妙或复杂、无法明确的规范和价值观相结合。
不管是好是坏,未来一个世纪的人类故事都很可能是建立并启动各种各样的智能系统。就像魔法师的学徒一样,我们会发现自己也只是在一个充斥着扫帚的世界里的众多自主体之一。
我们到底该怎么教它们?教什么?
——互动问题——
你认为机器学习会有什么风险?
欢迎在文末留言,将随机抽选三位用户送出《人机对齐》一本。
获奖名单将在下期“蝌学荐书”中公布,欢迎留言~
恭喜上期获奖者@小燕子、@宋婷、@小沈 获得《读虫记》一本,请与蝌蚪君联系获取赠书。
责编:咕噜

大家都在看
-
玻璃机械防腐 最核心的性能到底是什么 做玻璃深加工的同行,选防腐涂层时,是不是总被五花八门的参数晃花眼?盐雾时长、表面硬度、耐酸碱值,个个标得亮眼,可用到自家生产线上,没几个月就鼓包掉漆、锈迹斑斑,问题到底出在哪?很多人觉得是硬度不够,或 ... 机械之最03-22
-
世界不锈钢之最:一张图看懂10种“王者级”不锈钢,用途一目了然 在工业制造、家居生活、医疗器械、海洋工程等领域,不锈钢早已成为不可或缺的材料。但你知道吗?不锈钢并不是只有一种,不同型号性能天差地别,有的耐高温、有的耐强酸、有的薄如蝉翼,还有的堪称“不锈钢界天花板” ... 机械之最03-22
-
三一重工:工程机械隐形冠军,从跟随到领跑的硬核逆袭 说起隐形冠军,很多人第一反应是那些藏在产业链深处、不面向普通消费者,却在细分领域牢牢占据霸主地位的企业。工程机械行业听起来离日常很远,可我们脚下的路、住的楼、坐的高铁背后,都离不开这个行业的支撑,而三 ... 机械之最03-22
-
5类机械中最常用的机构,原理、类型、应用一次性讲透 做机械设计、机电一体化相关工作的朋友都清楚,机构是所有机械设备的核心骨架,小到日常的缝纫机、门禁开关,大到起重机、机床生产线,都离不开基础机构的支撑。很多刚入门的新手总被各类机构的原理、选型绕晕,今天 ... 机械之最03-21
-
沃野染新绿 春耕绘丰景——从春耕一线看“十五五”开局农业生产新气象 3月20日,春分时节,恰逢农历二月初二“龙抬头”。“春分龙抬头,五谷大丰收。”当前,南方早稻开始育秧,北方冬小麦全面返青,广袤田野上生机盎然。“抓好春耕备耕,对于确保粮食丰产和粮食安全至关重要。”习近平 ... 机械之最03-21
-
二月二,龙抬头,一同走近“华夏第一龙” 今天是农历二月初二民间俗称“龙抬头”的日子让我们一同走近一件“了不起的文物”绿松石龙形器它被称为“华夏第一龙”许多学者认为它是中华民族龙图腾最直接、最正统的根源“超级国宝”,叹为观止2002 ... 机械之最03-21
-
叙事权的博弈:从《霍去病》看AI时代的技术迷恋 作者:谭 苗 李婧怡近期,以AI作为核心生产工具生成的短片剧集《霍去病》引发广泛争议。但与作品相比,出圈的并非剧集本身,而是网络舆论所塑造的AI神话。“团队仅有3人”“仅花费3000元成本”等数据引发全网惊叹, ... 机械之最03-21
-
真金白银来了丨氢能工程机械,这次真的可以干 3月16日,工业和信息化部、财政部和国家发展和改革委员会联合印发了《关于开展氢能综合应用试点工作的通知》。这份面向“城市群”的试点部署看起来像是能源与交通的事,但对工程机械行业来说,它其实把一扇门敲开了 ... 机械之最03-20
-
慢牛退潮后才懂:我们面对的不是市场,是量化机器 指数缓步上行的假象褪去,市场露出最残酷的真相:慢牛遮羞布一扯,全是量化的屠刀在挥舞。2026年3月,A股成交额从万亿台阶回落,波动加剧、个股闪崩频发,曾经温和的赚钱效应消失殆尽。上交所最新数据显示,全市场81 ... 机械之最03-20
-
300℃铁锅里的“费头子”:大巴山22岁高级茶师的“叛逆”与坚守 封面新闻记者 谢杰 舒俊瑜 彭雨田 摄影报道三月,四川巴中南江,茶山起雾。22岁的赵小龙把手伸进300℃的铁锅,鲜叶翻滚,逐渐炒制出扁平绿茶。这个从茶山走出来的“00后”,年纪轻轻,却来头不小:国家一级评茶师、 ... 机械之最03-18
相关文章
- 打造全域科创“超级试验场”——上海杨浦构筑智能经济“生态之林”观察
- 慢牛退潮后才懂:我们面对的不是市场,是量化机器
- 机械类9大“炮灰”专业+死亡城市对照表!选错,985毕业也失业!
- 别再骂机械类是天坑!工科之母 全行业刚需 越老越吃香,十年不失业
- 300℃铁锅里的“费头子”:大巴山22岁高级茶师的“叛逆”与坚守
- 机械类报考,最值钱未必是机器人
- 机械考研:0802和0855,谁更适合普通考生
- 当钢铁有了灵魂:寻找那些最懂“交互叙事”的机械装置造梦者
- 列国鉴丨记者观察:从“南强北弱”到“北升南降”,德国经济版图悄然生变?
- 就业信息:重庆大学机械工程——最详细的就业与岗位拆解
- 机械革命创始人潘春节:以用户为中心,做好每一台电脑
- AI走进了体育场,然后呢?
- 现在的工科报考彻底跑偏了!强国刚需的机械类,反倒被骂成天坑!
- 漠北的惊雷:汉武帝用国家机器碾碎匈奴草原霸权
- 颜值即正义 五款长在审美点上的硬核轻武 哪一把是你的梦中情枪?
- 机械铸魂 铁路传薪——探访北京交通大学大学生机械博物馆
- 从鸡舍到餐桌,一枚让人放心的鸡蛋要经过几道关?
- 记者“养虾”手记:体验五天,发现目前“龙虾”并不适合普通用户
- 机械五虎谁能称王?清华、哈工大硬刚985,这些名校分化有多猛
- 亮黑伯莱塔92X 意式优雅与战术美学的碰撞 黑曜石般的钢铁艺术
热门阅读
-
天下第一暗器暴雨梨花针,传说中的唐门暗器做出来了 07-13
-
汽车投诉排行榜前十名汽车 问题最多的就是这些车 07-13
-
世界上最牛挖掘机,甚至可以挖穿一座城市 11-05
-
世界最大核潜艇制造厂,产量远超中美法 11-20
