请
登录
后使用快捷导航
没有帐号?
立即注册
设为首页
|
收藏本站
|
切换风格
快捷导航
首页
论坛
BBS
头条
都市圈
美国
欧洲
分类信息
更多
搜索
本版
用户
发帖
登录
注册
每日签到
网站工具箱
帮助中心
西兔生活网
›
华人生活
›
都市圈
›
日本AI,失去的不止三十年
回复
发帖
返回列表
[科技]
日本AI,失去的不止三十年
[复制链接]
毽康乐
当前离线
中级会员
积分
兔币
帖子
中级会员, 积分 342, 距离下一级还需 158 积分
342
191
151
在线时间:0 小时
最后登录:2024-6-23
窥视卡
雷达卡
9
0
毽康乐
发表于 2024-5-11 17:38:01
|
只看该作者
(本文作者饭统戴老板)
2019年,有两件事一直困扰着孙正义:软银的投资失败,以及
日本
科技的落后。
面对媒体,孙正义痛心地说道,科技产业几乎从日本消失了,我们正在成为一个被遗忘的国家。即将到来的
AI
革命,是日本重回牌桌最后的机会[1]。
随着
ChatGPT
问世,孙正义的呼吁终于成为了共识。然而,正当日本举国动员,准备一脚油门闯入赛道时,却发现了一个尴尬的事实:
日本目前的AI研究,非常依赖隔壁邻居为首的老外。
对此,RIKEN革新智慧综合研究中心负责人杉山将,曾做过一项统计。
RIKEN(理化学研究所)是日本唯一的国家级科研机构,顶级头脑聚集地。汤川秀树等日本诺奖得主,都曾在这儿搞过研究。然而,那些被AI顶会收录的RIKEN论文,近一半的作者都隶属于外国大学,其中约一半的人来自中国[2]。
本土无人可用,使得日本在生成式AI浪潮里,始终处于失语状态。
然而,如若回溯历史,会发现日本也曾是个“AI超级大国”。
上世纪八九十年代,日本一度是深度学习的中心。杨立昆、余凯、林元庆、贾扬清等载入科技史册的泰斗级人物,都曾在日本的AI实验室度过一段青葱岁月。
曾经攥着一手王炸的日本,为何会迈向老无所依的结局?
站在日本人的肩膀上
上世纪80年代,正在读大学的杨立昆,被一群“疯子”吸引了。
彼时,深度学习是个“已被证伪”的技术路线。然而,仍有一小撮人在死磕,这其中就包括了一批日本科学家。杨立昆发现,当时大部分的深度学习论文,都是日本研究人员用英文写的。
这其中,对他影响最大的,是一位名叫福岛邦彦的日本人。
1980年,福岛邦彦参照
猫
的视觉结构,设计了一个叫做“神经认知机(Neocognitron)”的多层网络模型。
在生物的初级视觉皮层中,存在多个神经元,每个神经元只“掌管”一小部分视野。随后,神经元收集到的信息会统一传输到视觉皮层,组合成完整的视觉图像。
受此启发,福岛邦彦给神经认知机设计了“感知光照“和“运动信息”两个神经元,分别用来“提取图形信息”和“组成图形信息”。然而,福岛邦彦的神经认知机制,存在一个致命问题:太超前了。
当时,主流的神经网络只有1层,但神经认知机制有足足5层。
面对多层设计带来的种种问题,福岛邦彦一时找不到解决办法,导致神经认知机只能处理一些极其简单的工作。
直到1986年,辛顿提出了“反向传播算法”,这个问题才有了标准答案。
但若向前追溯反向传播算法,会发现其源头仍是日本人。上世纪60年代,日本数学家甘利俊一提出的“随机梯度下降方法”,为其提供了技术灵感[6]。只不过囿于特定时代的局限,甘利俊一没有条件在计算机上进行模拟验证。
1988年,杨立昆将神经认知机与反向传播结合在一起,打造出了大名鼎鼎的卷积神经网络。直到今天,卷积神经网络仍是图像识别领域最重要的算法之一。
由此可见,这些定义一个时代的AI研究成果,都是站在日本科学家肩膀上实现的。
实验室里的中国人
同一时期,日本的产业界,拉开了更为激进的历史篇章。
彼时,日本步入极度繁荣的泡沫经济时代。大型企业纷纷为爱发电,自掏腰包搭建中央实验室,发力基础科学。这其中,要数NEC(日本电器股份有限公司)最为激进:它直接切入
美国
科技产业腹地,将实验室开到了普林斯顿和硅谷。
财大气粗的NEC Lab,很快聚集了一大批日后响当当的名字。
西安交大软件学院院长、国家特聘教授龚怡宏,是第一个加入硅谷NEC Lab的国人科学家。在他担任实验室主任时期,延揽了一众青年才俊。
其中既有触发科技巨头竞拍辛顿的余凯,也有林元庆、徐伟等活跃在中国AI产业一线的技术大牛。
彼时,中国的计算机产业刚刚起步,吸纳不了那么多人才。硅谷NEC Lab无缝承接了这个需求,并招揽了大批立志从事AI研究的国人科学家。
余凯接棒硅谷NEC Lab主任一职后,又招募来了黄畅。当时,黄畅底下有一个名叫贾扬清的实习生。在NEC Lab期间,贾扬清展露出了高超的数学和工程代码能力,曾让实验室众人坚信其日后必有所造诣。
这种薪火相传的孵化线,在林元庆接手硅谷NEC Lab后仍在继续。
他引进的实习生谢赛宁,后来与麻省理工教授何恺明共同提出了著名的ResNeXt模型。2022年,谢赛宁还和OpenAI研究员Bill Peebles合著了论文《Scalable diffusion models with transformers》。
以这篇论文为基础,OpenAI打造出了视频生成模型Sora。
另一间位于普林斯顿的NEC Lab,同样招揽了杨立昆,以及支持向量机发明者Vladimir Vapnik等泰斗级人物。
可以说,历史上没有任何一家机构,能如NEC Lab这般,拥有此等高手如林的班底。
余凯曾在媒体专访中如此形容NEC Lab巅峰时期的影响力:如果你在谷歌上搜索美国NEC Lab,页面会立刻弹出一句话,你要不要来谷歌工作[7]。
然而鼎盛时期风光无两的NEC Lab,却早已埋下了衰败的草蛇灰线。
五月花号迷航
2002年,杨立昆刚在普林斯顿进行了一年的研究工作,NEC就开始施压。
管理层毫不客气地告诉杨立昆,NEC对深度学习没有一丁点兴趣,并顺手解雇了当时的实验室主任。这段经历让杨立昆对产业界彻底失望,跑回
纽约
大学当起了老师。
NEC突然自毁长城,有两个不容忽视的现实原因:
一是人们对AI失去了信心。
彼时,无论是
芯片
的算力,还是数据的丰富程度,都远不足以让深度学习发挥其潜力。与此同时,“第五代计算机”项目的失败,更是雪上加霜。
“第五代计算机”项目始于上世纪80年代,目标是打造AI驱动的超级计算机。
在日本的设想中,第五代计算机将具备回答问题、知识库管理、图像识别、代码生成等功能[8]。这个“领先时代40年”的科研项目,一度将美国吓得不轻,立马掏出补贴与日本竞争。
如此一拍脑袋的项目,结局可想而知。
1992年,五代机项目正式宣告破产。日本不仅白白浪费了数亿美金,还把其他跟风的国家给忽悠瘸了。一怒之下,人们将责任归咎于AI。日后很长时间里,AI研究如同过街老鼠,人人喊打。
其次,日本的中央实验室模式,此时也出了问题。
日本企业对于NEC Lab等中央实验室的定位,是纯粹的基础科研机构。这种模式没有与市场和产业接轨,只是盲目追求多拿几个诺贝尔奖。
这让科学家们非常苦闷,内部时常调侃称“反正做的东西也用不到产品上”。
因此,当经济泡沫消失,日本进入失去的时代,毫无实际用处的中央实验室,理所当然地成了第一批“挨刀”的对象。
2009年-2020年间,NEC多次进行万人规模裁员,并大幅缩减研发经费。
在此阶段,
中美
科学家们纷纷选择自主创业,或另择良木而栖。
2012年,余凯受李彦宏邀请,领导百度的AI业务。在他的号召下,徐伟、黄畅等NEC Lab的同僚,也先后加入百度。后来,他们又跟着余凯一同创办了地平线。
日本花大力气点燃的AI火种,最终造就了今天中国AI的冲天火光。2018年NEC第四次大裁员后,其美国实验室的技术中坚力量,几乎已流失殆尽。
孤胆英雄
日本AI高歌猛进的步调,随着NEC美国实验室的落寞戛然而止。
全球
人工智能
的历史仍在继续,就好像五代机项目从未存在过一样;而曾经组建了全明星阵容的NEC Lab,也渐渐被淡忘。在失去的三十年里,日本几乎没有在深度学习领域,留下任何一笔痕迹。
不仅如此,深度学习还在日本留下了根深蒂固的偏见。
2016年谷歌的AlphaGo击败了李世石,登上了全球科技新闻的头版。这一年,中国诞生了528家AI企业,催生371起AI投融资。从科学家到VC,都热情地谈论着深度学习的潜力。然而,隔壁的日本,却是另一番风景。
同年,日本产经省也举办了一场全国人工智能大会。有学者准备就深度学习提出两个企划案,却被同席的学术圈研究者提醒,“如果名字里加上深度学习的话,估计就没有人来听了吧”。
这种裹足不前的态度,是日本如今无人可用的重要诱因。
唯一意识到问题的,正是软银集团的孙正义。
2017年,孙正义在推出全球最大私募股权科技投资基金(愿景基金)时,笃定地表示,该基金只会根据一项策略进行投资,就是AI。
接下来的几年时间里,软银在AI领域的投资不可谓不激进。
光是在季度和年度报告中,孙正义提到“AI”的频数就超过500次,并大手笔地为超过400家AI创业公司,注入1400多亿美元资金。他甚至还在2020年胸有成竹地表示,史无前例的投资狂潮,将使软银成为主导AI革命的投资公司。
然而,孤掌难鸣。更尴尬的是,软银还押错了宝。
据风投数据库PItchBook于2023年公开的数据,在26家估值超过10亿美元的AI创业公司里,软银只投中了一家。
此外,孙正义虽然斥40亿美元投资英伟达,却在其股价暴涨前悉数抛售掉,与近10倍的涨幅收益失之交臂。如果不是押中了ARM,孙正义的AI投资或将颗粒无收。
在ChatGPT引爆生成式AI热潮的2023年,孙正义在股东大会上痛心疾首地表示,自2022年末以来他就一直在反省,“为自己犯了很多错误感到羞愧”,“哭了好几天都停不下来”[13]。
失去的时代
孙正义的眼泪,既是对软银频频押注失误的悔恨,更是对日本AI产业的恨铁不成钢。
2019年时,孙正义曾不加掩饰地公开批判:在当前最重要的科技革命上,日本已变成了一个“后进国”,而使其不断丧失竞争力的本质原因,是对进步的不贪婪[15]。
这番言论,掺杂了不少情绪因素。实际上,这些都不是日本AI老无所依的根本原因。
深度学习从来都不是一场孤立的革命。
2012年,深度学习能够爆发,其实有两个先决条件:一是算力进化,当时英伟达所开发的GPU,已经初步能支撑起深度学习所需的算力。二是互联网的全面铺开,弥补了数据不足的问题。
集成电路、互联网、云计算,随着这些前置产业陆续成熟,深度学习才得以登上历史舞台。然而,这些产业,日本几乎一个都没有。
当年,在斯坦福教书的吴恩达想要进行大型图像识别实验,尚且由谷歌倾尽整个数据中心的算力,来成就他的The Cat Neurons项目(即“谷歌猫”)。
然而福岛邦彦和甘利俊一却没有这么幸运。即便是如今的日本,也没有任何一家民间公司,拥有训练AI大模型所需的庞大算力。仅有政府主导的理化学研究所中,才能找到“富岳”这样的超级计算机。
日本AI的后继无人,从最开始就埋下了伏笔。
如今,以AI为横切面的日本科技产业,似乎正在印证孙正义五年前的预言:
日本已经失去了过去,但可能正在失去未来。
参考资料:
[1]孫正義氏、日本を憂う「このままでは忘れられた国に」,日経ビジネス
[2]日本国产AI开发依赖外国人,日经中文网
[3]Why Japan is lagging behind in generative AI, CNBC
[4]科学之路,杨立昆
[5]智能时代的算法发展,张江科技评论
[6]甘利俊一 | 信息几何法:理解深度神经网络学习机制的重要工具,AI科技评论
[7]对话地平线创始人、CEO余凯:
德国
诗意一般的六年深深地滋养了我,车云
[8]第五代:人工智能与日本计算机对世界的挑战,爱德华费吉鲍姆,帕梅拉麦考黛克
[9]野心勃勃的日本第五代计算机,是如何一步步走向失败的,CSD
[10]中国人工智能简史,林军,岑峰
[11]日本人工智能的现状与“深层学习”的课题, Nippon
[12]日本人工智能的发展及现状,鼎联知识产权
[13]孙正义投AI,投了个寂寞,华尔街见闻
[14]孙正义:一场巨大革命即将到来,软银终将统治世界,华尔街见闻
[15]孙正义批日本竞争力反思人工智能落后,亚洲周刊
[16]硅谷NEC Lab往事:将中国企业拽进AI时代的人,雷锋网
[17]日本电子产业兴衰录,西村吉雄
(本文作者饭统戴老板)
本文仅代表作者观点。
上一篇:
《歌手》8季8位歌王,只有一位外国选手,华晨宇被吐槽最水
下一篇:
谁在买小米SU7?来自103位真实车主的不满和担忧
@免
责
声
明
1.西兔生活网 CTLIVES 内容全部来自网络;
2.版权归原网站或原作者所有;
3.内容与本站立场无关;
4.若涉及侵权或有疑义,请点击“举报”按钮,其他联系方式或无法及时处理。
举报
分享
0人
收藏
0人
支持
0人
反对
0人
淘帖
回复
使用道具
举报
提升卡
置顶卡
沉默卡
喧嚣卡
变色卡
千斤顶
照妖镜
返回列表
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
立即注册
本版积分规则
发表回复
回帖并转播
回帖后跳转到最后一页
毽康乐
中级会员
0
关注
1
粉丝
40
帖子
发送私信
收听TA
Ta的主页
热门图文
不懂就问,恋综里后来的女生就活该遭受网暴
马斯克打破沉默谈第12个孩子,“亲朋早就知
AMD最强APU Stirx Halo霸气现身:史无前例1
手机续航要突破?荣耀小米押注,一加新电池
“过去5个月前所未有”,美军基地遭伊拉克
查尔斯对哈里做出重大姿态,王室开始行动了
热门帖子
都市圈
经济学家华生谈税务倒查30年:不能见小利而
都市圈
证监会主席重磅发声,将推出“科创板八条”
都市圈
重磅!三大交易所全面恢复
头条大事
越南本周将接待普京,美国坐不住了
都市圈
联想减员7500人!业绩大幅下降,债务压力沉
都市圈
张颂文18岁“儿子”亮相,身高快190!邓超
头条大事
中俄互换图们江领土,才能一劳永逸解决出海
都市圈
76岁王刚被曝卖掉北京四合院,全家移居美国
都市圈
台积电:台积电南京已获美国商务部核发“经
都市圈
欧美对中国车企加关税,日本不加关税还给补
排行榜
日
周
月
1
伊朗造出无人机航母,美海军破防了
伊朗正在接近完成一个颇具创新性的军事项目——那就是极可能成为全球首个服役的“首艘
99836
0
2
杨利娟的新职,海底捞的野望
图片来源:视觉中国 6月21日,海底捞发布公告称,杨利娟辞任该公司执行董事及首席执
98087
0
3
查尔斯对哈里做出重大姿态,王室开始行动了
英国王室终于行动了,对于已经离家出走四年多时间的哈里王子,查尔斯国王做出了一个重
97991
1
4
三星 Galaxy Tab S10 Ultra 平板曝光,14.6
去年7月,三星电子带来了三星Galaxy Z 系列设备的发布会。 活动中除了推出了Galaxy Z
97981
0
5
米粉也扛不住了?“第一批小米车主卖车”冲
“第一批小米SU7车主,已经开始卖车了”近期又上了热搜。 自从3月 28 日小米 SU7
96386
11
6
英国发表涉台言论后,耿爽在联合国反击:坚
在美西方齐聚的峰会上,英国又开始对中国的台湾问题指手画脚,企图让台湾地区参与到所
95851
4
7
日本资产会持续表现强劲吗?
上周债市创新高,A股再现3000点保卫战,国内投资者主要的目光(惶恐),集中在两大关
95147
0
8
周末超重磅!中欧就电动汽车反补贴启动磋商
本周哈克、巴尔金、柯林斯等多位美联储官员集中表态,敦促市场对降息保持耐心,他们强
94766
0
9
零跑C16上市在即!董事长朱江明:顶配车型
快科技6月23日消息,零跑汽车创始人兼董事长朱江明在直播中表示,零跑C16是一款宜商宜
94363
10
10
“五折奔”也来了,感谢国产新能源让咱开上
国内的传统豪华车市场,一直以来都是A在称霸,即便是其他豪车拿出了同价位更高一级
94325
0
1
《怦然4》男五段炼太下头!融入不了集体,
第六期(下),段炼和朱朱聊天,朱朱问段炼是想和自己当朋友相处,还是认为可以往心动
99988
0
2
马斯克的38岁前妻大婚,和娃娃脸男星喜结连
埃隆·马斯克被爆出和他的女高管希文·齐利斯(Shivon Zilis)“再接再厉”,继通过
99972
14
3
两年亏损1148亿元,广发基金又发新基金
6月12日,广发基金发布了一只名为“广发上证科创板100增强指数基金”的新基金,该基
99938
20
4
DNF:玩家回归仅20级,穿一身过时假粉,大
DNF作为一款老游戏,这游戏的人气却是一点都不比那些新游戏要低的,而且这游戏的玩家
99926
0
5
120倍变焦+16GB+1TB突降至3799元,骁龙8Gen
还记得安卓手机刚刚诞生的时候的样子吗?那个时候,大部分安卓手机都仅仅标配2GB运行
99921
7
6
前百度高管想要再造一个“百度”
6月19日,前小度CEO景鲲和前小度CTO朱凯华官宣创业最新进展,其公司“MainFunc”完成6
99912
0
7
《芳华》后连扑2部,冯小刚不服,找胡歌力
最近,国内著名的三大导演都有动作了。 6月19日,中影制作出品的“抗美援朝”三部曲,
99907
20
8
诸茅的黄昏
茅台批发价持续下跌,主要是受到供需关系重大切换的影响,这不是茅台一家的压力。据海
99883
1
9
现场直击!普京邀请金正恩乘坐自己的“奥鲁
中新网6月19日电 据“今日俄罗斯”(RT)报道,当地时间6月18日晚,俄罗斯总统普京抵达
99878
20
10
易建联为什么是男篮的天花板,看这几张图片
去年夏天,在结束CBA2022-23赛季之后,易建联宣布退役,结束了自己长达20年的篮球职业
99876
10
1
董军就台海划红线不到48小时,美27家军火商
我国防长董军在香格里拉对话会上明确表态: “谁胆敢把台湾从中国分裂出去,必将粉身
100741
20
2
广州300亿巨无霸旧改表决通过,周边二手房
每经记者:黄婉银 每经编辑:陈梦妤 5月24日,广州市海珠区凤阳街凤和经济联合
100182
1
3
被严重低估的一个产业,这是最国际的中国供
曾航/文 大约十几年前,我到重庆参加一个外资电脑行业零部件厂商的新工厂开工仪式
100019
7
4
莫迪连任还没等到中国贺电,先收到了中方的
印度选举结果出来之后,尽管莫迪领导的人民党赢得不是很好看,先前夸下的海口一个都没
99999
3
5
苹果迟迟不入局,折叠屏手机能否成为手机厂
2019年2月24日,华为在巴塞罗那举办新品发布会,正式推出其首款折叠屏手机——华为Mat
99989
0
6
《怦然4》男五段炼太下头!融入不了集体,
第六期(下),段炼和朱朱聊天,朱朱问段炼是想和自己当朋友相处,还是认为可以往心动
99988
0
7
马斯克的38岁前妻大婚,和娃娃脸男星喜结连
埃隆·马斯克被爆出和他的女高管希文·齐利斯(Shivon Zilis)“再接再厉”,继通过
99972
14
8
最低租金每月600元,济南起步区首批保障性
5月28日上午,济南新旧动能转换起步区首批保障性租赁住房正式交付。新黄河记者从现场
99960
0
9
完美复仇!微醺的曼城,红眼的曼联,滕哈赫
足总杯百年史上连续第二年上演曼市德比决赛,自然是将流量拉满了。 一边是刚刚完成前
99953
1
10
中国出口回暖
文/李晓喻 据海关总署7日公布的最新数据,5月中国出口额2.15万亿元,同比大增11.2%
99953
1
活跃网友
1
财神驾到
主题数:2146,精华帖:0
2
绿林道的
主题数:1605,精华帖:0
3
一抹伤
主题数:1306,精华帖:0
4
哇哇的哭
主题数:1038,精华帖:0
5
冷香丸
主题数:726,精华帖:0
返回顶部
快速回复
上一主题
下一主题
返回列表
APP下载
手机访问
扫一扫用手机访问
快速回复
返回顶部
返回列表