为什么日本在生成人工智能方面落后，如何创建自己的大型语言模型

据CNBC报道，各国正在竞相开发自己的生成人工智能算法，但高科技日本已经落后了。

(相关资料图)

自OpenAI凭借其聊天机器人ChatGPT掀起波澜以来，生成AI一直是科技界最流行的话题。根据高盛（Goldman Sachs）的研究，生成式人工智能的突破有可能在未来十年内推动全球GDP增长7%，即近7万亿美元。

生成式AI开发的关键是大型语言模型，这些模型支持ChatGPT和ChatGPT等。百度的Ernie Bot，能够处理大量数据集以生成文本和其他内容。但日本目前在开发这些算法方面落后于美国，中国和欧盟，日本LLM初创公司Kotoba Technology的联合创始人Noriyuki Kojima说。

中国组织，包括科技巨头阿里巴巴据路透社79月援引国营机构财团的研究报道，过去三年来，腾讯在国内至少推出了79个LLM。OpenAI等美国企业巨头，小岛说在推动该国的法学硕士进步方面发挥着重要作用。

日本在生成式人工智能方面落后

然而，日本在法学硕士发展的规模和速度上落后于美国、中国和欧洲。

“日本在生成人工智能领域的落后地位很大程度上源于其在深度学习和更广泛的软件开发方面的相对缺陷，”小岛说。

Kojima补充说，深度学习需要一个“强大的软件工程师社区”来开发必要的基础设施和应用程序。然而，根据经济产业省的数据，到789年，日本将面临000,2030名软件工程师的赤字。根据IMD世界数字竞争力排名，该国目前在28个国家中排名第63^位。

日本也面临着硬件挑战，因为LLM需要使用AI超级计算机进行培训，例如IBM的Vela和Microsoft的Azure托管系统。但据《日经亚洲》报道，日本没有一家私营公司拥有自己的“世界级机器”，具有这些能力。

因此，像富岳这样的政府控制的超级计算机是日本追求LLM的“钥匙”，小岛解释说。

“获得这种大型超级计算机构成了LLM发展的支柱，因为它传统上是这一过程中最重要的瓶颈，”他说。

日本的超级计算机如何提供帮助

富士通在5月宣布，东京工业大学和东北大学计划与超级计算机的开发商富士通和理研合作，使用富岳开发主要基于日本数据的LLM。

富士通补充说，这些组织计划在2024年公布他们的研究成果，以帮助其他日本研究人员和工程师开发法学硕士。

据《日经亚洲》报道，日本政府还将投资6.8万亿日元（4820万美元），约占总成本的一半，在北海道建造一台新的超级计算机，最早将于明年开始服务。日经亚洲表示，这台超级计算机将专门从事LLM培训，以促进日本生成人工智能的发展。

今年4月，日本首相岸田文雄表示，该国支持生成式人工智能技术的工业应用。岸田的讲话是在与OpenAI首席执行官Sam Altman会面之后发表的，他表示该公司正在寻求在日本开设办事处。

追求生成式AI的日本企业

大型科技公司也加入了这场战斗，以提高日本在生成人工智能领域的地位。6月，软银的据当地媒体报道，Mobile Arm表示计划开发自己的生成AI平台。软银首席执行官孙正义（Masayoshi Son）宣布，该投资公司计划从“防御模式”转向“进攻模式”，并加强对人工智能的关注，这强调了这一点。

“我们希望成为人工智能革命的领导者，”孙正义在股东年度股东大会上表示。

据《日经亚洲》报道，软银集团于4月将其在SB Energy的85%股份出售给丰田通商，并于最近同意出售其在美国投资经理Fortress Investment Group的90%股份。削减这些其他投资有助于软银释放现金，使其能够通过其愿景基金风险投资部门主要专注于人工智能。

软银旗下的芯片设计公司Arm也将在今年晚些时候在美国上市。“这将是迄今为止全球最大的IPO，”Asymmetric Advisors日本股市策略师Amir Anvarzadeh表示。

此次IPO将为软银的资金提供巨额资金，软银报告称，截至3月31日的财政年度，愿景基金亏损创纪录的4.3万亿日元。

Arm最初寻求筹集80亿至100亿美元。但随着对半导体芯片的需求“飙升”，Anvarzadeh表示Arm可以筹集高达500亿至600亿美元 - 或“软银市值的85%”。

他表示，软银的股价可能会上涨，尽管这并不能保证其人工智能工作的成功。

“从根本上说，我认为软银不会改变日本的格局......他们不是日本人工智能的救世主，“他说。

日本电信公司NTT还宣布了本财年开发自己的LLM的计划，旨在为企业创造“轻量级和高效”的服务。NTT表示，它将在未来五年内向数据中心和人工智能等增长领域投入8万亿日元，比以前的投资水平增加50%。

当地媒体报道称，数字广告公司网络代理5月发布了LLM，使公司能够创建AI聊天机器人工具。该公司表示，它是为数不多的“专门研究日本语言和文化的模型”之一。

虽然日本尚未在生成人工智能领域迎头赶上，但它正在通过这些私营部门的努力迈出第一步。小岛说，一旦建立了“强大的基础设施”，剩下的技术挑战可能会通过使用开源软件和以前先驱者的数据来“显着缓解”。Bloom，Falcon和RedPajama都是开源的LLM，经过大量数据的训练，可以下载和研究。

然而，小岛说，涉足这一领域的公司应该预料到竞争跨越“相对较长的时间范围”。他解释说，开发LLM需要大量的资本投资和在自然语言处理和高性能计算方面高度熟练的劳动力。

“软银和NTT加入这场竞争，短期内不会改变人工智能的格局。

日本的人工智能监管

日本科技公司越来越多地参与生成式人工智能开发，这与在其他领域采用人工智能的积极立场相吻合。Teikoku Databank的一项调查发现，超过60%的日本公司对在其运营中使用生成式人工智能持积极态度，而9.1%的公司已经在这样做。

日立它表示，已经建立了一个生成人工智能中心，以促进员工安全有效地使用该技术。该集团表示，凭借数据科学家，人工智能研究人员和相关专家的专业知识，该中心将制定指导方针，以减轻生成人工智能的风险。

日本甚至会考虑政府采用像ChatGPT这样的人工智能技术，前提是网络安全和隐私问题得到解决，内阁官房长官Hirokazu Matsuno说。

京都大学法学研究生院研究教授Hiroki Habuka说，随着日本对生成人工智能的使用更加开放，政府应该制定和促进有关其使用的软指导方针，同时评估基于特定风险的硬监管的必要性。

“如果没有更明确的指导，公司在使用生成人工智能时应该采取什么行动，实践可能会变得支离破碎，”这位教授说。

本文源自：金融界

标签：