為什么日本在生成人工智能方面落后，如何創(chuàng)建自己的大型語言模型

據(jù)CNBC報道，各國正在競相開發(fā)自己的生成人工智能算法，但高科技日本已經(jīng)落后了。

(相關(guān)資料圖)

自O(shè)penAI憑借其聊天機器人ChatGPT掀起波瀾以來，生成AI一直是科技界最流行的話題。根據(jù)高盛（Goldman Sachs）的研究，生成式人工智能的突破有可能在未來十年內(nèi)推動全球GDP增長7%，即近7萬億美元。

生成式AI開發(fā)的關(guān)鍵是大型語言模型，這些模型支持ChatGPT和ChatGPT等。百度的Ernie Bot，能夠處理大量數(shù)據(jù)集以生成文本和其他內(nèi)容。但日本目前在開發(fā)這些算法方面落后于美國，中國和歐盟，日本LLM初創(chuàng)公司Kotoba Technology的聯(lián)合創(chuàng)始人Noriyuki Kojima說。

中國組織，包括科技巨頭阿里巴巴據(jù)路透社79月援引國營機構(gòu)財團的研究報道，過去三年來，騰訊在國內(nèi)至少推出了79個LLM。OpenAI等美國企業(yè)巨頭，小島說在推動該國的法學碩士進步方面發(fā)揮著重要作用。

日本在生成式人工智能方面落后

然而，日本在法學碩士發(fā)展的規(guī)模和速度上落后于美國、中國和歐洲。

“日本在生成人工智能領(lǐng)域的落后地位很大程度上源于其在深度學習和更廣泛的軟件開發(fā)方面的相對缺陷，”小島說。

Kojima補充說，深度學習需要一個“強大的軟件工程師社區(qū)”來開發(fā)必要的基礎(chǔ)設(shè)施和應用程序。然而，根據(jù)經(jīng)濟產(chǎn)業(yè)省的數(shù)據(jù)，到789年，日本將面臨000,2030名軟件工程師的赤字。根據(jù)IMD世界數(shù)字競爭力排名，該國目前在28個國家中排名第63^位。

日本也面臨著硬件挑戰(zhàn)，因為LLM需要使用AI超級計算機進行培訓，例如IBM的Vela和Microsoft的Azure托管系統(tǒng)。但據(jù)《日經(jīng)亞洲》報道，日本沒有一家私營公司擁有自己的“世界級機器”，具有這些能力。

因此，像富岳這樣的政府控制的超級計算機是日本追求LLM的“鑰匙”，小島解釋說。

“獲得這種大型超級計算機構(gòu)成了LLM發(fā)展的支柱，因為它傳統(tǒng)上是這一過程中最重要的瓶頸，”他說。

日本的超級計算機如何提供幫助

富士通在5月宣布，東京工業(yè)大學和東北大學計劃與超級計算機的開發(fā)商富士通和理研合作，使用富岳開發(fā)主要基于日本數(shù)據(jù)的LLM。

富士通補充說，這些組織計劃在2024年公布他們的研究成果，以幫助其他日本研究人員和工程師開發(fā)法學碩士。

據(jù)《日經(jīng)亞洲》報道，日本政府還將投資6.8萬億日元（4820萬美元），約占總成本的一半，在北海道建造一臺新的超級計算機，最早將于明年開始服務。日經(jīng)亞洲表示，這臺超級計算機將專門從事LLM培訓，以促進日本生成人工智能的發(fā)展。

今年4月，日本首相岸田文雄表示，該國支持生成式人工智能技術(shù)的工業(yè)應用。岸田的講話是在與OpenAI首席執(zhí)行官Sam Altman會面之后發(fā)表的，他表示該公司正在尋求在日本開設(shè)辦事處。

追求生成式AI的日本企業(yè)

大型科技公司也加入了這場戰(zhàn)斗，以提高日本在生成人工智能領(lǐng)域的地位。6月，軟銀的據(jù)當?shù)孛襟w報道，Mobile Arm表示計劃開發(fā)自己的生成AI平臺。軟銀首席執(zhí)行官孫正義（Masayoshi Son）宣布，該投資公司計劃從“防御模式”轉(zhuǎn)向“進攻模式”，并加強對人工智能的關(guān)注，這強調(diào)了這一點。

“我們希望成為人工智能革命的領(lǐng)導者，”孫正義在股東年度股東大會上表示。

據(jù)《日經(jīng)亞洲》報道，軟銀集團于4月將其在SB Energy的85%股份出售給豐田通商，并于最近同意出售其在美國投資經(jīng)理Fortress Investment Group的90%股份。削減這些其他投資有助于軟銀釋放現(xiàn)金，使其能夠通過其愿景基金風險投資部門主要專注于人工智能。

軟銀旗下的芯片設(shè)計公司Arm也將在今年晚些時候在美國上市。“這將是迄今為止全球最大的IPO，”Asymmetric Advisors日本股市策略師Amir Anvarzadeh表示。

此次IPO將為軟銀的資金提供巨額資金，軟銀報告稱，截至3月31日的財政年度，愿景基金虧損創(chuàng)紀錄的4.3萬億日元。

Arm最初尋求籌集80億至100億美元。但隨著對半導體芯片的需求“飆升”，Anvarzadeh表示Arm可以籌集高達500億至600億美元 - 或“軟銀市值的85%”。

他表示，軟銀的股價可能會上漲，盡管這并不能保證其人工智能工作的成功。

“從根本上說，我認為軟銀不會改變?nèi)毡镜母窬?.....他們不是日本人工智能的救世主，“他說。

日本電信公司NTT還宣布了本財年開發(fā)自己的LLM的計劃，旨在為企業(yè)創(chuàng)造“輕量級和高效”的服務。NTT表示，它將在未來五年內(nèi)向數(shù)據(jù)中心和人工智能等增長領(lǐng)域投入8萬億日元，比以前的投資水平增加50%。

當?shù)孛襟w報道稱，數(shù)字廣告公司網(wǎng)絡代理5月發(fā)布了LLM，使公司能夠創(chuàng)建AI聊天機器人工具。該公司表示，它是為數(shù)不多的“專門研究日本語言和文化的模型”之一。

雖然日本尚未在生成人工智能領(lǐng)域迎頭趕上，但它正在通過這些私營部門的努力邁出第一步。小島說，一旦建立了“強大的基礎(chǔ)設(shè)施”，剩下的技術(shù)挑戰(zhàn)可能會通過使用開源軟件和以前先驅(qū)者的數(shù)據(jù)來“顯著緩解”。Bloom，F(xiàn)alcon和RedPajama都是開源的LLM，經(jīng)過大量數(shù)據(jù)的訓練，可以下載和研究。

然而，小島說，涉足這一領(lǐng)域的公司應該預料到競爭跨越“相對較長的時間范圍”。他解釋說，開發(fā)LLM需要大量的資本投資和在自然語言處理和高性能計算方面高度熟練的勞動力。

“軟銀和NTT加入這場競爭，短期內(nèi)不會改變?nèi)斯ぶ悄艿母窬帧?/p>

日本的人工智能監(jiān)管

日本科技公司越來越多地參與生成式人工智能開發(fā)，這與在其他領(lǐng)域采用人工智能的積極立場相吻合。Teikoku Databank的一項調(diào)查發(fā)現(xiàn)，超過60%的日本公司對在其運營中使用生成式人工智能持積極態(tài)度，而9.1%的公司已經(jīng)在這樣做。

日立它表示，已經(jīng)建立了一個生成人工智能中心，以促進員工安全有效地使用該技術(shù)。該集團表示，憑借數(shù)據(jù)科學家，人工智能研究人員和相關(guān)專家的專業(yè)知識，該中心將制定指導方針，以減輕生成人工智能的風險。

日本甚至會考慮政府采用像ChatGPT這樣的人工智能技術(shù)，前提是網(wǎng)絡安全和隱私問題得到解決，內(nèi)閣官房長官Hirokazu Matsuno說。

京都大學法學研究生院研究教授Hiroki Habuka說，隨著日本對生成人工智能的使用更加開放，政府應該制定和促進有關(guān)其使用的軟指導方針，同時評估基于特定風險的硬監(jiān)管的必要性。

“如果沒有更明確的指導，公司在使用生成人工智能時應該采取什么行動，實踐可能會變得支離破碎，”這位教授說。

本文源自：金融界

標簽：