Generatived（Beta）｜生成AIの最新ニュースとトレンドを提供
.webp)
カラクリAWSでMoEモデル成功
Generatived
24/5/21 14:31
カラクリ（東京都中央区）はAWSジャパンの「AWS LLM 開発支援プログラム」を利用し、AWS TrainiumでMoEモデルの学習に世界で初めて成功したと発表。新しい大規模言語モデル「KARAKURI LM 8x7B Chat v0.1」は、国産オープンモデルとして最高点を獲得し、2024年5月7日に公開された。
GPU不足の中、AWS Trainiumを使用することで、AIアクセラレーターの新たな可能性を示したカラクリ。同社は、GPUに依存しない生成AIの発展を目指し、研究開発を進めてきた。AWS Trainiumは、トレーニングコストを最大50%削減できるとされ、今回の開発費用は約30万円に抑えられた。
カラクリは2023年9月に「AWS LLM 開発支援プログラム」に採択され、700億パラメーターの「KARAKURI LM 70B Chat v0.1」開発を開始。MoE方式を採用した新モデル「KARAKURI LM 8x7B Chat v0.1」も高い評価を受けている。
「KARAKURI LM 8x7B Chat v0.1」の開発コストは約30万円、学習時間は12時間と効率的。この低コストでの開発が実現することで、金融・医療業界などでのカスタマイズされたLLMの活用が期待されている。
最新のニュース
%20(1).webp)
NVIDIAが機密計算技術検証
26/9/24 7:00
NVIDIA（米国カリフォルニア州）は、機密計算機能「Confidential Computing」を有効化した環境におけるAI推論処理の性能検証結果を公表した。
MicrosoftがGPT6提供
26/9/24 7:00
Microsoft（米国ワシントン州）は、開発プラットフォーム『Microsoft Foundry』において『GPT-6 Sol』および『GPT-6 Luna』の提供を開始した。
NVIDIAがウイルス構造公開
26/9/24 7:00
NVIDIA（米国カリフォルニア州）は、国際研究組織の連合体と共同で2,800種以上のウイルスにおけるタンパク質複合体の3D予測構造を一般公開したと発表した。
%20(1).webp)
Copyright © 2024 Generatived - All right Reserved.
ニュース
フォローをお願いします
言語
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
Generatived は、Generative AIに特化した情報やトレンドをお届けするサービスです。大きく変わりゆく世界の情報を全力でお届けします。
フォローをお願いします
言語
最新のニュース
NVIDIAが機密計算技術検証
26/9/24 7:00
NVIDIA（米国カリフォルニア州）は、機密計算機能「Confidential Computing」を有効化した環境におけるAI推論処理の性能検証結果を公表した。
MicrosoftがGPT6提供
26/9/24 7:00
Microsoft（米国ワシントン州）は、開発プラットフォーム『Microsoft Foundry』において『GPT-6 Sol』および『GPT-6 Luna』の提供を開始した。
NVIDIAがウイルス構造公開
26/9/24 7:00
NVIDIA（米国カリフォルニア州）は、国際研究組織の連合体と共同で2,800種以上のウイルスにおけるタンパク質複合体の3D予測構造を一般公開したと発表した。