Generatived（Beta）｜生成AIの最新ニュースとトレンドを提供

Kakao（韓国）は、同国の人口の93%に相当する約4900万人のユーザーを持つメッセージングプラットフォームです。技術的な課題に直面した同社のエンジニアリングチームは、Google Cloud TPUへの移行を決定し、JAXフレームワークを採用しました。これにより、スケーラビリティの問題が解決され、AIモデル開発の新たな道が開かれました。

Kakaoは、AIモデル開発において、GPUからGoogle Cloud TPUへの移行を戦略的に行いました。これにより、コストと効率の最適化が図られ、JAXフレームワークを活用した大規模なAIモデル開発が可能になりました。同社のKananaモデルファミリーは、Hugging Face Hubでオープンソースとしてリリースされています。

KakaoTalkは、テキストメッセージングだけでなく、画像やステッカーを使用したチャット、音声・ビデオ通話、金融、ナビゲーションなど、多岐にわたるサービスを提供しています。同社の言語モデルは、韓国語の理解と多様なアプリケーションへの対応を要求されています。技術的な意思決定には、これらのプロダクト要件が大きく影響しています。

Kakaoの技術チームは、JAXフレームワークとMaxTextのカスタムデータパイプラインを導入し、混合エキスパートモデルのトレーニングに取り組んでいます。Ryu Minho氏とKim Nayeon氏は、具体的な実装の詳細を説明し、技術的な取り組みについて詳しく紹介しています。