Perceiver IO: あらゆるモダリティに対応するスケーラブルな完全アテンションモデル
Google DeepMindが、様々なデータ形式を扱える汎用的なAIモデル「Perceiver IO」を発表しました。
LLM
2754件
N
アプリケーション向けGPT-3のカスタマイズ
OpenAIがGPT-3のファインチューニング機能を一般公開しました。
CodeParrotをゼロからトレーニングする
Hugging FaceがCodeParrotというコード生成モデルをゼロからトレーニングした。
Hugging Face TransformersとOptimumでIPUを始める
Hugging Face TransformersモデルをGraphcore IPUで効率的に実行するためのガイドが公開されました。
N
OpenAIのAPIが待機リストなしで利用可能に
OpenAIのAPIが、これまであった待機リストなしで誰でも利用可能になりました。
Hugging Face Transformersで低リソースASR向けXLSR-Wav2Vec2をファインチューニング
Hugging Face Transformersライブラリを使って、低リソース言語の自動音声認識（ASR）モデルXLSR-Wav2Vec2…
現代CPUにおけるBERTライクモデル推論のスケーリング - パート2
Hugging FaceがBERTライクモデルのCPU推論を高速化する技術を解説しています。
N
算数の文章問題の解決
OpenAIが小学生レベルの算数文章問題を解くAIシステムを開発しました。
大規模言語モデル：新しいムーアの法則か？
大規模言語モデル（LLM）の性能向上が、かつてのムーアの法則に似た指数関数的な成長を示している。
10億組の学習ペアで文章埋め込みモデルを訓練
Hugging Faceが10億組の学習ペアを用いた大規模な文章埋め込みモデルの訓練に成功しました。
コードとしての機械学習の時代が到来
Hugging FaceがMLOpsの新たなパラダイム「ML as Code」を提唱しました。
N
人間からのフィードバックで書籍を要約する
OpenAIが人間からのフィードバックを活用し、長文の書籍要約タスクでAIの性能を向上させました。