研究

5297件
Hugging Face Blog ★4 LLM EN

Intel® Gaudi® 2 AIアクセラレーター上でのテキスト生成パイプライン

要約を読む要約を閉じる
📰ニュース

Hugging FaceがIntel Gaudi 2 AIアクセラレーターでテキスト生成パイプラインを最適化し、高いパフォーマンスを実現しました。

🔍注目ポイント

Gaudi 2のMatrix Multiplication EngineとTensor Processorsを効率的に活用し、推論速度を向上させています。

🔮これからどうなる

Intel Gaudi 2ユーザーは、より高速でコスト効率の良い大規模言語モデルの推論が可能になります。

Hugging Faceは、Intel Gaudi 2上でテキスト生成パイプラインを最適化し、特に大規模言語モデル(LLM)の推論性能を大幅に向上させました。
この最適化により、ユーザーはGaudi 2のハードウェアを最大限に活用し、より効率的なAIアプリケーション開発が可能になります。
具体的なモデルとしてLlama 2などが挙げられています。
Hugging Face Blog ★4 LLM EN

StarCoder2とThe Stack v2の発表

要約を読む要約を閉じる
📰ニュース

Hugging Faceがコード生成AIモデルStarCoder2と学習データセットThe Stack v2を公開しました。

🔍注目ポイント

StarCoder2は複数のプログラミング言語に対応し、商用利用可能なライセンスで提供される高性能なモデルです。

🔮これからどうなる

開発者はより高度なコード生成AIを無料で利用でき、AIを活用した開発効率の向上が期待されます。

StarCoder2は、ServiceNow Research、NVIDIA、Hugging Faceの共同開発で、3B、7B、15Bの3つのサイズがあります。
The Stack v2は、86のプログラミング言語を含む6.7TBのコードデータセットで、透明性と再現性を重視して構築されています。
これらの公開により、オープンなAI開発コミュニティがさらに活性化されるでしょう。
Hugging Face Blog ★4 研究 EN

TTSアリーナ:実環境でのテキスト読み上げモデルのベンチマーク

要約を読む要約を閉じる
📰ニュース

Hugging Faceがテキスト読み上げ(TTS)モデルの比較評価プラットフォーム「TTSアリーナ」を公開しました。

🔍注目ポイント

ユーザーが匿名で複数のTTSモデルの音声を比較し、最も自然なものを選ぶことで、実用的な評価が可能です。

🔮これからどうなる

開発者はモデルの弱点を特定し改善でき、ユーザーは最適なTTSモデルを見つけやすくなります。

TTSアリーナは、画像生成モデルの評価で成功した「LMSYS Chatbot Arena」のコンセプトをTTS分野に応用したものです。
ユーザーの投票データは、モデルの客観的な品質評価に役立ち、研究開発の進展を加速させることが期待されています。
現在、オープンソースモデルを中心に多数のモデルが参加しています。
Hugging Face Blog ★4 AI倫理 EN

AI透かし入門:ツールと技術

要約を読む要約を閉じる
📰ニュース

AI生成コンテンツに透かしを埋め込む技術の概要とツールが紹介されました。

🔍注目ポイント

コンテンツの出所を追跡し、AI生成であることを示すための技術的アプローチが解説されています。

🔮これからどうなる

AI生成コンテンツの信頼性向上と誤情報対策に貢献し、クリエイターの権利保護にも繋がります。

AI生成コンテンツが急速に普及する中、その真偽や出所を識別するニーズが高まっています。
透かし技術は、コンテンツに目に見えない形で情報を埋め込むことで、AI生成であることを証明したり、不正利用を追跡したりするのに役立ちます。
Hugging Faceは、この分野の主要なツールと技術を紹介し、その重要性を強調しています。
Hugging Face Blog ★4 LLM EN

レッドチーム耐性リーダーボードの紹介

要約を読む要約を閉じる
📰ニュース

Hugging Faceが、LLMの安全性評価を目的としたレッドチーム耐性リーダーボードを発表しました。

🔍注目ポイント

このリーダーボードは、モデルが有害なプロンプトにどれだけ耐性があるかを客観的に評価する仕組みを提供します。

🔮これからどうなる

開発者は、より安全で信頼性の高いLLMを構築するための指標を得られ、ユーザーは安心してAIを利用できるようになります。

レッドチームとは、システムの脆弱性を見つけるために攻撃をシミュレートする専門家チームのことです。
このリーダーボードは、様々な有害なプロンプトに対するモデルの応答を評価し、その耐性をスコア化します。
これにより、モデルの安全性を継続的に改善していくことが期待されます。
Hugging Face Blog ★4 LLM EN

マトリョーシカ埋め込みモデルの紹介

要約を読む要約を閉じる
📰ニュース

Hugging Faceが、異なる次元数に対応できる「マトリョーシカ埋め込みモデル」を紹介しました。

🔍注目ポイント

単一のモデルで複数の埋め込み次元を効率的に扱えるため、ストレージと計算コストを削減できます。

🔮これからどうなる

開発者は、アプリケーションのニーズに合わせて柔軟に埋め込みサイズを調整できるようになります。

マトリョーシカ埋め込みは、埋め込みベクトルの一部を切り出すだけで、より低い次元の埋め込みとして機能させることができます。
これにより、モデルの再学習や複数のモデルの管理が不要になり、リソースの最適化が可能です。
Hugging Faceは、この技術を様々なモデルに適用し、その有効性を実証しています。
Hugging Face Blog ★4 LLM EN

Gemmaへようこそ - Googleの新しいオープンLLM

要約を読む要約を閉じる
📰ニュース

Googleが新しいオープンな大規模言語モデル「Gemma」を発表しました。

🔍注目ポイント

GemmaはGoogleの最先端研究から派生し、軽量で高性能なモデルを提供します。

🔮これからどうなる

開発者はGoogleの技術を基盤に、より多様なAIアプリケーションを構築できるようになります。

Gemmaは、Googleが開発した最先端のモデルであり、特に軽量でありながら高い性能を発揮するように設計されています。
これにより、限られたリソース環境でも効率的に動作し、幅広いアプリケーションへの組み込みが期待されます。
開発者コミュニティにとって、Googleの技術スタックへのアクセスが容易になることで、イノベーションが加速する可能性があります。
Hugging Face Blog ★4 LLM EN

Open Ko-LLMリーダーボードの紹介:韓国LLM評価エコシステムをリード

要約を読む要約を閉じる
📰ニュース

韓国語LLMの性能を評価する「Open Ko-LLMリーダーボード」が公開されました。

🔍注目ポイント

多様な韓国語データセットと評価指標を用いて、公平かつ透明性の高い評価を提供します。

🔮これからどうなる

韓国語LLMの開発者は、モデルの性能を客観的に把握し、改善に役立てられます。

このリーダーボードは、Hugging FaceとNAVER Cloudが協力して開発しました。
韓国語の特性を考慮した評価ベンチマークを構築し、モデルの比較と進歩を促進します。
オープンソースモデルの評価に重点を置いており、コミュニティ全体の発展に貢献することを目指しています。
Hugging Face Blog ★4 LLM EN

🤗 PEFTが新しいマージ手法を導入

要約を読む要約を閉じる
📰ニュース

Hugging FaceのPEFTライブラリに、LoRAモデルをマージするための新しい手法が追加されました。

🔍注目ポイント

LoRAアダプターのマージ時に、より柔軟で効率的なモデル統合が可能になります。

🔮これからどうなる

開発者は、LoRAモデルのデプロイや共有が容易になり、リソース効率が向上します。

PEFT (Parameter-Efficient Fine-Tuning) は、大規模言語モデルのファインチューニングを効率化するライブラリです。
今回追加された新しいマージ手法により、LoRAアダプターをベースモデルに統合する際の選択肢が増え、特定のユースケースに合わせた最適化が可能になります。
これにより、モデルのパフォーマンス維持とファイルサイズの削減を両立しやすくなります。
Hugging Face Blog ★4 研究 EN

合成データ:オープンソースでコスト、時間、炭素排出量を削減

要約を読む要約を閉じる
📰ニュース

Hugging Faceがオープンソースの合成データ生成ツールを公開し、AI開発の効率化を支援します。

🔍注目ポイント

実データ収集のコストと時間を大幅に削減し、プライバシー保護と倫理的課題を解決できる点が革新的です。

🔮これからどうなる

AI開発者や企業は、より迅速かつ安価にモデルを訓練できるようになり、イノベーションが加速します。

合成データは、実際のデータから統計的特性を学習して生成される人工データです。
これにより、データ収集の労力、費用、そして環境負荷(炭素排出量)を削減できます。
特に、機密性の高いデータや希少なデータの代替として有効です。
OpenAI Blog ★5 LLM EN

世界シミュレーターとしての動画生成モデル

要約を読む要約を閉じる
📰ニュース

OpenAIがテキストから最大1分の高忠実度動画を生成する「Sora」を発表しました。

🔍注目ポイント

動画と画像を混合学習し、時空間パッチのTransformerで長尺・高解像度動画を生成します。

🔮これからどうなる

物理世界のシミュレーションが可能になり、映画制作やゲーム開発に革新をもたらす可能性があります。

Soraは、テキスト条件付き拡散モデルを動画と画像の両方で学習し、可変の期間、解像度、アスペクト比に対応します。
時空間パッチのTransformerアーキテクチャを活用することで、最大1分の高忠実度動画生成を実現しました。
これは物理世界の汎用シミュレーター構築への有望な一歩とされています。
Hugging Face Blog ★3 ビジネス EN

AMD Pervasive AI 開発者コンテスト!

要約を読む要約を閉じる
📰ニュース

AMDがAI開発者向けのコンテスト「Pervasive AI Developer Contest」を開催します。

🔍注目ポイント

AMDのオープンソースAIソフトウェアスタックを活用した革新的なAIアプリケーションが評価されます。

🔮これからどうなる

開発者はAMDハードウェアとソフトウェアの可能性を探り、AI分野でのスキル向上と認知度獲得の機会を得ます。

このコンテストは、AMDのAI技術を広く普及させることを目的としています。
参加者は、AMDのオープンソースAIソフトウェアスタック(ROCmなど)を使用して、様々なAIアプリケーションを開発し、その革新性や実用性が審査されます。
優秀なプロジェクトには賞金や認知が与えられます。