Datasets documentation
データセット
はじめに
チュートリアル
ハウツーガイド
概要
一般的な使用方法
読み込みプロセスストリームPyTorchでの使用TensorFlow との併用NumPy との併用JAXとの併用Pandas との併用Polars との併用PyArrowとの併用Spark との併用キャッシュ管理クラウドストレージ検索インデックスCLIトラブルシューティング
オーディオ
ビジョン
画像データを読み込む画像データを処理する画像データセットを作成する深度推定画像分類セマンティックセグメンテーションオブジェクト検出動画データの読み込み動画データセットを作成するドキュメントデータの読み込みドキュメントデータセットを作成する医療画像データセットの作成
3D
テキスト
表形式データ
時系列
エージェントの評価
データセットリポジトリ
コンセプトガイド
リファレンス
You are viewing main version, which requires installation from source. If you'd like
regular pip install, checkout the latest stable version (v5.2.0).
データセット
🤗 Datasets は、Audio、Computer Vision、Natural Language Processing (NLP) タスク向けの AI データセットに簡単にアクセスし、共有するためのライブラリです。
1行のコードでデータセットを読み込み、強力なデータ処理およびストリーミング機能を活用して、ディープラーニングモデルでの学習にデータセットを素早く準備できます。Apache Arrow形式を基盤としており、メモリ制約なしにゼロコピー読み込みで大きなデータセットを処理できるため、最適な速度と効率を実現します。さらに、Hugging Face Hubとの深い統合により、より広い機械学習コミュニティとデータセットを簡単に共有・読み込むことができます。
今日、Hugging Face Hubでデータセットを見つけ、ライブビューアを使ってその中身を詳しく確認しましょう。
Update on GitHub