Datasets documentation
概要
はじめに
チュートリアル
ハウツーガイド
概要
一般的な使用方法
読み込みプロセスストリームPyTorchでの使用TensorFlow との併用NumPy との併用JAXとの併用Pandas との併用Polars との併用PyArrowとの併用Spark との併用キャッシュ管理クラウドストレージ検索インデックスCLIトラブルシューティング
オーディオ
ビジョン
画像データを読み込む画像データを処理する画像データセットを作成する深度推定画像分類セマンティックセグメンテーションオブジェクト検出動画データの読み込み動画データセットを作成するドキュメントデータの読み込みドキュメントデータセットを作成する医療画像データセットの作成
3D
テキスト
表形式データ
時系列
エージェントの評価
データセットリポジトリ
コンセプトガイド
リファレンス
概要
🤗 Datasets のチュートリアルへようこそ!これらの初心者向けのチュートリアルでは、🤗 Datasets を扱うための基礎を学びます。お好みの機械学習フレームワークで学習に使用するデータセットを読み込み、準備する方法を説明します。その過程で、異なるデータセットの構成やスプリットを読み込む方法、データセットの中身を確認する方法、前処理を行う方法、そして Hub にデータセットを共有する方法を学びます。
チュートリアルでは、PythonおよびPyTorchやTensorFlowなどの機械学習フレームワークに関する基礎知識を前提としています。これらにすでに精通している場合は、クイックスタートを参照して、🤗 Datasetsで何ができるかを確認してみてください。
チュートリアルでは、🤗 Datasets を使用するのに必要な基本的なスキルのみを扱っています。ここでは触れられていない、他の有用な機能や応用も多数あります。さらに詳しく知りたい場合は、Hugging Face コースの第5章をご覧ください。
🤗 Datasets に関するご質問がございましたら、フォーラムのコミュニティに参加して、お気軽にご質問ください。
さっそく始めましょう!🏁
Update on GitHub