>100 Views
December 11, 24
スライド概要
2024/12/11のDeep Learning Study Groupの資料
AI-Driven University Student
Ryota Murai | 2024/12/11 入門 HUGGING FACE
Hugging Faceとは 機械学習コミュニティのためのコラボレーションプラットフォーム 学習済みモデルやデータセット等が集まる 利用や公開が可能 それらを便利に使用するためのエコシステム
Hugging Faceのエコシステム Webプラットフォーム など ライブラリ群 など https://github.com/nlp-with-transformers/notebooks/blob/main/01_introduction.ipynb
Hugging Faceのエコシステム Webプラットフォーム ライブラリ群 https://github.com/nlp-with-transformers/notebooks/blob/main/01_introduction.ipynb
Hugging Face Hub 主要な機能 Models Datasets Spaces ... https://huggingface.co/
Hugging Face Hub : Models https://huggingface.co/
Hugging Face Hub : Models クラウド/API/ローカル で利用開始 https://huggingface.co/Qwen/QwQ-32B-Preview
Hugging Face Hub : Datasets https://huggingface.co/
Hugging Face Hub : Datasets https://huggingface.co/datasets/lmms-lab/LLaVA-Video-178K
Hugging Face Hub : Spaces モデルを試す実行環境 利用者は無料 https://huggingface.co/
Hugging Face Hub : Spaces ストロベリー問題に挑むQwQ。 OpenAI o1のように推論を行なうのが特徴 https://huggingface.co/spaces/Qwen/QwQ-32B-preview
Hugging Face Hub : Spaces https://huggingface.co/spaces/Yuanshi/OminiControl
Hugging Face Hub : 公開 GitによるModels,Datasets, Spaces の管理 共同管理やバージョン管理も楽々 GitHubは? 容量に制限を設けているので適し ていない(HFは無制限!) https://huggingface.co/microsoft/Phi-3.5-mini-instruct/discussions/18
Hugging Face Hub : 公開 Organization 組織での管理に Organizationに個人を参加 させるほうが柔軟性がある https://huggingface.co/microsoft
Hugging Face Hub : 公開 モデル・データセットに利用規約等 を設定 https://huggingface.co/stabilityai/stable-diffusion-3.5-large https://huggingface.co/Fugaku-LLM/Fugaku-LLM-13B
Hugging Faceのエコシステム Webプラットフォーム ライブラリ群 https://github.com/nlp-with-transformers/notebooks/blob/main/01_introduction.ipynb
ライブラリ: Transformers 学習済みTransformerモデルを簡単に利用するためのライブラリ PyTorch/TensorFlowどちらでも使える https://github.com/huggingface/transformers https://huggingface.co/docs/transformers/ja/index
ライブラリ: Datasets 公開されたデータセットを簡単に利用するためのライブラリ PyTorch/TensorFlowどちらでも使える https://github.com/huggingface/datasets https://huggingface.co/docs/datasets/index
サンプルコード https://github.com/tpu-dsg/hf-hands-on
AI開発のための強力なプラットフォームを 活用しよう!