Datasets documentation
Tổng quan
Bắt đầu
Hướng dẫn
Tổng quanTải một bộ dữ liệu từ HubHiểu rõ bộ dữ liệu của bạnTiền xử lýTạo một tập dữ liệuChia sẻ một tập dữ liệu lên Hub
Hướng dẫn thực hành
Tổng quan
Cách sử dụng chung
TảiQuy trìnhStreamSử dụng với PyTorchSử dụng với TensorFlowSử dụng với NumPySử dụng với JAXSử dụng với PandasSử dụng với PolarsSử dụng với PyArrowSử dụng với SparkQuản lý bộ nhớ đệmLưu trữ đám mâyChỉ mục tìm kiếmCLIXử lý sự cố
Âm thanh
Thị giác
Tải dữ liệu ảnhXử lý dữ liệu hình ảnhTạo bộ dữ liệu hình ảnhƯớc lượng độ sâuPhân loại hình ảnhPhân đoạn ngữ nghĩaPhát hiện đối tượngTải dữ liệu videoTạo bộ dữ liệu videoTải dữ liệu tài liệuTạo bộ dữ liệu tài liệuTạo bộ dữ liệu hình ảnh y tế
3D
Text
Dữ liệu bảng
Chuỗi thời gian
Đánh giá Agent
Kho dữ liệu
Hướng dẫn về khái niệm
Bộ dữ liệu 🤝 ArrowBộ nhớ đệmDataset hoặc IterableDatasetĐặc điểm của bộ dữ liệuXây dựng và nạpÁnh xạ theo lô
Tham khảo
Tổng quan
Các hướng dẫn chi tiết cung cấp cái nhìn toàn diện hơn về tất cả các công cụ mà 🤗 Datasets cung cấp và cách sử dụng chúng. Điều này sẽ giúp bạn xử lý các bộ dữ liệu thực tế phức tạp hơn, nơi bạn có thể cần thao tác trên cấu trúc hoặc nội dung của bộ dữ liệu để chuẩn bị cho việc huấn luyện.
Các hướng dẫn này giả định rằng bạn đã quen thuộc và thoải mái với các kiến thức cơ bản của 🤗 Datasets. Chúng tôi khuyến nghị người dùng mới nên xem qua các bài hướng dẫn của chúng tôi trước.
Bạn muốn tìm hiểu thêm? Hãy xem Chương 5 của khóa học Hugging Face!
Các hướng dẫn được tổ chức thành sáu phần:
- Sử dụng chung: Các hàm để tải và xử lý tập dữ liệu chung. Các hàm được hiển thị trong phần này áp dụng cho tất cả các chế độ dữ liệu.
- Âm thanh: Cách tải, xử lý và chia sẻ các bộ dữ liệu âm thanh.
- Thị giác: Cách tải, xử lý và chia sẻ các bộ dữ liệu ảnh và video.
- Văn bản: Cách tải, xử lý và chia sẻ các bộ dữ liệu văn bản.
- Dữ liệu bảng: Cách tải, xử lý và chia sẻ các bộ dữ liệu bảng.
- Kho dữ liệu: Cách chia sẻ và tải lên một bộ dữ liệu lên Hub.
Nếu bạn có bất kỳ câu hỏi nào về 🤗 Datasets, hãy thoải mái tham gia và hỏi cộng đồng trên diễn đàn của chúng tôi.
Update on GitHub