Hugging Face's logo

Datasets documentation

Utilitas

You are viewing main version, which requires installation from source. If you'd like regular pip install, checkout the latest stable version (v4.8.4).
Hugging Face's logo
Join the Hugging Face community

and get access to the augmented documentation experience

to get started

Utilitas

Konfigurasi pencatatan log

🤗 Datasets berusaha untuk transparan dan eksplisit tentang cara kerjanya, tetapi hal ini bisa cukup rinci pada beberapa saat. Kami menyertakan serangkaian metode logging yang memungkinkan Anda dengan mudah menyesuaikan tingkat kerincian seluruh pustaka. Saat ini, tingkat kerincian bawaan pustaka diatur ke WARNING.

Untuk mengubah tingkat detail, gunakan salah satu setter langsung. Misalnya, berikut adalah cara mengubah tingkat detail ke level INFO:

import datasets
datasets.logging.set_verbosity_info()

Anda juga dapat menggunakan variabel lingkungan DATASETS_VERBOSITY untuk menimpa tingkat detail default, dan mengaturnya ke salah satu dari berikut: debug, info, warning, error, critical:

DATASETS_VERBOSITY=error ./myprogram.py

Semua metode dari modul logging ini didokumentasikan di bawah ini. Yang utama adalah:

Diurutkan dari yang paling ringkas hingga yang paling rinci (dengan nilai int yang sesuai):

  1. logging.CRITICAL atau logging.FATAL (nilai int, 50): hanya melaporkan kesalahan yang paling kritis.
  2. logging.ERROR (nilai int, 40): hanya laporkan kesalahan.
  3. logging.WARNING atau logging.WARN (nilai int, 30): hanya melaporkan error dan peringatan. Ini adalah level default yang digunakan oleh pustaka.
  4. logging.INFO (nilai int, 20): melaporkan error, peringatan, dan informasi dasar.
  5. logging.DEBUG (nilai int, 10): laporkan semua informasi.

datasets.utils.logging.get_verbosity

< >

( )

Kembalikan level saat ini untuk logger root pustaka datasets HuggingFace.

Perpustakaan datasets HuggingFace memiliki tingkat log berikut:

  • datasets.logging.CRITICAL, datasets.logging.FATAL
  • datasets.logging.ERROR
  • datasets.logging.WARNING, datasets.logging.WARN
  • datasets.logging.INFO
  • datasets.logging.DEBUG

datasets.utils.logging.set_verbosity

< >

( verbosity: int )

Parameter

  • verbosity — Tingkat log, misalnya datasets.logging.DEBUG dan datasets.logging.INFO.

Atur level untuk logger root pustaka Hugging Face Datasets.

datasets.utils.logging.set_verbosity_info

< >

( )

Atur level untuk logger root pustaka datasets Hugging Face menjadi INFO.

Hal ini akan menampilkan sebagian besar informasi log dan bar tqdm.

Jalan pintas ke datasets.logging.set_verbosity(datasets.logging.INFO).

datasets.utils.logging.set_verbosity_warning

< >

( )

Atur level untuk logger root pustaka datasets Hugging Face menjadi WARNING.

Hal ini akan menampilkan hanya informasi log peringatan dan kesalahan serta bilah tqdm.

Jalan pintas ke datasets.logging.set_verbosity(datasets.logging.WARNING).

datasets.utils.logging.set_verbosity_debug

< >

( )

Atur level untuk logger root pustaka datasets Hugging Face menjadi DEBUG.

Hal ini akan menampilkan semua informasi log dan bar tqdm.

Jalan pintas ke datasets.logging.set_verbosity(datasets.logging.DEBUG).

datasets.utils.logging.set_verbosity_error

< >

( )

Atur level untuk logger root pustaka datasets Hugging Face menjadi ERROR.

Ini akan menampilkan hanya informasi log kesalahan dan bilah tqdm.

Jalan pintas ke datasets.logging.set_verbosity(datasets.logging.ERROR).

datasets.utils.logging.disable_propagation

< >

( )

Nonaktifkan propagasi output log pustaka. Perhatikan bahwa propagasi log dinonaktifkan secara default.

datasets.utils.logging.enable_propagation

< >

( )

Aktifkan propagasi keluaran log pustaka. Silakan nonaktifkan handler bawaan pustaka Hugging Face datasets untuk mencegah pencatatan ganda jika logger root telah dikonfigurasi.

Konfigurasi bilah kemajuan

Secara default, bilah progres tqdm akan ditampilkan selama unduhan dan pra-pemrosesan dataset. Anda dapat menonaktifkannya secara global dengan mengatur variabel lingkungan HF_DATASETS_DISABLE_PROGRESS_BARS. Anda juga dapat mengaktifkan/menonaktifkannya menggunakan enable_progress_bars() dan disable_progress_bars(). Jika diset, variabel lingkungan memiliki prioritas di atas helper.

datasets.enable_progress_bars

< >

( )

Aktifkan bilah progres global yang digunakan dalam datasets, kecuali jika variabel lingkungan HF_DATASETS_DISABLE_PROGRESS_BARS telah disetel.

Gunakan disable_progress_bars() untuk menonaktifkannya.

datasets.disable_progress_bars

< >

( )

Nonaktifkan bilah progres global yang digunakan dalam datasets, kecuali jika variabel lingkungan HF_DATASETS_DISABLE_PROGRESS_BARS telah diatur.

Gunakan enable_progress_bars() untuk mengaktifkannya kembali.

datasets.are_progress_bars_disabled

< >

( )

Mengembalikan apakah bilah progres secara global dinonaktifkan atau tidak.

Progress bar yang digunakan dalam datasets dapat diaktifkan atau dinonaktifkan secara global menggunakan enable_progress_bars() dan disable_progress_bars() atau dengan mengatur HF_DATASETS_DISABLE_PROGRESS_BARS sebagai variabel lingkungan.

Update on GitHub

←Kelas Tabel