Dataset LLMs & Texto

trillionlabs/TheBioCollection

Dataset com 10 – 100 milhões de exemplos — 646 downloads no Hugging Face. TheBioCollection TheBioCollection is a 52.

Hugging Face · Datasets ·trillionlabs · ·↓ 646 ·♥ 7

O dataset trillionlabs/TheBioCollection está entre os destaques do Hugging Face — dados que alimentam o treinamento e a avaliação dos modelos do momento.

Ficha do dataset

  • Tamanho: 10 – 100 milhões de exemplos
  • Tarefas: geração de texto
  • Idiomas: inglês
  • Downloads: 646 · Curtidas: 7

Sobre o dataset

TheBioCollection TheBioCollection is a 52.

Como carregar

Use a biblioteca datasets do Hugging Face:

pip install -U datasets

Como é um dataset grande, vale carregar em modo streaming (sem baixar tudo):

from datasets import load_dataset

ds = load_dataset("trillionlabs/TheBioCollection", split="train", streaming=True)
for exemplo in ds.take(3):
    print(exemplo)

Tags

text-generation

Explorar o dataset no Hugging Face →

compartilhar: