Dataset LLMs & Texto

apple/hat

Dataset com 100 mil – 1 milhão de exemplos — 472 downloads no Hugging Face. HAT: Hallucination Annotation for Translation 🧭 Table of Contents Overview Usage Data Creation Process Data Statistics Dataset Structure Paper Abst…

Hugging Face · Datasets ·apple · ·↓ 472 ·♥ 10

O dataset apple/hat está entre os destaques do Hugging Face — dados que alimentam o treinamento e a avaliação dos modelos do momento.

Ficha do dataset

  • Tamanho: 100 mil – 1 milhão de exemplos
  • Tarefas: tradução, classificação de texto
  • Idiomas: árabe, holandês, inglês, francês, alemão, híndi, …
  • Licença: CC-BY-NC-ND-4.0
  • Downloads: 472 · Curtidas: 10

Sobre o dataset

HAT: Hallucination Annotation for Translation 🧭 Table of Contents Overview Usage Data Creation Process Data Statistics Dataset Structure Paper Abstract Citation License 📘 Overview HAT (Hallucination Annotation for Translation) is a large-scale dataset for hallucination detection in machine translation (MT).

Como carregar

Use a biblioteca datasets do Hugging Face:

pip install -U datasets

from datasets import load_dataset

ds = load_dataset("apple/hat")
print(ds)
print(ds["train"][0])

Tags

translation text-classification machine-translation hallucination-detection mt-evaluation

Explorar o dataset no Hugging Face →

compartilhar: