xtreme_pawsx

  • Описание :

Этот набор данных содержит машинные переводы английских обучающих данных PAWS. Переводы предоставлены тестом XTREME и охватывают следующие языки:

  • Французский
  • испанский
  • Немецкий
  • китайский язык
  • Японский
  • Корейский

Дополнительную информацию о PAWS см. в документах: PAWS: Противники перефразирования из скремблирования слов на https://arxiv.org/abs/1904.01130 и PAWS-X: Межъязыковой состязательный набор данных для идентификации перефразирования на https://arxiv. орг/абс/1908.11828

Для получения подробной информации, касающейся XTREME, см.: XTREME: массовый многоязычный многозадачный тест для оценки межъязыкового обобщения по адресу https://arxiv.org/abs/2003.11080 .

FeaturesDict({
    'label': ClassLabel(shape=(), dtype=int64, num_classes=2),
    'sentence1': Text(shape=(), dtype=string),
    'sentence2': Text(shape=(), dtype=string),
})
  • Документация по функциям :
Особенность Учебный класс Форма Dтип Описание
ОсобенностиDict
этикетка Метка класса int64
предложение1 Текст нить
предложение2 Текст нить
@article{hu2020xtreme,
      author    = {Junjie Hu and Sebastian Ruder and Aditya Siddhant and Graham Neubig and Orhan Firat and Melvin Johnson},
      title     = {XTREME: A Massively Multilingual Multi-task Benchmark for Evaluating Cross-lingual Generalization},
      journal   = {CoRR},
      volume    = {abs/2003.11080},
      year      = {2020},
      archivePrefix = {arXiv},
      eprint    = {2003.11080}
}

xtreme_pawsx/de (конфигурация по умолчанию)

  • Описание конфига : переведено на де

  • Размер загрузки : 22.34 MiB

  • Размер набора данных : 14.19 MiB .

  • Сплиты :

Расколоть Примеры
'train' 49 340

xtreme_pawsx/es

  • Описание конфига : переведено на es

  • Размер загрузки : 22.27 MiB

  • Размер набора данных : 14.09 MiB .

  • Сплиты :

Расколоть Примеры
'train' 49 244

xtreme_pawsx/fr

  • Описание конфигурации : переведено на фр.

  • Размер загрузки : 22.70 MiB

  • Размер набора данных : 14.53 MiB .

  • Сплиты :

Расколоть Примеры
'train' 49 208

xtreme_pawsx/ja

  • Описание конфигурации : переведено на ja

  • Размер загрузки : 25.12 MiB .

  • Размер набора данных : 16.98 MiB .

  • Сплиты :

Расколоть Примеры
'train' 49 086

xtreme_pawsx/ko

  • Описание конфигурации : переведено на ko

  • Размер загрузки : 22.99 MiB

  • Размер набора данных : 14.86 MiB .

  • Сплиты :

Расколоть Примеры
'train' 49 298

xtreme_pawsx/ж

  • Описание конфига : Переведено на zh

  • Размер загрузки : 21.45 MiB .

  • Размер набора данных : 13.21 MiB .

  • Сплиты :

Расколоть Примеры
'train' 49 149