Varredura

  • Descrição :

SCAN tarefas com várias divisões.

SCAN é um conjunto de tarefas simples de navegação orientadas por linguagem para estudar o aprendizado composicional e a generalização de disparo zero.

A maioria das divisões é descrita em https://github.com/brendenlake/SCAN Para as divisões MCD, consulte https://arxiv.org/abs/1912.09713.pdf

Uso básico:

data = tfds.load('scan/length')

Exemplo mais avançado:

import tensorflow_datasets as tfds
from tensorflow_datasets.datasets.scan import scan_dataset_builder

data = tfds.load(
    'scan',
    builder_kwargs=dict(
        config=scan_dataset_builder.ScanConfig(
            name='simple_p8', directory='simple_split/size_variations')))
FeaturesDict({
    'actions': Text(shape=(), dtype=string),
    'commands': Text(shape=(), dtype=string),
})
  • Documentação do recurso:
Funcionalidade Aula Forma Tipo D Descrição
RecursosDict
ações Texto fragmento
comandos Texto fragmento
@inproceedings{Lake2018GeneralizationWS,
  title={Generalization without Systematicity: On the Compositional Skills of
         Sequence-to-Sequence Recurrent Networks},
  author={Brenden M. Lake and Marco Baroni},
  booktitle={ICML},
  year={2018},
  url={https://arxiv.org/pdf/1711.00350.pdf},
}
@inproceedings{Keysers2020,
  title={Measuring Compositional Generalization: A Comprehensive Method on
         Realistic Data},
  author={Daniel Keysers and Nathanael Sch\"{a}rli and Nathan Scales and
          Hylke Buisman and Daniel Furrer and Sergii Kashubin and
          Nikola Momchev and Danila Sinopalnikov and Lukasz Stafiniak and
          Tibor Tihon and Dmitry Tsarkov and Xiao Wang and Marc van Zee and
          Olivier Bousquet},
  note={Additional citation for MCD splits},
  booktitle={ICLR},
  year={2020},
  url={https://arxiv.org/abs/1912.09713.pdf},
}

digitalizar/simples (configuração padrão)

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 4.47 MiB

  • Divisões :

Dividir Exemplos
'test' 4.182
'train' 16.728

scan/addprim_jump

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 4.53 MiB

  • Divisões :

Dividir Exemplos
'test' 7.706
'train' 14.670

scan/addprim_turn_left

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 4.58 MiB

  • Divisões :

Dividir Exemplos
'test' 1.208
'train' 21.890

scan/filler_num0

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 3.20 MiB

  • Divisões :

Dividir Exemplos
'test' 1.173
'train' 15.225

scan/filler_num1

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 3.51 MiB

  • Divisões :

Dividir Exemplos
'test' 1.173
'train' 16.290

scan/filler_num2

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 3.84 MiB

  • Divisões :

Dividir Exemplos
'test' 1.173
'train' 17.391

scan/filler_num3

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 4.17 MiB

  • Divisões :

Dividir Exemplos
'test' 1.173
'train' 18.528

digitalização/comprimento

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 4.47 MiB

  • Divisões :

Dividir Exemplos
'test' 3.920
'train' 16.990

scan/template_around_right

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 4.17 MiB

  • Divisões :

Dividir Exemplos
'test' 4.476
'train' 15.225

scan/template_jump_around_right

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 4.17 MiB

  • Divisões :

Dividir Exemplos
'test' 1.173
'train' 18.528

scan/template_opposite_right

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 4.22 MiB

  • Divisões :

Dividir Exemplos
'test' 4.476
'train' 15.225

scan/template_right

  • Tamanho do download : 17.82 MiB

  • Tamanho do conjunto de dados : 4.26 MiB

  • Divisões :

Dividir Exemplos
'test' 4.476
'train' 15.225

escanear/mcd1

  • Tamanho do download : 17.89 MiB

  • Tamanho do conjunto de dados : 1.89 MiB

  • Divisões :

Dividir Exemplos
'test' 1.045
'train' 8.365

escanear/mcd2

  • Tamanho do download : 17.89 MiB

  • Tamanho do conjunto de dados : 1.84 MiB

  • Divisões :

Dividir Exemplos
'test' 1.045
'train' 8.365

escanear/mcd3

  • Tamanho do download : 17.89 MiB

  • Tamanho do conjunto de dados : 1.87 MiB

  • Divisões :

Dividir Exemplos
'test' 1.045
'train' 8.365