Referências:
penn_treebank
Use o seguinte comando para carregar esse conjunto de dados no TFDS:
ds = tfds.load('huggingface:ptb_text_only/penn_treebank')
- Descrição :
This is the Penn Treebank Project: Release 2 CDROM, featuring a million words of 1989 Wall Street Journal material. This corpus has been annotated for part-of-speech (POS) information. In addition, over half of it has been annotated for skeletal syntactic structure.
- Licença : Acordo de Usuário LDC para Não Membros
- Versão : 1.1.0
- Divisões :
| Dividir | Exemplos |
|---|---|
'test' | 3761 |
'train' | 42068 |
'validation' | 3370 |
- Características :
{
"sentence": {
"dtype": "string",
"id": null,
"_type": "Value"
}
}