Rethinking tokenization: Crafting better tokenizers for large language models
Jinbiao Yang
De quem é
- Max Planck Institute for Psycholinguisticsafiliação declarada pelos autores, segundo o OpenAlex
Outros papers das mesmas organizações
- iSign: A Benchmark for Indian Sign Language ProcessingMax Planck Institute for Psycholinguistics · 53 citações
- Deep neural networks and humans both benefit from compositional language structureMax Planck Institute for Psycholinguistics · 39 citações