/
githubmirror
/
transformers
Обзор
Документация
Войти
/
githubmirror
/
transformers
Код
Запросы
0
Пакеты
0
Релизы
0
Аналитика
Безопасность
main
utils/test_module/custom_tokenization.py
5 строк
88 B
Sylvain Gugger
Save code of registered custom models (#15379)
02 фев 2022, 18:44
Не верифицирован
02 фев 2022, 18:44
44b21f1
Код
Авторство
О чём код?
from transformers import BertTokenizer class CustomTokenizer(BertTokenizer): pass