/
BorisNA
/
NLP
Обзор
Документация
Войти
/
BorisNA
/
NLP
Код
Запросы
0
Задачи
Вики
Пакеты
0
Релизы
0
CI/CD
Аналитика
Безопасность
master
split_sents.py
18 строк
536 B
BorisNA
Swith to large model in splitting sentences.
10 июн 2025, 10:10
10 июн 2025, 10:10
e9b6677
Код
Авторство
О чём код?
import sys import spacy from tqdm import tqdm # Инициализируем лемматизатор SpaCy nlp = spacy.load('de_core_news_lg') # Читаем текст из стандартного ввода text = sys.stdin.read() # Разбиение текста на предложения doc = nlp(text) sentences = list(doc.sents) # Итерация по предложениям с отображением прогресса for sentence in tqdm(sentences, file=sys.stderr): print(f'{sentence}') print('~~~~~~')