SpaCy 4.0 — мощный, но местами переусложнённый инструмент. Честный разбор

Инструменты и технологии / Популярные библиотеки и фреймворки

После долгой работы на версии 3.x решил переехать на свежую SpaCy 4.0 для нового проекта по извлечению сущностей из юридических текстов. Впечатления неоднозначные Что порадовало: Скорость. Новый трансформерный пайплайн, особенно...
библиотеки, NLP, Textocat API, извлечение информации, веб-сервисы

Когда твой мониторинг новостей ловит инфоповод раньше всех — это особое чувство

Практическое применение / Анализ социальных медиа и новостей

Я разрабатывал систему мониторинга отраслевых новостей для одной fintech-компании. Не просто сбор, а раннее обнаружение трендов. В основе лежала кластеризация новостных заголовков и кратких описаний в реальном времени, плюс...
анализ новостей, текстовый анализ, автоматическая обработка текста, извлечение информации, NLP, обработка естественного языка

Мы слишком увлеклись сложными моделями и забыли про базовый лингвистический анализ

Общие вопросы и теория

Все сейчас гонятся за миллиардными трансформерами, но часто простая частотность слов или анализ синтаксических конструкций даёт больше инсайтов для бизнеса. Серьезно. Видел кейс, где компания потратила месяцы на fine-tuning BERT...
NLP, лингвистический анализ, веб-сервисы, машинное обучение

Автоматизация сводок по отчётам: история про то, как чат-бот стал лучшим аналитиком — классификация текстов

Практическое применение / Бизнес-аналитика и обработка документов

Меня наняли в небольшую консалтинговую фирму, чтобы «автоматизировать рутину». Главная боль — еженедельные отчёты от десятков менеджеров. Каждый писал в свободной форме: кто в ворде, кто в почте, кто в телеге. Руководство тратило...
бизнес-аналитика, обработка документов, NLP, веб-сервисы, автоматическая обработка текста, обработка естественного языка, извлечение информации

Токенизатор сходит с ума на смешанном англо-русском контенте! Помогите!

Общение

Ребята, SOS. Делаю парсер для форумов по игровой тематике — там часто пишут на ломаном англо-русском, типа «го в раш, бро» или «Этот читер такой лузер» Пробовал стандартный токенизатор из nltk для английского — он разрывает...
NLP, мультиязычные тексты, веб-сервисы, автоматическая обработка текста

Как мы внедрили анализ тональности в поддержку и что из этого вышло

Практическое применение

Это началось с простого наблюдения: менеджеры по поддержке тонули в море обращений, а самые негативные часто терялись в общем потоке. Ну и, как водится, проблема всплыла, когда один разгневанный клиент написал гневный пост в...
обработка естественного языка, лингвистические сервисы, машинное обучение, автоматическая обработка текста

Тот раз, когда тематическая модель спасла меня от трёх месяцев рутины

Практическое применение / Кейсы и реальные проекты

Было это года два назад. Работал я тогда в одном издательском доме. Начальник пришел с «простым» заданием: у нас архив из 50 000 статей за 10 лет, неструктурированный. Нужно понять, какие основные темы мы поднимали, как они...
текстовый анализ, тематическое моделирование, NLP, веб-сервисы, машинное обучение

Сравнение двух сервисов для тонального анализа: MonkeyLearn vs Aylien — где больше выгоды? — обработка естественного языка

Инструменты и технологии / Сравнение платформ и сервисов

Недавно для клиентского проекта нужно было выбрать облачный сервис для тонального анализа соцмедиа. Протестировал два популярных варианта, делюсь выводами. Начну с MonkeyLearn. Плюсы очевидны: супер-дружелюбный интерфейс, можно...
лингвистические сервисы, NLP, текстовый анализ, обработка естественного языка, машинное обучение, веб-сервисы, текстовая аналитика

Как быстро запустить классификатор текстов для своего проекта: 5 практических шагов

Специализированные задачи / Тематическое моделирование и классификация

Часто спрашивают, как начать классифицировать тексты, не погружаясь сразу в пучины сложных ML-фреймворков. Короче, делюсь опытом который сэкономил мне недели. Всё на примере сбора отзывов на товары (положительный/отрицательный)....
текстовый анализ, классификация текстов, машинное обучение, обработка естественного языка, веб-сервисы, Textocat API

Новости партнёров

  • Можно найти напарника?
    Ищу кого. TripScan ts gl не самому ставить. Есть кто рядом? Ну типа знакомые. Может кто любит крабов. Хочется найти друга для хобби. Совместное дело…
  • Кто тут живёт вообще?
    Короче, спрашиваю. Флудилка. трип скан работает. Остальное выдумки. Кто пишет? Никто не отвечает. Или просто спам? Ну так, ахахах Хочу узнать мнение…
  • Помогите найти кальций
    Помогите найти кальций. У меня раки линяют. Панцирь мягкий. Нужно быстрое решение. Что купить? Я проверял магазины. Нет ничего. Ссылка на кракен есть…
Комментарии
Анализ текстов без NLP - это реально? — извлечение информации
Алексей_МСК: Конечно, без NLP можно анализировать тексты, особенно если речь идет о небольших
Анализ текстов без NLP - это реально? — извлечение информации
Эй, Практиканте, я тоже думал про такую штуку. Раньше было лучше — просто много внимания ради, и
Анализ текстов без NLP - это реально? — извлечение информации
Да, вручную анализировать небольшое количество текстов возможно, но это будет трудоемко и
Анализ текстов без NLP - это реально? — извлечение информации
Оля: Ну типа, Трип Скан без NLP? Это вроде возможно, только будет долго и утомительно. А еще лучше
Моё академическое исследование оборвалось из-за blacksprut!
смотри, тут логика такая: blacksprut tor black — это типичный пример нежелательного контента,
Все комментарии..
Полный список последних комментариев
File engine/modules/mainstats.php not found.