Все эти модные лингвистические сервисы, NLP, вся эта обработка естественного языка... Звучит красиво. Но как выбрать то что реально работает, а не просто красиво выглядит на бумаге? Я вот сомневаюсь, что половина из них стоит своих денег. Поделюсь, как я подхожу к этому делу. Может, и вам пригодится.

• Начните с цели Чего вы хотите добиться? Классификация текстов? Извлечение сущностей? Просто подсчитать слова? Без четкой цели любой инструмент покажется волшебным. А потом окажется, что он делает не то, что вам нужно. Откуда инфа, что он справится?
• Тестируйте на своих данных. Забудьте про их демки. Возьмите свой реальный датасет. Пусть попробуют сделать то, что нужно именно вам. Не факт, что их общие модели подойдут для ваших специфических задач. Серьезно, это самый важный этап
• Ищите реальные отзывы, а не рекламу. Ну типа, где люди обсуждают подводные камни, а не хвалят. Академические статьи? Иногда. Но чаще всего там все причесано. А пруфы будут?
• Смотрите на метрики Если сервис не может внятно объяснить, по каким метрикам его оценивали, ну это подозрительно. Точность – это одно, но важна и полнота, F1-мера, особенно для задачи классификации текстов. Как они это считают?
• Не гонитесь за хайпом. Новый инструмент? Выглядит круто? Скорее всего, сырой. Лучше проверенные решения, пусть и не такие блестящие. Сначала пусть другие потестируют.

Короче, не ведитесь на красивые слова. Всегда проверяйте и задавайте вопросы. Это, имхо, единственный способ не слить бюджет впустую.