Публикации по теме 'nlp'
Оценка машинного перевода с sacreBLEU и BERTScore
Два полезных пакета для оценки производительности моделей МП
Прочитав эту статью, вы научитесь оценивать свои модели машинного перевода с помощью следующих пакетов:
sacreBLEU BERTScore
К сведению, BLEU (двуязычный ассистент по оценке) - один из самых популярных показателей для оценки машинно-переведенного текста. Его можно использовать для оценки переводов на любой язык при условии, что в тексте есть какая-то граница слова.
Результатом BLEU обычно является оценка от 0 до 100,..
Атаки НЛП, часть 1 — «Почему не стоит доверять своим моделям классификации текста»
Эта серия сообщений в блоге посвящена обширной и важной области, объединяющей искусственный интеллект и лингвистику: Атаки НЛП .
NLP расшифровывается как Обработка естественного языка , подобласть науки о данных, целью которой является изучение и анализ механизмов, лежащих в основе представления и использования человеческого языка с помощью компьютеров и встроенных системы.
Тематическое исследование
Представьте, что вы специалист по данным, работающий в команде модерации..
Введение в RNN и LSTM (часть 5)
Рад видеть вас снова, в предыдущей статье мы закончили реализацию нашей RNN для предсказания следующей последовательности синусоиды. Мы работали над поэтапной реализацией нашей модели.
В этой статье я расскажу о различных модификациях, которые вы можете выполнить в простой рекуррентной нейронной сети, чтобы она работала хорошо и хорошо для нашего приложения.
Итак, поехали
Различные архитектуры рекуррентной нейронной сети
Один к одному
Один к одному — это архитектура..
Чат-бот AI с НЛП: распознавание речи + трансформеры
Чат-бот AI с НЛП: распознавание речи + трансформеры
Создайте говорящего чат-бота на Python и разговаривайте со своим ИИ.
Резюме
В этой статье я покажу, как использовать предварительно обученные инструменты для создания чат-бота, который использует искусственный интеллект и распознавание речи, то есть говорящего ИИ.
НЛП (обработка естественного языка) - это область искусственного интеллекта, изучающая взаимодействие между компьютерами и человеческими языками, в частности,..
Научные статьи, основанные на алгоритме Word2vec в обработке естественного языка, часть 1
Анализ настроений на хинди/бенгальском языке с использованием трансферного обучения и совместного обучения с двойным входом и самостоятельным вниманием ( arXiv )
Автор: Шахрукх Кхан , Махнур Шахид
Абстрактный . Анализ настроений обычно относится к использованию обработки естественного языка, анализа текста и вычислительной лингвистики для извлечения информации, основанной на эмоциях и эмоциях, из текстовых данных. В нашей работе мы изучаем, как мы можем эффективно..
Поиск иголки в стоге сена: как использовать ретривер Dense Passage
"Обработка естественного языка"
В поисках иголки в стоге сена: как дрессировать ретривера с плотным ходом
Давайте посмотрим, как мы можем обучить модель выполнять поиск плотных проходов с моделями Transformer, используя Simple Transformers.
Введение в поиск прохода
Поиск отрывка — это концептуально простая задача, когда система должна извлекать наиболее релевантные отрывки по входному запросу . Ответы на открытые вопросы — распространенный случай поиска отрывков. Здесь система..
Классификация текста с Prevision.io
Простой способ создать классификатор текста с помощью Prevision.io
В этом посте мы покажем, как всего за несколько минут платформа Prevision.io может выполнять автоматическую обработку естественного языка и классификацию текста.
Известно, что текстовые данные обычно сложнее и труднее обрабатывать, чем линейные или категориальные признаки. На самом деле линейные объекты иногда нужно масштабировать. Категориальные признаки прямо скалярно закодированы, но преобразование текстов в..
Новые материалы
Повышайте продуктивность, создавая лучший код Python
Все приемы, которые я изучил на Python, чтобы писать лучший и быстрый код
Представление длинных цифр
Очень сложно отследить количество нулей или цифр после определенной длины. А теперь вот..
Распределение выборки и центральная предельная теорема
В нашем реальном мире мы часто ищем параметр или статистику определенной совокупности, например среднее значение или стандартное отклонение. Но оценить эту статистику по населению достаточно..
Различные алгоритмы машинного обучения
Машинное обучение ( ML ) — это изучение компьютерных алгоритмов, которые автоматически улучшаются благодаря опыту. [1] Оно рассматривается как подмножество искусственного интеллекта ...
Очередь сообщений RabbitMQ с использованием веб-API .NET Core 6
Мы собираемся обсудить очередь сообщений RabbitMQ и ее реализацию с использованием .NET Core 6 API в качестве производителя сообщений и консольного приложения в качестве потребителя сообщений...
Варианты графовых нейронных сетей и реализация в TensorFlow
См. Graph Neural Networks и реализация в TensorFlow для введения и основ.
Существует множество вариантов GNN, в том числе сверточные сети графов (GCN), GraphSAGE, сети внимания графов (GAT) и..
Построение классификатора изображений без использования глубокого обучения
Классификатор изображений можно легко построить с помощью глубокого обучения, особенно сверточной нейронной сети (CNN). Однако вы можете просто реализовать классификатор изображений, используя..
Я вижу так много неправильного в этой пьесе, что трудно даже организовать…
Я вижу так много неправильного в этой статье, что трудно даже организовать опровержение, но я постараюсь. В произвольном порядке:
А) IQ НЕ является показателем «неразумности», крайнего или иного..