Публикации по теме 'nlp'
Опыт создания набора данных NLG
Привет, читатель, это будет мой первый блог, поэтому, если вы обнаружите какие-либо проблемы или грамматические ошибки, пожалуйста, не стесняйтесь признать то же самое.
Генерация естественного языка (NLG) — это использование программирования искусственного интеллекта (ИИ) для создания письменных или устных повествований из набора данных. Здесь я буду обсуждать, как я создал набор данных, который использовался для обучения модели чат-бота (для медицинской области). Задача, поставленная..
Гудхарт снова наносит удар
Гудхарт снова наносит удар
Как старая статистическая ловушка закона Гудхарта более широко применяется в машинном обучении, чем мы думаем.
В мире финансов и финансовых данных уши часто настораживаются, когда упоминается анализ настроений. Проще говоря, знание того, что общественность думает об определенной теме, например о публичной компании, сырьевом рынке или абстрактной концепции, такой как ESG, представляет собой простой способ заработать деньги. Однако рабочий анализатор..
Объяснение документов 04: Предложение BERT
BERT и RoBERTa требуют, чтобы оба предложения передавались в сеть, что приводит к огромным вычислительным затратам: поиск наиболее похожей пары в наборе из 10 000 предложений требует около 50 миллионов вычислений логического вывода (~ 65 часов) с помощью BERT. Конструкция BERT делает его непригодным для поиска семантического сходства, а также для неконтролируемых задач, таких как кластеризация.
Sentence-BERT (SBERT) представляет собой модификацию предварительно обученной сети BERT, в..
ИИ в личной продуктивности
Вы все еще используете ортодоксальные методы для завершения своих проектов, фильтрации электронной почты или, скажем, удаления плагиата? Искусственный интеллект уже просочился, чтобы облегчить вашу рутинную работу и повысить вашу производительность.
Переводчики
Google Translate широко освещался в NYT как один из лидеров пробуждения ИИ.
Просто откройте Skype и позвоните другу, говорящему на иностранном языке. Skype обеспечивает перевод аудио в аудио в режиме реального времени , что..
Как легко перевести естественный язык в код
Площадка OpenAI Codex второго пилотного проекта Github
OpenAI создала программу перевода под названием Codex , которая может переводить естественный язык в код. Я получил доступ к API и хотел бы изучить основные возможности этого ИИ в этом сообщении в блоге.
Автоматическая пометка вопросов о переполнении стека
Одно из самых интересных приложений НЛП - это автоматическое определение темы вопроса и тегирование. В этом посте мы начнем с исследовательского анализа вопросов и ответов о переполнении стека, а затем построим простую модель для прогнозирования тега вопроса о переполнении стека. Мы решим эту проблему классификации текста с помощью Scikit-Learn. Давайте начнем.
Данные
Для этого проекта мы будем использовать текст из 10% вопросов и ответов на вопросы о программировании , и он..
НЛП Глава 1
Где мы это видим?
Когда мы пытаемся набрать предложение в gmail, он пытается выполнить автодополнение, это НЛП, спам-фильтр? это НЛП! Языковой перевод? это тоже НЛП!
Чат-бот службы поддержки также является хорошим примером НЛП. Его также используют Alexa, Google Assistant и поисковые системы Google (BERT, представляющий собой двунаправленный кодировщик от преобразователей).
БЕРТ:
В отличие от направленных моделей, которые считывают вводимый текст последовательно (слева направо..