Публикации по теме nlp

Публикации по теме 'nlp'

Болбол-Забан - написание персидской поэзии с ИИ

Еще в 2017 году я обучил символьную языковую модель персидской поэзии , используя многослойный LSTM. Модель смогла предсказать следующий символ, учитывая предыдущие 256 символов, и сгенерировать случайную поэзию, начиная с пустой строки. Он был способен понимать рифму и ритм ( Метр ) персидской поэзии, генерировать правильные слова, фразы и стихи с хорошей грамматикой, но семантическая согласованность была слабой. Несмотря на это, я наслаждался волшебной красотой результата и не мог..

Генерация текстов песен с использованием LSTM

Недавно я построил модель Word Prediction и использовал эту модель для создания текстов песен. Данные, на которых я обучал свою модель, содержали тексты песен Тейлор Свифт. Мой ИИ выглядит подавленным, а может, это просто горе. Вот каковы были результаты: Теперь поговорим о том, как я это сделал - о подходе и инструментах. Давай сделаем это! Чтение данных Начнем с простого вопроса. Как читать данные. Это довольно просто data = open('../filename.txt').read() Ваши..

Тематическое моделирование с помощью BERT

Тематическое моделирование с помощью BERT Использование BERT и TF-IDF для создания легко интерпретируемых тем. Часто, когда владелец продукта обращается ко мне с просьбой провести анализ на основе НЛП, мне обычно задают следующий вопрос: «Какая тема часто встречается в этих документах?» Отсутствие каких-либо категорий или ярлыков. Я вынужден изучить неконтролируемые методы извлечения этих тем, а именно Тематическое моделирование . Хотя тематические модели, такие как LDA и..

Интуиция, лежащая в основе ERNIE 2.0 - Предварительная подготовка для понимания языка

Обработка естественного языка (NLP) была ведущей областью машинного обучения, с предварительно обученными сетями, показывающими доминирующие результаты в различных задачах понимания языка. Частью этой подгруппы является недавно опубликованная статья исследователей из Baidu, которые предлагают совершенно новую архитектуру фреймворка под названием ERNIE 2.0, которая достигла высочайшего уровня производительности. В этом тексте мы дадим интуитивное понимание основных концепций ERNIE 2.0, а..

Когда кто-то говорит, что компьютер может уменьшить количество убийств и самоубийств, что приходит вам на ум.

Когда кто-то говорит, что компьютер может уменьшить количество убийств и самоубийств, что приходит вам на ум. «Какая глупость!» Я думаю, вы удивитесь этому утверждению. Но теперь я могу сказать ту же фразу со 100% уверенностью. Потому что я глубоко осознал истинный потенциал обработки естественного языка. Проведя множество исследований, упражнений, исследований и дискуссий, я приобрел такой уровень уверенности в НЛП. Действительно, какая удивительная техника! Несмотря на то, что..

Простая поисковая система

С ОД/ДО В этом блоге я объясню, как вы можете создать модель, которая может сказать вам, является ли заданная пара вопросов и ответов правильной или неправильной, а затем как ее можно распространить на поисковую систему. Бизнес-проблема описание проблемы Учитывая некоторые ключевые слова, поисковые системы показывают лучший результат на первой странице и менее важные результаты на следующих страницах. Точно так же, учитывая пару вопросов и ответов (правильный и неправильный), найдите..

Достижение 99% точности с распознаванием сущностей

Одна из наших основных технических целей в Zoom.ai — убедиться, что наш автоматизированный помощник отлично понимает наших пользователей, когда они взаимодействуют через чат или электронную почту. Для этого нам нужно подтвердить, что наша технология очень хорошо распознает сущности и намерения. Сущности — это фрагменты информации, которые придают контекст намерению запроса. Например, в предложении «Назначить встречу с Андре где-то в последние две недели марта» смысл предложения состоит в..