Публикации по теме 'language-modeling'


Языковые модели, которые задают вопросы
ChatGPT задает вопросы, но их подсказывают люди. Было бы лучше, если бы ChatGPT ушел сам, задал себе кучу вопросов, а потом вернулся к нам со своим лучшим вопросом. Какой лучший вопрос? Тот, чей ответ дает самые большие градиенты. Что такое псевдокод? Пример оператора X из ChatGPT. Установите X и ¬X как ожидаемые выходные данные. Вычислите среднее значение абсолютного значения градиентов M. Если это самая большая буква M, которую вы когда-либо видели, сохраните ее и связанную..

ИИ генерирует комментарии к футбольным видеоиграм
Мой подход к созданию динамических комментариев в реальном времени для футбольной среды Google с использованием языковой модели GPT-2. Если вы уже много лет играете в серию видеоигр FIFA, вы, вероятно, слышали эти строки в комментариях к игре много раз: - «Привет всем, здесь Мартин Тайлер и Алан Смит, и наш сегодняшний матч проводится в Премьер-лиге». «Он прочитал намерения оппозиции осуществить перехват». «Что ж, мы можем получить новости о травме. Я думаю, Джефф Шривз..

Изучение архитектуры трансформатора - часть 1: противоречие OpenAI GPT 2
Части 1 и 2 этого блога были написаны Нитьеш Агарвалом при сотрудничестве и при спонсорской поддержке Exxact Corporation. Часть 1. Противоречие OpenAI GPT 2 «Утилизация НЕ приносит пользу миру. Это плохо для окружающей среды, для нашего здоровья и для экономики. Я не шучу. Переработка вредна для окружающей среды. Это разрушительно для Земли и является одним из основных факторов глобального потепления. Переработка вредна для нашего здоровья. Он способствует ожирению и таким..

Основы рекуррентной нейронной сети (RNN) и сети с долговременной кратковременной памятью (LSTM).
Что такое рекуррентные нейронные сети? Рекуррентные нейронные сети и типы ситуаций, в которых их можно использовать для решения задачи. Рекуррентная нейронная сеть, или сокращенно RNN, — это тип подхода к глубокому обучению, который пытается решить проблему моделирования последовательных данных. Всякий раз, когда точки в наборе данных зависят от предыдущих точек, данные называются последовательными. Например, Цена на фондовом рынке — это последовательный тип данных, потому что..

Глубокое обучение для обработки естественного языка (NLP)  — с использованием RNN и CNN
Было бы здорово, если бы компьютер мог понимать настоящие человеческие чувства, стоящие за саркастическими текстами, которые иногда даже превосходят реальных людей? Или что, если бы компьютеры могли так хорошо понимать человеческий язык, что могли бы оценить вероятность, говорящую вам, насколько вероятно встретить любое случайное предложение, которое вы ему дадите? Или, может быть, он мог бы генерировать полностью поддельные фрагменты кода ядра Linux, которые выглядят настолько..