Публикации по теме 'entropy'


Различные меры распространения данных
Типичным показателем разброса в наборе данных является дисперсия/стандартное отклонение (далее мы будем обсуждать только дисперсию, но для наших целей они взаимозаменяемы). Мы также можем сделать что-то вроде межквартильного диапазона. И один из способов думать о дисперсии состоит в том, чтобы сказать, что при наличии набора данных, если бы мы попытались сделать на нем прогноз, который минимизирует сумму квадратов ошибок, мы бы выбрали среднее значение в качестве нашего ответа, а среднее..
Что подразумевается под энтропией в дереве решений?
Этот пост поможет вам понять использование энтропии в дереве решений. Давайте перейдем к делу ... Реальный пример высокой энтропии. Непонятная комната… Что такое энтропия ?? С точки зрения непрофессионала, энтропия - это всего лишь мера случайности. Мы всегда хотим минимизировать случайность, потому что, если случайность больше, будет много неопределенности. Пояснение на забавном примере ... Это данные, которые я собрал о моем друге о девушках, которые ему..
Краткая история энтропии: Глава 1
Хотя идея энтропии была введена во время изучения систем с термодинамической точки зрения, эта идея вдохновила на новые инновации во многих не связанных областях, среди которых выделяются разработка компьютерных алгоритмов для искусственного интеллекта и проектирование систем связи. Присоединяйтесь ко мне в этой серии статей, в которых я отправлю вас в путешествие вместе с нашим другом, энтропией, на пути от термодинамики к алгоритмам классификации, используемым в глубоком обучении...
Энтропия  — это просто! Часть 1: Примеры по физике.
Введение. Энтропия. Это, вероятно, одна из самых сложных концепций для понимания во всех областях науки. Энтропия качественно отличается от других переменных, обычно описывающих систему. Например, термодинамика описывает систему как давление, объем или внутреннюю энергию, а энтропия — это не свойство системы, а то, как мы ее рассматриваем. Что в основном делает Entropy? Согласно Википедии , энтропия относится к беспорядку или неопределенности. Определение ...
Случайная история о WebCrypto и WebAssembly
В эпоху, когда утечки данных попадают в новости только в случае кражи хотя бы пары сотен миллионов записей , все более важным становится думать о том, как защитить свои личные или бизнес-данные. Хотя такие инструменты, как GPG уже давно позволяют технически подкованным людям защищать наши данные, не хватает решений, которые были бы достаточно простыми для использования нетехническими специалистами. Bdrive - это платформа для обмена данными с сквозным шифрованием (E2E) , цель..
Энтропия в машинном обучении — От физики к анализу данных
Все начинается с физики Энтропия изолированной системы никогда не уменьшается… Каждый в школе в какой-то момент жизни усвоил это на уроке физики. Это второй закон термодинамики , который является единственным законом физики, который требует определенного направления для времени, также называемого стрелой времени . Несмотря на то, что он является абстрактным концепция, у каждого есть интуитивное ощущение эффектов энтропии и стрелы времени. Например, представьте, что вы смотрите..
Расчет энтропии, получение информации и изучение дерева решений
Вступление: Обучение дереву решений - это метод аппроксимации целевых функций с дискретными значениями, в котором изученная функция представлена ​​в виде наборов правил if-else / then для улучшения читабельности человеком. Эти методы обучения являются одними из самых популярных алгоритмов индуктивного вывода и успешно применяются для решения широкого круга задач; от обучения диагностике медицинских случаев до оценки кредитного риска соискателей кредита. Самый популярный алгоритм..