🐶 Еженедельник Python № 374: Обработка дампов Википедии с помощью Python

Еженедельный информационный бюллетень PyDo Python является частью Сообщества разработчиков FAUN. Мы помогаем разработчикам учиться и расти, поддерживая их в том, что важно.

⭐ Покровители

😍 Облачные микросервисы с Kubernetes — скидка 30%!

👋 Привет,

С вами Аймен, основатель FAUN, и я очень рад объявить о выпуске первой версии Нативных облачных микросервисов с Kubernetes.

Это подробное руководство поможет вам глубже погрузиться в тонкости микросервисов, стратегий обеспечения высокой доступности, CI/CD, GitOps и наблюдаемости в увлекательном мире разработки Cloud Native.

На протяжении всей книги вы получите практический опыт работы с широким спектром мощных инструментов и технологий, включая Docker, Kubernetes, minikube, Rancher, Terraform, Operators, Helm, Prometheus, Istio, Grafana, OpenTelemetry, Jaeger, Loki, Argo CD, и многое другое. Эти инструменты позволят вам создавать и управлять надежными, масштабируемыми и отказоустойчивыми архитектурами микросервисов.

Хотя это первый выпуск (v0) книги, будьте уверены, что он полностью содержит ценные идеи и практические знания. Кроме того, ожидайте обновлений и дополнительного контента в будущем.

🤩В знак признательности за то, что я член FAUN, я рад предложить вам эксклюзивную скидку 30 % на книгу. Просто используйте эту ссылку на купон, чтобы получить копию со скидкой.

Не упустите эту возможность и получите свою копию сейчас!

Спасибо за вашу постоянную поддержку, и мне не терпится узнать о вашем опыте работы с книгой.

Приятного чтения!
Аймен, основатель FAUN

Мы помогаем вам выиграть гонку за сердцами разработчиков!

Приобретайте, привлекайте и удерживайте разработчиков для вашей компании.

MarketToDev – это агентство по маркетингу и связям с разработчиками, от FAUN. Уникальное сочетание маркетинга, разработки программного обеспечения и страсти.

Наши услуги включают в себя предоставление практических идей, которые помогут расширить ваше сообщество разработчиков и повысить уровень внедрения. Кроме того, мы предлагаем бесплатную консультацию, чтобы обсудить ваши потребности и то, как мы можем помочь.

Не позволяйте своим конкурентам вырваться вперед, свяжитесь с MarketToDev!

👉 Расскажите о себе и помогите разработчикам найти вас, продвигая свои проекты на FAUN. Свяжитесь с нами для получения дополнительной информации.

🔗 Из сети

✅ Обработка дампов Википедии с помощью Python

В этой статье обсуждается использование Википедии в качестве источника организованного текста для языкового анализа, особенно для обучения или дополнения больших языковых моделей.

• Википедия — отличный источник систематизированного текста, полезный для языковых проектов. Он удобно предоставляет регулярно обновляемые дампы своего корпуса.
• Статья посвящена извлечению статей на английском языке вместе с соответствующим индексным файлом для него.
• Текст можно использовать для обучения больших языковых моделей, разработки встраивания слов, анализа настроений, извлечения фактов или решений, содержащих комбинации этих аспектов.
• Для этих задач требуются большие объемы текста, которые можно удобно найти в регулярно обновляемых дампах Википедии.
• Извлечение статей на английском языке и соответствующий индексный файл в сумме составляют 21 ГБ с округлением в формате bzip2.

Сообщение в блоге представляет собой введение в получение, обработку и осмысление этих выдержек, а затем начало начального анализа, после чего читатель может специализироваться на своих конкретных потребностях.

Трюки с Makefile для проектов Python

Файлы Makefile полезны для запуска задач и создания проектов среднего размера на Python.

В этой статье представлен начальный шаблон для использования файлов Makefile в проектах Python в качестве простых средств выполнения задач или систем сборки. Он включает в себя параметры конфигурации для оболочки, виртуальных сред, целей по умолчанию и справочных сообщений, ввода путей в PYTHONPATH и создания виртуальных сред.

✅ Объясните любую модель машинного обучения на Python с помощью SHAP

В этой статье объясняется, как ценности Шепли — метод, используемый в теории игр для справедливого распределения выгод и издержек между участниками, работающими в коалиции, — можно использовать для интерпретации модели машинного обучения.

• Ценность Шепли — это метод, используемый в теории игр для справедливого распределения доходов и расходов между участниками, работающими в коалиции, гарантируя, что каждый участник получит справедливую долю в зависимости от своего вклада.
• Значения Шепли можно использовать для определения вклада каждой функции в группу, например, рекламных стратегий.
• SHAP можно использовать для визуализации вклада и важности каждой функции в модели машинного обучения, такой как ежедневное использование Интернета и доход от области.
• Библиотека Python SHAP использует значения Шепли для объяснения результатов любой модели машинного обучения.

✅ CS:GO: От нуля до нулевого дня

В статье обобщается обнаружение трех различных уязвимостей удаленного выполнения кода (RCE), обнаруженных в широко распространенной игре Counter-Strike: Global Offensive.

Уязвимости активируются, когда игровой клиент устанавливает соединение со злонамеренным сервером Python CS:GO. Пост рассказывает о процессе изучения бинарника CS:GO и погружается в технические тонкости выявленных багов.

Статья завершается демонстрацией эксплойта для доказательства концепции (POC), который использует четыре различных логических недостатка, что приводит к удаленному выполнению кода на клиенте игры всякий раз, когда он подключается к серверу.

Как обнаружить объекты на изображениях с помощью нейронной сети YOLOv8

Обнаружение объектов — важная задача компьютерного зрения, используемая в различных приложениях, таких как самоуправляемые автомобили, робототехника и видеонаблюдение.

• Сверточные нейронные сети — лучший метод обнаружения объектов.
• YOLO (You Only Look Once) — одна из самых популярных нейронных сетей, используемых для обнаружения объектов, последней версией которой является YOLOv8.
• YOLOv8 может решать задачи классификации, обнаружения объектов и сегментации изображений, а также может обучаться на определенных типах объектов.

⚙️ Инструменты

реаликсуан/gsubpy

Интерпретатор подмножества Python в Go

laserbat/gol.py

Эффективная игра в жизнь на Python

гриммлаб/ФореТиС

Прогнозирование временных рядов в Python

суно-ай / кора

Текстовая генеративная модель аудио

диохабара/пычд

Декомпилятор Python на базе ChatGPT, обеспечивающий превосходные возможности анализа кода.

👉 Распространяйте информацию и помогайте разработчикам находить и следить за вашим проектом с открытым исходным кодом, рекламируя его на FAUN. Свяжитесь с нами для получения дополнительной информации.

🛍️ Магазин сувениров

Тернарный оператор

❤️ 20% эксклюзивная скидка для FAUNers на все продукты (+бесплатная доставка включена) при использовании кода «СПАСИБОFAUN».

😂 Мем недели

❤️ Спасибо, что читаете

👉 Никогда не пропустите проблему
Присоединяйтесь к сообществу разработчиков FAUN и подпишитесь на нашу рассылку здесь.

👋 Оставайтесь на связи и следите за нами в социальных сетях:
- 💼LinkedIn
- 📝 Medium
- 🐦 Twitter
- 👥Фейсбук
- 📸Инстаграм

👌 Была ли эта рассылка полезной?
Мы будем очень признательны, если вы поделитесь ею со своими друзьями! Вы также можете пожертвовать, чтобы помочь нам поддерживать этот информационный бюллетень.

ℹ️ Есть вопрос или отзыв?
Не стесняйтесь обращаться к нам по адресу [email protected]. Мы хотели бы услышать от вас!

🤩 Хотите спонсировать нашу рассылку?
Свяжитесь с нами по адресу [email protected], и мы свяжемся с вами как можно скорее.