✍️ Как работать с Parquet в Python
Apache Parquet — это открытый формат хранения данных, предназначенный для обработки больших объёмов данных. Он подходит для приложений, где часто требуется выборка и агрегирование данных по отдельным столбцам.
Новая статья рассказывает, как с помощью библиотеки pyarrow легко работать с файлами этого формата, в частности:
▪️как записывать DataFrame в Parquet;
▪️как читать файлы Parquet;
▪️как читать отдельные столбцы;
▪️как получать метаданные файла Parquet.
🔗 Ссылка на статью
Apache Parquet — это открытый формат хранения данных, предназначенный для обработки больших объёмов данных. Он подходит для приложений, где часто требуется выборка и агрегирование данных по отдельным столбцам.
Новая статья рассказывает, как с помощью библиотеки pyarrow легко работать с файлами этого формата, в частности:
▪️как записывать DataFrame в Parquet;
▪️как читать файлы Parquet;
▪️как читать отдельные столбцы;
▪️как получать метаданные файла Parquet.
🔗 Ссылка на статью
Please open Telegram to view this post
VIEW IN TELEGRAM
⚡️ gs-quant | Библиотека для инвестинга
ПОлезная и хорошо документированная библиотека для всевозможных потребностей инвестора — матмоделей и количественных методов анализа финансовых рынков и управления финансами. Банк Goldman Sachs плохо не делает.
📌 Репозиторий
ПОлезная и хорошо документированная библиотека для всевозможных потребностей инвестора — матмоделей и количественных методов анализа финансовых рынков и управления финансами. Банк Goldman Sachs плохо не делает.
pip install gs-quant📌 Репозиторий
Краткая база для всех, кто работает с Linux.
В этом видео мы разыгрываем 3 крутые книги по Linux:
- Внутреннее устройство Linux. 3-е изд. | Кетов Дмитрий
- Unix и Linux: руководство системного администратора | Хейн Трент Р., Макин Дэн
- Командная строка Linux. Полное руководство. 2-е межд. изд. | Шоттс Уильям
Подписывайтесь на канал, оставляйте осмысленный комментарий под видео и выигрывайте эти крутые книги!
https://www.youtube.com/watch?v=FP8UwvEe3Cs
@pro_python_code
Please open Telegram to view this post
VIEW IN TELEGRAM
cheatsheets-matplotlib.pdf
2.8 MB
Matplotlib — это функциональная библиотека для визуализации данных в Python. Она позволяет создавать различные графики и диаграммы для представления данных в наглядном виде.
Это официальные шпаргалки от создателей библиотеки. Помимо основной, есть также материалы, разделённые на три категории:
- для начинающих
- для более опытных разработчиков
- советы
Please open Telegram to view this post
VIEW IN TELEGRAM
pyshorteners - полезная случаях библиотека для сокращения ссылок.
Поддерживаются различные сервисы для сокращения, среди них:
— tiny.cc
— bit.ly
— adf.ly
— git.io
— tinyurl.com
— и многие другие
Пример кода для сокращения ссылки.
import pyshorteners
s = pyshorteners.Shortener()
print(s.tinyurl.short('http://www.g1.com.br'))
Ставится командой ⚙ pip install pyshorteners
Документация и примеры кода здесь.
https://pypi.org/project/pyshorteners/
Поддерживаются различные сервисы для сокращения, среди них:
— tiny.cc
— bit.ly
— adf.ly
— git.io
— tinyurl.com
— и многие другие
Пример кода для сокращения ссылки.
import pyshorteners
s = pyshorteners.Shortener()
print(s.tinyurl.short('http://www.g1.com.br'))
Ставится командой ⚙ pip install pyshorteners
Документация и примеры кода здесь.
https://pypi.org/project/pyshorteners/
💬 PDF to Podcast: Convert any PDF into a podcast episode!
Этот проект предоставляет инструмент для преобразования любого PDF-документа в эпизод подкаста!
Используеются модели преобразования текста в речь OpenAI и Google Gemini, этот инструмент обрабатывает содержимое PDF-файла, генерирует естественный диалог, подходящий для аудиоподкаста, и выводит его в виде файла MP3.
▪Github: https://github.com/knowsuchagency/pdf-to-podcast
▪Demo: https://pdf-to-podcast.com/
@pro_python_code
Этот проект предоставляет инструмент для преобразования любого PDF-документа в эпизод подкаста!
Используеются модели преобразования текста в речь OpenAI и Google Gemini, этот инструмент обрабатывает содержимое PDF-файла, генерирует естественный диалог, подходящий для аудиоподкаста, и выводит его в виде файла MP3.
▪Github: https://github.com/knowsuchagency/pdf-to-podcast
▪Demo: https://pdf-to-podcast.com/
@pro_python_code
MongoDB для Python - NoSQL база данных.
https://www.youtube.com/watch?v=THXT_SGo6xs&t=938s
@pro_python_code
https://www.youtube.com/watch?v=THXT_SGo6xs&t=938s
@pro_python_code
YouTube
MongoDB для Python - NoSQL база данных.
MongoDB - это документоориентированная база данных, которая предоставляет гибкое хранение и обработку данных. Она разработана для работы с большими объемами данных и обеспечивает высокую производительность и масштабируемость.
🔥 Telegram канал о нейросетях…
🔥 Telegram канал о нейросетях…
🤗 Все что нужно знать о работе с Hugging Face за 10 минут!
В этом ролике мы разыгрываем 3 крутые книги по МАШИННОМУ ОБУЧЕНИЮ, нужно всего лишь оставить любой осмысленный коммент и лайк и быть подписанным на наш канал!
https://www.youtube.com/watch?v=4B_foZbWh2c
@pro_python_code
В этом ролике мы разыгрываем 3 крутые книги по МАШИННОМУ ОБУЧЕНИЮ, нужно всего лишь оставить любой осмысленный коммент и лайк и быть подписанным на наш канал!
https://www.youtube.com/watch?v=4B_foZbWh2c
@pro_python_code
https://www.youtube.com/shorts/Hrf0JtOnyiI
@pro_python_code
Please open Telegram to view this post
VIEW IN TELEGRAM
Forwarded from Python/ django
This media is not supported in your browser
VIEW IN TELEGRAM
Крутой и полезный инструмент: контроля вызова модулей и зависимостей для Python, напсианная на Rust.
С помощью Tach вы можете управлять тем, какие модули Python полагаются на какие другие. Чтобы избежать жесткой зависимости, модули также могут указывать общедоступный интерфейс.
В результате получается модульная, разделенная конструкция, которая упрощает разработку и обслуживание.
Любая попытка одного модуля импортировать другой, который явно не объявлен как зависимость, приведет к сообщению об ошибке от Tach. Когда для модуля установлен «строгий режим», Tach выдаст ошибку, если другой модуль попытается импортировать из него без использования его общедоступного интерфейса.
1. Он может показать что откуда кого вызывает и обращается в масштабе проекта, например (особенно, если он чужой)
2. Для CI процесса важно проверить перед деплоем, все ли ок, эта штука помогает это сделать
3. Контроль при коллективной разработке. Ставите ограничения на main например и фиг кто добавит в вызовы туда лишнее
pip install tach▪ Github
@pythonl
Please open Telegram to view this post
VIEW IN TELEGRAM
🎓 Архив октрытых курсов прямо в телеграм!
Вот огромная база материалов, которая пополлняется каждый день!
>Python (96гб видео)
>C# (45гб курсов)
>Английский (101гб курсов)
>Java (23гб видео)
>PHP (43гб видео)
>Мобильная разработка (22гб курсов)
>Go ( 132гб видео)
>Rust (35 гб видео)
>SQL (43гб видео)
>MySQL (31гб видео)
>Другое (234гб видео)
⛓ Крутейший Архив на 20241Гб: Курсов, книг, шпаргалок, стаетй, лекция ресурсы — всё собрано в одном месте: @datacours
Вот огромная база материалов, которая пополлняется каждый день!
>Python (96гб видео)
>C# (45гб курсов)
>Английский (101гб курсов)
>Java (23гб видео)
>PHP (43гб видео)
>Мобильная разработка (22гб курсов)
>Go ( 132гб видео)
>Rust (35 гб видео)
>SQL (43гб видео)
>MySQL (31гб видео)
>Другое (234гб видео)
⛓ Крутейший Архив на 20241Гб: Курсов, книг, шпаргалок, стаетй, лекция ресурсы — всё собрано в одном месте: @datacours
Здесь очень подробно и понятно объясняются ключевые темы Python, можно использовать, чтобы освежить азы перед собеседованием
К каждой главе прилагается Google Colab, что очень удобно
@pro_python_code
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
https://uproger.com/luchshie-repozitorii-na-github-dlya-novichkov-izuchayushhih-python/
@pro_python_code
Please open Telegram to view this post
VIEW IN TELEGRAM
PYTHON: Делаем Анализ Текста. NLP приложение за минуту.
https://www.youtube.com/shorts/8ElveRgbROw
@pro_python_code
https://www.youtube.com/shorts/8ElveRgbROw
@pro_python_code
This media is not supported in your browser
VIEW IN TELEGRAM
🌐🕵️♂️ Ominis OSINT: Безопасный веб-поиск ️
Новый OSINT инструмент под названием "Hominis OSINT ".
Это скрипт на Python , который выполняет онлайн-сбор информации, запрашивая у Google результаты поиска, связанные с запросами, введенными пользователем.
• Github
@pro_python_code
Новый OSINT инструмент под названием "Hominis OSINT ".
Это скрипт на Python , который выполняет онлайн-сбор информации, запрашивая у Google результаты поиска, связанные с запросами, введенными пользователем.
git clone https://github.com/AnonCatalyst/Ominis-Osint
pip install -r requirements.txt• Github
@pro_python_code
Please open Telegram to view this post
VIEW IN TELEGRAM