Превью для статьи

Деревья решений в pySpark: от семечка до параметрической оптимизации случайного леса

Меня зовут Клим, и сегодня я буду вашим проводником в PySpark MLlib. В этом посте я расскажу о простом для понимания, но в то же время достаточно эффективным алгоритме — дерево решений, а также его расширенной модификацией случайные леса решений.

Превью для статьи

Тест-драйв PyTorch 2.0 и заглядываем под капот «двушки»

В данной публикации мы рассмотрим, насколько эффективен torch.compile() на практике, заглянем под капот «двушки» PyTorch 2.0, чтобы узнать, как работает этот метод и какие преимущества он дает.

Превью для статьи

Оптимизация хранения данных в СУБД Greenplum

Для анализа операций, совершенных в маркетплейсе, передо мной была поставлена задача организации витрины данных. В данной публикации поделюсь с вами опытом и знаниями по организации хранения данных в СУБД Greenplum.

Превью для статьи

Оптимизации работы Jupyter notebook при помощи параллельных вычислений (Библиотека Joblib)

В данном посте я расскажу о возможностях применения параллельных вычислений в интерактивной среде Jupyter notebook языка Python.

Превью для статьи

Сжатие текстовых данных методом арифметического кодирования

В связи с постоянным ростом объема информации, увеличивается потребность в технологиях сжатия данных. Сжатие мультимедийных и текстовых данных необходимо для экономии памяти, упаковки дополнительных данных и сокращения времени коммуникации. Одним из таких методов является арифметическое кодирование.

Превью для статьи

Оценка сложности алгоритмов

Добрый день! Предлагаю рассмотреть принципы оценки сложности алгоритма, а также методы для оценки времени исполнения алгоритмов.

Превью для статьи

Распределение вычислительной мощности между несколькими ПК

В ходе работы возникла задач обработки огромного объема (~500 Гб) аудиозаписей в условиях ограниченного времени. На одном ПК обработка заняла бы не менее месяца, что не вписывалось в установленные заказчиком сроки. Возникла идея подключения компьютеров коллег, у которых ночью ПК «отдыхают». Весь процесс можно разбить на несколько шагов: Установка Python на рабочий компьютер. Скачивание на […]