Превью для статьи

Регрессия в нейросетях: предсказываем загрязнение воздуха

Эффективны ли нейросети в задачах регрессии? Обучим нейронку на данных о загрязнении воздуха и посмотрим, что из этого получится

Превью для статьи

Бамбук, Mito-лист и Деталь, или как подготовиться ко встрече с пандами

Как часто вы сталкиваетесь с необходимостью выгрузить в MS Excel более миллиона строк? Все фильтры на выгрузку уже были наложены ранее, но, увы, она до сих пор «не проходит по габаритам». Перед нами встает дилемма – делить, или … воспользоваться готовыми решениями для python, не изучая python!

Превью для статьи

Работа с нечитаемыми символами в текстовых файлах

Как прочесть текстовые файлы с нечитаемыми символами (например, смайликами) или сохраненные в разных кодировках?

Превью для статьи

Сравнение различных способов редактирования Spark DataFrame

В данном посте разберём различные способы создания столбцов путем преобразования, вычислений, применения регулярных выражений и т.д. Также мы сравним длительность каждого способа и какой лучше где применить.

Превью для статьи

Автоматизированная загрузка массива CSV в БД

Не исключена ситуация, когда необходимо загрузить данные из нескольких фалов CSV в одну таблицу какой-либо базы данных. Если загружать 2-3 файла вручную, то это ещё терпимо, но загрузка 10 файлов уже может оказаться затратной по времени. Рассмотрю, как автоматизировать данный процесс

Превью для статьи

Параллельная обработка и преобразование JSON-фалов в Pandas

Структурированные данные – хорошо, а полуструктурированные – не проблема. Формат json хоть и является очень популярным, однако не очень удобен для анализа, особенно если данных много, и они разделены на отдельные файлы. Давайте разберем процесс преобразования множества json-файлов различной структуры в привычный аналитикам pandas.DataFrame.

Превью для статьи

Как измерить опоссумов линейной регрессией

А что если использовать свои навыки регрессии, чтобы предсказать длину головы опоссума по остальным метриками его тела?

Data News