В мире технологий происходит настоящая революция. На передовом фронте этой революции стоят нейронные сети — мощные и удивительные инструменты искусственного интеллекта, которые сегодня изменяют наше представление о возможностях компьютеров. Сегодня мы познакомим вас с двумя моделями-помощниками с автодополнением кода: StarCoder и Codeium.

В данном посте я показываю способ обработки json строк с помощью языка программирования scala, когда схема файла заранее неизвестна или может быть изменена.

В рамках публикации расскажу о первоначальной обработке данных датасета, а также об обучении модели градиентного бустинга. Покажу базовые трансформации и действия, необходимые для получения результата обучения модели, что послужит хорошим и быстрым стартом для понимания работы Spark ML

Если вы столкнулись с ограничениями при работе с распределенными БД, то следующий пост будет крайне полезен. Подробнее о основах Spark DataFrame

Рассмотрим, что происходит от старта до окончания работы Spark приложения

Графы так или иначе связаны с анализом данных. Они либо визуализируют результат этого анализа, либо являются средством для его проведения.
Само же словосочетание «анализ данных» практически всегда равно python. Но эта статья будет посвящена веб-приложению графовой аналитики, написанному на C# + JavaScript.

Scala – развивающийся язык программирования. Его также называют улучшенной версией Java. Широкой публике он стал известен как язык разработки популярных соц.сетей: Linkedin, Twiter, WhatsApp.
Как применять его для автоматизированного сбора информации? Рассмотрим на практике: как написать парсер, используя этот инструмент.