Data Engineer ????????

  • Autor: Vários
  • Narrador: Vários
  • Editora: Podcast
  • Duração: 1:35:50
  • Mais informações

Informações:

Sinopse

??????? ? Data Engineer-??. ???????? ? ?????????? ????????????? Data Engineer-????, ?????????? ?? ????? ?????? ??? ???????? ??????? ????????? ??? IOT/WebScraping ?????? ?? azure. ???????????: azure data explorer, azure data fabric, azure data lake storage, azure data lake analytics ? ?????? ??????.

Episódios

  • 3: ETL и EventHub

    24/10/2019 Duração: 30min

    Обсуждаем и сравниваем ETL системы на примере Apache NIFI и StreamsetsDataCollector. Далее разбираемся в работе EvenHub-ов.

  • 2: Форматы и схемы

    17/09/2019 Duração: 16min

    Продолжаем обсуждение форматов файлов и схем данных. Рассматриваются: выведение схемы данных, проекция сложных типов данных в колонки, преимущества колоночных форматов, кратко о методах сжатия данных. Dremel made simple with Parquet https://blog.twitter.com/engineering/en_us/a/2013/dremel-made-simple-with-parquet.html Avro specs https://avro.apache.org/docs/1.8.1/spec.html

  • 1. Форматы файлов

    10/09/2019 Duração: 16min

    Обсуждаем разные форматы файлов для хранения данных

  • 0. Пилотный выпуск

    05/09/2019 Duração: 32min

    Подкаст о Data Engineer-ах. В пилотном выпуске краткая информация обо мне и о чем планируется говорить. Упоминаются: azure data explorer, azure data fabric, azure data lake storage, azure data lake analytics и многое другое.