The Data Engineer

  • Sobre o site
  • Currículo

shell-scripting

ShellScript

Shell Script – Introdução

Introdução A utilização do shell script é algo bem comum no universo do Big Data, ele age como “cola” integrando partes heterogêneas de sistemas, executando rotinas, iniciando programas ou monitorando aplicações. Como podemos ver, é um item importantíssimo da caixa de ferramentas de um engenheiro de dados, estendendo o alcance Leia mais…

Por Jefferson Soares, 4 anos2021-03-16 atrás
Ingestão de dados
Data-Pipeline Ingestão de Dados

[Data Pipeline – Part. 2] Ingestão de dados com Streamsets

Continuando a serie do pipeline de dados, agora iremos fazer a preparação do ambiente em MySQL e realizar o processo de ingestão de dados com o Streamsets. Nessa etapa iremos adicionar dois novos itens em nosso pipeline. O primeiro é o docker-compose, que servirá de gerenciador permitindo a orquestração e Leia mais…

Por Jefferson Soares, 4 anos2021-01-04 atrás
  • Política de Privacidade
Hestia | Desenvolvido por ThemeIsle