Skip to content

fabioms-br/azure-data-factory

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

18 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Azure Data Factory

Aprender a automatizar processos de ETL no Azure Data Factory

Keywords: Data Platform, Execute SQL Scripts, Information Management, SQL Scripts, Data, Azure Stream Analytics, Azure, ADF, SQL Data Sync, Azure Machine Learning, SQL Server Management, Azure Data, SSIS, Azure Synapse Analytics, Azure Data Factory

😉 Gostou do conteúdo? Inscreva-se também no canal: http://www.fabioms.com.br/?url=youtube-subscribe

Youtube playlist: https://youtube.com/playlist?list=PL3CylihEP9UReYhK7ltrHKVFb5rNHPkQ4

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-copiar-dados-internet

Podemos migrar os pacotes do Integration Services para o Azure Data Factory utilizando a ferramenta Microsoft Visual Studio.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-ssis-migrar-pacotes

Apresentamos nesse vídeo como ler o arquivo XML de nota fiscal eletrônica armazenado no Azure Blob Storage e carregar seu conteúdo no Azure SQL Database.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-ler-nota-fiscal

Conhecer nesse vídeo a palestra que realizei no evento MVPConf 2020.

Organizado por profissionais reconhecidos pela Microsoft na área em que atuam e os valores dos ingressos são repassados a instituições de caridades.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-mvpconf-2020

Apresentamos nesse vídeo iremos conhecer o que é o Azure Data Factory, os seus elementos essencias como Linked Services, Pipelines, Datasets, entre outros.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-quanto-custa-como-criar-recurso

Apresentamos nesse vídeo como conectar o Azure Data Factory aos recursos computacionais da infraestrutura on-premises utilizando o Integration Runtime Auto-Hospedado (Self-Hosted).

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-conectar-on-premises

Como copiar dados de um banco de dados MS Access existente em um servidor on-premises para o Azure SQL Database

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-copiar-banco-msaccess

Apresentamos nesse vídeo como controlar a versão dos objetos do Azure Data Factory utilizando a integração do repositório do Azure DevOps, facilitando na colaboração entre equipes e nas mudanças executadas no código JSON associado.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-controle-versao-devops

Como utilizar o Data Flow do Azure Data Factory para combinar valores detabelas, salvando o resultado em formato CSV no Azure Data Lake

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-dataflow-combinar-tabelas

Apresentamos como utilizar o Power Query do Azure Data Factory para combinar valores de tabelas e salvar o resultado em formato CSV no Azure Blob Storage.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-combinar-tabelas

Apresentamos nesse vídeo a técnica de garinpar dados conhecida como web scraping utilizando o Azure Data Factory, extraindo os valores de cotações da bolsa de valores em tabela de página da internet

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-webscraping-webtable

Apresentamos nesse vídeo como extrair dados da internet utilizando a funcionalidade de conteúdo dinâmico para alterar a consulta SQL contendo o período de datas a serem extraídas

#microsoft #dataplatform #azure #datafactory #http #etl #integrationruntime #selfhosted #onpremises #mvp #dicadofabinho

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-extrair-dados-conteudo-dinamico

Nesse vídeo apresentamos como copiar os dados existentes do banco de dados SAP HANA para um arquivo em formato Parquet no Azure Data Lake Storage utilizando o Azure Data Factory.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-copiar-dados-sap-hana

Apresentamos nesse vídeo como carregar planilhas eletrônicas do Azure Data Lake Storage removendo os registros duplicados, e configurando o gatilho para executar quando um novo arquivo é criado.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-remover-registros-duplicados

Como obter os dados de uma lista no SharePoint e armazenar em tabela do banco de dados Azure SQL utilizando o Azure Data Factory

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-copiar-dados-sharepoint

<AppPermissionRequests AllowAppOnlyPolicy="true">
  <AppPermissionRequest Scope="http://sharepoint/content/sitecollection/web" Right="FullControl"/>
</AppPermissionRequests>

Microsoft Learn https://learn.microsoft.com/en-us/sharepoint/dev/sp-add-ins/add-in-permissions-in-sharepoint

Como extrair conteúdo de arquivo compactado (ZIP) existente no Github e descompactar no Azure Data Lake utilizando Azure Data Factory

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-extrair-conteudo-arquivo-zip

Apresentamos nesse vídeo como executar pipeline dentro de uma interação loop para modular e reaproveitar tarefas executadas, nesse caso, a extração de vários arquivos compactados no Github para Azure Data Lake.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-pipeline-loop-parametros

Apresentamos nesse vídeo como copiar parte do resultado em formato JSON para salvar no banco de dados SQL do Azure utilizando o Azure Data Factory.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-salvar-json-no-azure-sql