O blog da AWS

Category: AWS Glue

Processando arquivos posicionais com AWS Glue

Por Luiz Yanai, arquiteto especialista sênior em Data & AI na AWS. Você já precisou processar arquivos em larga escala e teve dificuldade porque o layout é posicional? O processamento de arquivos com layout posicional ainda é importante no cenário tecnológico atual, mesmo com o surgimento de formatos mais modernos. Essa importância deriva principalmente da […]

Habilitando análise interativa dos seus dados em um ambiente multi-contas

Por Luiz Yanai, arquiteto especialista sênior em Data & AI na AWS. Em arquiteturas corporativas baseadas em nuvem muitas vezes trabalha-se com múltiplas contas para oferecer uma melhor segregação entre recursos e aplicações de diferentes unidades de negócio e também como forma de aumentar a segurança. Um ambiente de dados pode apresentar essa segregação, e […]

Use o Azure DevOps para implantar o AWS Glue Jobs no pipeline de CI/CD

Por Chan Nyein Zaw e Brijesh Pati Neste post do Blog, mostraremos um exemplo do uso do AWS Toolkit for Azure DevOps para implantar suas tarefas do AWS Glue em várias contas da Amazon Web Services (AWS) para simular ambientes de desenvolvimento e produção. Introdução O AWS Glue é um serviço de integração de dados […]

Protegendo os clientes do Itaú e promovendo uma sociedade mais justa e segura através de dados e IA

Por Helder Vieira – Cientista de Dados Coordenador ; Marcos Girotto – Cientista de Dados Gerente- ; Fernando Beserra – Cientista de Dados Coordenador ; Thiago Branco – Engenheiro Coordenador.   Desde o início da pandemia, a digitalização no Brasil sofreu uma forte aceleração. O setor bancário não ficou de fora, e o PIX simboliza […]

Automatização da criação de dashboards do Amazon QuickSight para análise de dados do Amazon Connect

Por Ankur Taunk, Senior Solutions Architect na AWS e Mehmet Demir, Senior Specialist Solutions Architect na AWS Introdução Para obter os benefícios analíticos mais avançados, as organizações precisam de uma plataforma robusta e uma solução econômica para administrar um contact center próspero. Isso é feito com a criação de um data lake no Amazon Simple […]

Transformando o TR-069 bulk data em insights com o AWS IoT Core e os serviços de análise na AWS

Por Murat Balkan, Specialist Solutions Architect Introdução Os provedores de serviços de comunicação (CSPs) geralmente gerenciam milhões de dispositivos (CPEs) de seus clientes para fornecer diversos serviços. Existem diversos tipos de dispositivos, dependendo das tecnologias de comunicação utilizadas. Modems via cabo e xDSL, decodificadores e roteadores sem fio são alguns exemplos de tipos de equipamentos […]

AWS serverless data analytics – arquitetura de referência

Por Praful Kava, Sr. Specialist Solutions Architect na AWS e Changbin Gong é Senior Solutions Architect na AWS   O onboarding de novos dados ou a construção de novos pipelines de analytics em arquiteturas de análise tradicionais normalmente requer uma coordenação extensiva entre as equipes de negócios, engenharia de dados e ciência de dados e […]

Detectando e mascarando dados sensíveis usando o AWS Glue e AWS Glue DataBrew

Por Thiago da Hora, Arquiteto de Soluções, AWS Brasil – Setor Público Introdução A privacidade de dados é um tema que tem ganhado bastante relevância nas empresas, seja por conta de normas de conformidades e leis, como o caso da Lei Geral de Proteção de Dados (LGPD) disposta pelo Governo Federal, ou pelo impacto negativo […]

Automatização de Jobs de ETL entre o Amazon RDS for SQL Server e o Azure Managed SQL com o AWS Glue Studio

Por Daniel Maldonado, Arquiteto de Soluções na AWS Introdução Atualmente, existem vários clientes que seguem uma estratégia multi-nuvem, usando serviços de nuvem gerenciados para tarefas de análise de dados, como Amazon RDS for SQL Server ou Azure SQL Managed Instances para bancos de dados e ferramentas tradicionais de ETL com uma interface visual para processar […]