Movimentação de dados

Movimentação de dados: o que é?

Movimentação de dados é a capacidade de mover dados de um lugar para outro em sua organização por meio de tecnologias que incluem extração, transformação e carga (ETLextrair, carregar, transformar (ELT) replicação de dados, e captura de dados de alteração (CDC), principalmente para fins de migração de dados e data warehousing.

A infraestrutura de TI e o cenário de aplicativos da sua organização estão em constante evolução, e seus aplicativos exigem dados de uma variedade de bancos de dados. Isso significa que você precisa de soluções de movimentação de dados eficientes e seguras para mover dados entre seus sistemas sem afetar o desempenho de suas fontes.

Movimentação de dados, sincronização de dadose replicação de dados são métodos complementares de integração de dadosJuntos, eles permitem que você entregue dados novos para manter seus bancos de dados, data warehouse, big data e sistemas em nuvem atualizados.

Tipos de movimentação de dados

Replicação
Oferece um método confiável e de baixo impacto de criar uma cópia precisa e atualizada de seus dados de fonte única ou de múltiplas fontes, que pode ser disponibilizada a qualquer pessoa que precise de acesso a tais dados, quando e onde quer que trabalhem. Você pode garantir o controle de bases de dados replicadas com configurações flexíveis de regras de arquivamento e retenção, realocação de dados e armazenamento. Seus dados permanecem acessíveis por meio da aplicação original ou por meio de quaisquer ferramentas de analytics que você tenha em uso.

Técnicas de sincronização de bancos de dados
Permite que você mantenha atualizados os seus dados replicados para que os seus usuários e suas aplicações trabalhem com a melhor informação que você possa fornecer a eles. Você pode atualizar bancos de dados replicados com uma configuração orientada a batch (pull) ou em tempo real (push). Para muitos bancos de dados relacionais, você pode sincronizar dados novos de forma instantânea com uma capacidade chamada CDC (change data capture ou captura de dados alterados).

Por que mover dados?
Capacidades abrangentes de movimentação e transformação de dados são essenciais para modernizar e expandir o seu portfólio de TI. Por exemplo, você pode precisar de ferramentas de movimentação de dados para mover dados de seus sistemas legados e plataformas para bancos de dados em nuvem. O ELT é um processo de integração de dados que combina dados de múltiplas fontes em um único armazem de dados. Esta capacidade é valiosa para atender requerimentos de integração híbrida como: conectar e transformar fontes de dados legados para um ambiente de data warehouse; ou mover dados de bancos de dados relacionais para ambientes de big data ou data lake.

Os casos de uso incluem:

Replicação de bancos de dados
Replique um banco de dados para recuperação de desastres (DR), rodar análises (analytics) mais rápido em múltiplas localidades, e para uso mais eficiente da distribuição de recursos.

Data warehouse em nuvem
Ganhe confiança de que seu data warehouse contém as informações mais atualizadas em toda a sua organização, incluindo bancos de dados e plataformas legados, ao mesmo tempo em que minimiza o impacto no tempo de atividade e no desempenho dos sistemas subjacentes. Mova dados para bancos de dados em nuvem, como MySQL para Microsoft® Azure® SQL Banco de dados, Oracle para Amazon® AWS RDS, ou SQL Servidor® para Amazon REDSHIFT®. Estenda as capacidades de ETL para conectar e transformar fontes de dados legadas em um ambiente de data warehouse, como OpenVMS® Rdb para Teradata®.

Movimentação de dados híbrida
Mova dados mestres entre sistemas on-premises e serviços em nuvem para equilibrar inovação, desempenho e continuidade dos negócios. Mova dados on-premises para a nuvem para gerar insights e se beneficiar de serviços elásticos sob demanda. Mova dados de aplicações em nuvem para a mainframe para dados precisos e completos em seu sistema de registro.

Data lakes em nuvem
Use uma solução de movimentação de dados para transferir dados de bancos de dados transacionais, como Adabas, VSAM, ou IMS, para um ambiente de big data ou data lake, como Hadoop®, Snowflake®, AWS e Azure®.

Arquivamento de dados
Programe o arquivamento de seus principais dados para gerenciar proativamente o crescimento de seus bancos de dados e manter seus sistemas rodando no pico de desempenho. Aumente a conformidade com diretrizes regulatórias para captura de dados para permitir a rastreabilidade e futuras auditorias.

Benefícios da movimentação de dados usando CONNX

Integre todas as suas fontes de dados

Mova, replique e sincronize dados oriundos de um amplo espectro de bases de dados (legado, relacional, big data e nuvem) residindo em plataformas como mainframe, OpenVMS, iSeries (AS/400), UNIX^®, Linux^®, Windows^® e desktop. CONNX oferece CONNX Oferece mais de 150 adaptadores de banco de dados, a maior variedade do setor, para fornecer conectividade SQL padrão. Conecte-se a qualquer ODBC, OLE DB, JDBCaplicativo, gerador de relatórios ou ferramenta de desenvolvimento compatível com ®, J2EE® ou .NET®.

Mova dados com facilidade
Utilize a solução de transferência de dados CONNX para sincronizar seu data warehouse na nuvem com fontes de dados legadas e não relacionais, como Adabas, VSAM™, IMS, Rdb e RMS, de maneira simples e padronizada, sem interromper as operações.

Replique em tempo real
Compartilhe dados orientados a eventos aproveitando a tecnologia CDC. Capture, transforme e replique dados de uma seleção de fontes para diversos sistemas alvo de dados (como bancos de dados, data warehouse, big data, nuvem e plataformas digitais). Mantenha a eficiência de sua movimentação de dados ao atualizar somente os registros que sofreram alterações.

Sincronize de forma eficiente
Configurações de transformação permitem o controle total de agendamentos incrementais ou de movimentações totais de dados, iniciando tarefas pré ou pós-sincronização, e ainda estabelecendo notificações automáticas de eventos via e-mail. Você pode escalar suas tarefas de sincronização com base na demanda, como agendar atualizações para períodos de baixo uso ou de forma tão frequente como a cada minuto sempre que o seu negócio requerer informações mais atualizadas. Por exemplo, adicione o CONNX ao Microsoft^® SSIS para suporte avançado ao SQL Server^® para poder facilmente identificar alterações de dados no banco de dados SQL Server, o que irá resultar em atualizações incrementais eficientes.

ETL e Transformação abrangente
Transformação com base em SQL com um construtor de consultas visuais (query builder) permite mapeamentos abrangentes de tabelas e campos. Uma biblioteca com mais de 500 funções de transformação oferece várias maneiras de mapear o valor de um campo, incluindo habilidades para transformações complexas como filtros, classificações, junções, uniões e agregações.

Fique no controle
As soluções de replicação de dados do CONNX colocam você no controle total com configurações flexíveis de arquivamento e regras de retenção, realocação de dados e armazenamento. Seus dados permanecem acessíveis por meio de sua aplicação de origem ou por quaisquer ferramentas de analytics que você tenha em uso.

Acesso seguro
O CONNX Security é ideal para lidar com questões de segurança entre plataformas, gerenciando vários logins de bancos de dados e protegendo o acesso aos dados em todos os sistemas.

Gerenciar metadados
Crie um léxico que combine todos os seus dados em uma estrutura única e abrangente sem alterar as estruturas de fontes.

Movimentação de dados