Utilizar uma Arquitetura de Tecido de Dados Inteligente para Desbloquear o Valor dos Bens de Dados Distribuídos

Um líder global de fintech de 5 mil milhões de dólares, que lida com 7TN de transações de títulos de rendimento fixo e ações por dia, precisava de uma melhor forma de gerir e distribuir volumes crescentes de dados.

Os seus clientes, que incluem 150 empresas de corretagem e praticamente todos os bancos de Wall Street, vinha recebendo um volume crescente de dados provenientes de todos os lados - de fontes tradicionais e de novas fontes, incluindo dispositivos IoT e redes sociais.

Havia sempre a opção de mover os dados para um novo local, mas isso significaria utilizar uma arquitetura tradicional que, a longo prazo, não poderia suportar uma nova geração de requisitos, como a necessidade de acesso rápido e a pedido a dados em tempo real.

"Você pode se sentir tentado a fazer apenas uma cópia dos dados e a livrar-se dos problemas herdados", explica o Vice-Presidente de Desenvolvimento da empresa. "Uma solução melhor é construir uma camada de agregação, uma camada de orquestração com API. Queríamos uma fonte única de referência, em vez de transferir os dados para um único local."

Essa camada faz parte do que é conhecido como uma arquitetura de tecido de dados inteligente, adotada pela empresa para suportar o peso das cargas de dados atuais e futuras. Representa uma abordagem nova e cada vez mais popular à gestão e acesso a dados.

Como parceiro de soluções da InterSystems, a empresa está utlizando a plataforma de dados IRIS® da InterSystems, que fornece muitas das capacidades para criar um tecido de dados num único produto.

O objetivo da viagem é proporcionar aos usuários da empresa uma visão integrada, confiável e em tempo real dos dados empresariais, resolvendo essencialmente problemas de gestão de dados para empresas globais, que necessitam de tirar melhor partido dos seus dados.

Para se manterem competitivas, necessitam de tomar decisões mais informadas, prestar um melhor serviço ao cliente e personalizar as suas ofertas de produtos.

Uma arquitetura de tecido de dados não substitui, mas sim complementa os sistemas existentes. Um tecido de dados empresariais é uma abordagem arquitetural que acelera e simplifica o acesso seguro aos ativos de dados através de uma empresa. Acede, transforma e harmoniza dados de múltiplas fontes, a pedido, para os tornar utilizáveis e accionáveis para uma grande variedade de aplicações empresariais.

Tecidos de dados inteligentes levam esta abordagem um passo à frente ao incorporarem uma vasta gama de capacidades analíticas, incluindo exploração de dados, regras empresariais, inteligência empresarial, processamento de linguagem natural e aprendizagem de máquinas, tornando mais rápido e mais fácil para as organizações obterem novos conhecimentos e potenciarem serviços e aplicações preditivas e prescritivas inteligentes.

A abordagem faseada da empresa para construir o seu tecido de dados inteligente começou com a implementação da sua camada de agregação de dados baseada no InterSystems IRIS. A camada permite a ingestão em tempo real, no mesmo dia, em lote e em fluxo contínuo. Integra-se não só com os sistemas internos da empresa, mas também com os dos seus clientes, incluindo armazéns de dados de terceiros. Também fornece validação e transformação de dados.

A nova arquitetura de tecido de dados inteligente suporta várias iniciativas, incluindo uma aplicação de gestão de patrimônio da próxima geração, em que a camada de agregação tem de consolidar dados de muitos motores de liquidação de contas diferentes. Os utilizadores precisam de uma visão em tempo real e consistente dos ativos e obrigações de um cliente ou de uma conta, utilizando APIs padrão.

"Eles querem rapidez", diz o vice-presidente de desenvolvimento da empresa. "Querem respostas de um segundo".

Os testes revelaram que a nova arquitetura satisfazia os requisitos para o caso de utilização, incluindo não só a velocidade, mas também a capacidade de escalar para cinco vezes o volume atual, lidar com dois milhões de transações diárias, e armazenar sete anos de dados. Além disso, o cliente descobriu que o IRIS da InterSystems proporcionou uma melhoria de 900% no desempenho utilizando apenas 30% da infraestrutura, em comparação com uma abordagem alternativa.

Embora a implementação de um tecido de dados inteligente não exija a eliminação de qualquer hardware ou sistema existente, o Vice-Presidente de Desenvolvimento da empresa planeja utilizá-lo "para modernizar a nossa pegada" em toda a organização.

"Iremos avançar para a criação de APIs na camada de acesso, para que possamos dissociar as aplicações antigas e permitir novas aplicações utilizando as camadas de API e, eventualmente, decompor algumas das nossas aplicações antigas", afirma.

O tecido de dados inteligentes tem sido designado como o futuro da gestão de dados pelos principais analistas do setor, porque responde ao que o cliente e muitas outras empresas percebem que precisam de fazer para se manterem competitivas - agregar e harmonizar os seus dados em todas as linhas de negócio; criar uma porta de entrada para os dados para análises complexas; consolidar funções operacionais; e reduzir os custos de infraestrutura.

O tecido não só aproveitará ao máximo os seus dados, como também apoiará a colaboração e a inovação, e proporcionará a agilidade necessária para responder às condições de mercado em mudança.