A NECn lançou uma nova livraria para análises de dados, chamada de FireDucks. A principal característica dessa nova livraria é a sua velocidade de processamento quando comparada por exemplo à livraria mais utilizada nesse mundo, o “pandas”.
Segundo a empresa, a ferramenta é capaz de realizar a preparação de dados necessária para a análise de dados até 16 vezes mais rápido do que as livrarias/softwares existentes, esta ferramenta reduz significativamente o tempo gasto no processo de análise de dados e reduz os custos computacionais. A versão beta do FireDucks já está disponível gratuitamente online.
Nos últimos anos, tornou-se mais fácil do que nunca coletar grandes volumes de dados, incluindo informações de vendas obtidas por meio dos terminais para pagamento com cartão (POS), e-commerce, comércio eletrônico e dados de transações financeiras. Para extrair resultados analíticos valiosos desses dados, há uma crescente necessidade de que os cientistas de dados façam suas análises usando inteligência artificial (IA) e aprendizado de máquina (ML).
No entanto, para se preparar para a análise de dados, conjuntos de dados grandes precisam ser pré-processados. Estima-se que os cientistas de dados gastem aproximadamente 45% do seu tempo preparando dados, e isso se tornou um grande problema. Além disso, o aumento no volume de dados e a evolução da IA e do ML levaram a um aumento na complexidade computacional. Como resultado, custos computacionais mais elevados (por exemplo, custos de nuvem) e o consequente aumento no consumo de energia e emissões de CO2 também se tornaram problemáticos.
Diante disso, a NEC se propôs a desenvolver o FireDucks, um programa de software desenhado para acelerar o processo de manipulação de dados, e totalmente compatível com a livraria “pandas”, não sendo necessário o refactoring do código. Para desenvolver este software a NEC utilizou a tecnologia de programação de alto desempenho e o conhecimento em aceleração que cultivou em mais de trinta anos de experiência no desenvolvimento de supercomputadores.
Ao disponibilizar a versão beta do FireDucks gratuitamente para o público em geral, a NEC espera contribuir para a redução das horas de trabalho dos cientistas de análise de dados na de resolução de questões ambientais por meio da conservação de energia e redução das emissões de CO2.
