nodejs-file-reading — ETL de ficheiros posicionais
Motor Node.js para analisar ficheiros de texto de largura fixa com tipos de linha hierárquicos (pai/filho) e persistir em Postgres (Sequelize) ou MongoDB (Mongoose).
Resolve o clássico problema de interoperabilidade com sistemas legados: ficheiros posicionais em que os primeiros N caracteres de cada linha selecionam um schema diferente (header / lines / events) e os registos formam uma árvore. O formato é declarado como um 'file mapping' (discriminator + atributos por linha), por isso acrescentar um novo formato é config, não code.
Inclui 4 versões (m41/m51/m80/m90) de uma família real de mensagens bancárias/seguros, variantes de persistência para Postgres e MongoDB, e cobertura completa de Jest no parser principal.
Stack
Node.js, Sequelize, PostgreSQL, Mongoose, MongoDB, Jest, Moment