Ao avaliar as duas soluções, os revisores acharam Apache Sqoop mais fácil de usar, configurar e administrar. No entanto, preferiram fazer negócios com AWS Glue em geral.
O AWS Glue possui muitas capacidades, como crawlers, catálogo e, especialmente, jobs de Glue para processamento ETL.
AWS Glue não é amigável, os componentes de transformação que temos não são úteis em diferentes cenários e precisamos usar transformações personalizadas para tudo, incluindo até mesmo operações muito básicas.
Ensaiar para usar, bom é segurança, e transferência rápida de dados entre a fonte e o destino.
A coisa que eu não gostei sobre o Apache Sqoop é que, uma vez que o pipeline é quebrado, é difícil recuperar mensagens perdidas.
O AWS Glue possui muitas capacidades, como crawlers, catálogo e, especialmente, jobs de Glue para processamento ETL.
Ensaiar para usar, bom é segurança, e transferência rápida de dados entre a fonte e o destino.
AWS Glue não é amigável, os componentes de transformação que temos não são úteis em diferentes cenários e precisamos usar transformações personalizadas para tudo, incluindo até mesmo operações muito básicas.
A coisa que eu não gostei sobre o Apache Sqoop é que, uma vez que o pipeline é quebrado, é difícil recuperar mensagens perdidas.