Lors de l'évaluation des deux solutions, les évaluateurs ont trouvé AWS Data Pipeline plus facile à utiliser. Cependant, AWS Glue est plus facile à mettre en place et à administrer. Les évaluateurs ont également préféré faire affaire avec AWS Glue dans l'ensemble.
Le pipeline de données s'intègre très bien avec EMR, et il est facile de déployer des pipelines via CloudFormation, ce qui rend l'automatisation possible. Nous l'utilisons pour gérer des flux de travail MapReduce complexes et cela fonctionne généralement de...
Il devrait vraiment être repensé car un blob JSON est une façon terrible d'organiser les tâches SQL. Pourquoi les choses ne peuvent-elles pas être programmées comme un calendrier ou une demande de réunion ?
Ils améliorent les choses et les rendent plus adaptées.
AWS Glue n'est pas convivial, les composants de transformation que nous avons ne sont pas utiles dans différents scénarios et nous devons utiliser des transformations personnalisées pour tout, y compris même des opérations très basiques.
Le pipeline de données s'intègre très bien avec EMR, et il est facile de déployer des pipelines via CloudFormation, ce qui rend l'automatisation possible. Nous l'utilisons pour gérer des flux de travail MapReduce complexes et cela fonctionne généralement de...
Ils améliorent les choses et les rendent plus adaptées.
Il devrait vraiment être repensé car un blob JSON est une façon terrible d'organiser les tâches SQL. Pourquoi les choses ne peuvent-elles pas être programmées comme un calendrier ou une demande de réunion ?
AWS Glue n'est pas convivial, les composants de transformation que nous avons ne sont pas utiles dans différents scénarios et nous devons utiliser des transformations personnalisées pour tout, y compris même des opérations très basiques.