Le monitoring revient à surveiller et mesurer une activité informatique. Il est mis en place pour suivre différentes variables : performance du système, temps de réponse des interfaces etc…
Talend Administration Center est la solution de monitoring payante proposée par Talend. Elle utilise des outils open source tels que ElasticSearch, Kibana et Logstash. Hormis Talend Administration Center il n’existe pas de solution permettant de suivre les exécutions des jobs et interfaces Talend.
L'ETL Talend propose nativement une gestion des logs dans les jobs. Ils sont enregistrés dans une base de données ou un fichier texte. Ces logs de base sont assez « sommaires ». Il est nécessaire d’ajouter des composants dans chaque job si l’on souhaite obtenir davantage d’information.
Aucun outil ne permet de présenter les logs de façon compréhensible pour des non-initiés. Une fois le job construit, rien ne permet de monitorer son exécution. Le monitoring est surtout absent en mode open source car les jobs sont généralement exécutés via des tâches planifiées Windows.
Axysweb a ainsi développé un outil de suivi et de monitoring des jobs et interfaces Talend.
Notre équipe a conçu un outil de monitoring des jobs et interfaces Talend. Cette solution intègre de nombreuses fonctionnalités pour la gestion et le suivi des interfaces sous Talend.
Notre solution de monitoring Talend permet aux entreprises de contrôler l’exécutions des jobs (Batch Windows en tâche planifiées).
Les équipes peuvent obtenir le détail de chaque exécution.
L’interface de monitoring permet aux entreprises d’agréger les logs des jobs Talend et de loger le nombre d’éléments transmis dans chaque flux.
L’interface propose des statistiques sur les temps d’exécution des jobs et interfaces et la volumétrie des flux de données.
Ces résultats sont centralisés dans un tableau de bord lisible pour les non-initiés.
La solution présente également des graphiques sur les exécutions et un suivi dans le temps.
Les erreurs d’exécution sont relevées en temps réel et signalées aux utilisateurs par un système d’alertes personnalisable.
Les erreurs dans les flux de données du système d’information sont suivies en temps réel. L’interface remonte les fichiers d’erreurs s’ils existent.
Notre interface de monitoring Talend permet de stocker les jeux de données afin d’assurer l’archivage.
L’outil prévoit la gestion les droits des utilisateurs afin de permettre une visibilité à différents services.
L’authentification à la plateforme est possible via un annuaire Active Directory ou des comptes stockés en base de données.
Cette interface de monitoring permet aux équipes informatiques de gérer les flux de données du système d’information. Elles ont un suivi en temps réel grâce à des alertes en cas d’erreur dans les exécutions des interfaces.
L’entreprise est réactive, elle traite les problèmes rapidement. Cette solution lui permet de ne pas subir de pertes dommageables.
Grâce à un outil de monitoring, l’entreprise bénéficie d’une vue globale sur l’ensemble des jobs et interfaces Talend déployés. Cette vision lui permet d’être plus productive en prenant de meilleures décisions techniques.
Grâce à cette solution de monitoring, les équipes informatiques de l’entreprise observent l'état de santé de l’infrastructure et des machines Talend en continue. L’interface les alerte automatiquement en cas de problème d’exécution. Les risques sont évités.
L’outil de monitoring permet à la Direction du Système d’Information d’avoir une vue globale et d’être alerté en cas d’erreur. Cette solution offre une réactivité importante aux équipes. Elles agissent rapidement en cas d’alertes pour éviter des pannes venir.
Axysweb a développé une interface sur-mesure permettant de monitorer l’exécution des jobs Talend dans un système d’information. Les données sont remontées en temps réel et retranscrites sous la forme d’un tableau de bord.
Notre équipe d’experts réalise des projets Talend depuis plusieurs années. Nous avons rencontré la problématique du monitoring sur un projet client. Persuadés qu’elle représente une problématique récurrente au sein des entreprises utilisant les solutions Talend, nous avons donc décidé de développer une prestation dédiée.
Nous avons l’habitude de travailler directement avec les équipes informatiques pour la mise en place d’interfaces de monitoring. La Direction du Système d’Information souhaite pouvoir suivre en temps réel les erreurs d’exécution.
Vous souhaitez monitorer efficacement vos interfaces Talend ?
Vous cherchez un prestataire pour vous accompagner dans le déploiement d'une interface de monitoring sur-mesure ?
Découvrez la solution Entreprise Service Bus de Talend pour la création d'un ESB.
Pourquoi et comment gérer une migration de données en entreprise ?
Développement d'une solutions sur-mesure de monitoring des interfaces Talend.