Apache Chukwa

Apache Chukwa peut être utilisé pour enregistrer l'activité qui se produit dans un système informatique complexe de Hadoop distribué.

Chukwa aidera les développeurs à traquer les problèmes et résoudre des bugs dans les applications de traitement de données, en fournissant une boîte à outils pour non seulement l'enregistrement de tous les calculs qui se produisent, mais aussi analyser, classer et afficher les données abouti.

Le projet est étroitement intégré à la philosophie de MapReduce et comme il utilise nativement (Distributed File System Hadoop) HDFS il fonctionnera hors de la boîte avec des projets Hadoop alimentés.

ce qui est nouveau dans cette version:

• nouvelles fonctionnalités:
• Migrer de fourmi à maven.
• Ajout Metrics 2 support pour Hadoop 0.20.203 +.
• Script du cluster résumé de porc Ajouté.
• Ajout digéré paramètres du système pour SystemMetrics demux analyseur.
• Ajout de configuration pour passer la validation du schéma HBase pour HBaseWriter.
• Mise à jour par défaut des fichiers de configuration Chukwa à utiliser SocketAdaptor pour Hadoop métriques streaming.
• spellcheck de configuration.
• Mise en œuvre graphique reste api et graphique explorateur pour tracer des données HBase au graphique.
• Mise en œuvre Syslog Adaptateur pour mappig Syslog nom de l'installation de type de données Chukwa.
• Remplacé collection métriques système avec Sigar.
• Ajout HBaseWriter pour stocker des données de séries chronologiques dans HBase pour aléatoire plus rapide en lecture / écriture.
• Assurez-processeur par défaut configurable.
• les actions de trigger Support HTTP.
• Ajout JMSAdaptor.
• Support post-démultiplexage déclencheur.

Ce qui est nouveau dans la version 0.6.0:

• Nouvelles fonctionnalités:
• Migrer de fourmi à maven.
• Ajout Metrics 2 support pour Hadoop 0.20.203 +.
• Script du cluster résumé de porc Ajouté.
• Ajout digéré paramètres du système pour SystemMetrics demux analyseur.
• Ajout de configuration pour passer la validation du schéma HBase pour HBaseWriter.
• Mise à jour par défaut des fichiers de configuration Chukwa à utiliser SocketAdaptor pour Hadoop métriques streaming.
• spellcheck de configuration.
• Mise en œuvre graphique reste api et graphique explorateur pour tracer des données HBase au graphique.
• Mise en œuvre Syslog Adaptateur pour mappig Syslog nom de l'installation de type de données Chukwa.
• Remplacé collection métriques système avec Sigar.
• Ajout HBaseWriter pour stocker des données de séries chronologiques dans HBase pour aléatoire plus rapide en lecture / écriture.
• Assurez-processeur par défaut configurable.
• les actions de trigger Support HTTP.
• Ajout JMSAdaptor.
• Support post-démultiplexage déclencheur.

Ce qui est nouveau dans la version 0.4.0:

• La collection de scripts shell dans / bin a été considérablement épuré. Par exemple, au lieu de bin / agent, vous devez maintenant dire bin / agent chuka.
• Il est maintenant possible de désactiver les connexions à distance à l'agent Chukwa. Cela rend Chukwa plus approprié pour une utilisation sur un déploiement orientée vers le client
• Chukwa comprend maintenant un adaptateur pour la lecture des données via un port UDP, le UDPAdaptor. Cela devrait faciliter l'intégration avec les outils de syslog et de legs similaire.
• Il y a eu un certain nombre de corrections de bugs et nettoyage de code depuis la dernière version; vérifier le changelog et JIRA pour plus de détails.

Exigences :

• Java 1.6 ou supérieur
• Apache Hadoop 0.20.205.1 ou plus
• hbase 0.90.4 ou supérieur