Splunk, une société spécialisée dans les technologies de recherche, le monitoring et l'analyse des données générées par les machines, a annoncé la sortie de Hunk 6.1. Hunk fournit une plate-forme d'analyse pour le Big Data.
Effectuer des analyses ad-hoc sur le Big Data et en déduire des informations utiles peut être difficile. Hunk adresse ce défi en fournissant une plate-forme pour explorer rapidement, analyser et visualiser les données dans Hadoop et d'autres bases de données NoSQL.
Hunk peut être vu comme quelque chose d'analogue à Hive - un moteur SQL open source pour interroger des données stockées dans Hadoop. Hive et Hunk prennent tous les deux une requête d'un utilisateur, la compilent en une série de tâches MapReduce et exécutent les tâches sur un cluster. Cependant Hunk est différent d'Hive sur plusieurs aspects essentiels :
- Hunk utilise son propre langage appelé Splunk (SPL) (Search Processing Language au lieu du SQL pour toutes les requêtes.
- Hunk n'a pas besoin d'avoir un schéma défini à l'avance. Il créé au lieu de cela un schéma à la volée lorsque la requête est exécutée.
- Hunk n'attend pas que les tâches MapReduce soient terminées pour afficher les résultats. Afin de fournir une expérience plus interactive, il traite les résultats intermédiaires directement pendant que les tâches MapReduce continuent de fonctionner en arrière-plan.
- En plus du moteur de requêtes, Hunk intègre une couche spécifique de visualisation qui permet aux utilisateurs de créer et d'enregistrer des graphiques interactifs directement depuis leurs résultats.
Splunk ajoute plusieurs nouvelles fonctionnalités à Hunk dans la dernière version :
- L'accélération des rapports met en cache les résultats de la recherche dans Hadoop, en améliorant les temps de réponse et la performance des rapports. Il peut être activé sur une base par rapport.
- Les tableaux de bord et les graphiques sont maintenant interactifs et supportent la superposition graphique, les contrôles panoramiques, les zooms et les fonctions drill down.
- Les graphiques et les rapports peuvent maintenant être intégrés dans des applications métiers externes.
- Hunk n'est plus limité seulement à Hadoop. Les bibliothèques de streaming de ressources permettent aux développeurs de connecter Hunk à n'importe quelle base NoSQL, comme Apache Cassandra, MongoDB, et Neo4j.
- Amélioration de la sécurité grâce à l'authentification pass-through qui donne la capacité aux administrateurs de contrôler les utilisateurs qui soumettent les tâches MapReduce et qui accèdent aux fichiers HDFS.
- Hunk ajoute le support de nouveaux formats de fichiers, comme les fichiers de séquence, RCFile, ORC files et Parquet.
La réaction de la communauté à cette version a été positive. Voici un échantillon de citations vues sur Twitter :
Splunk, hunk et hadoop dans un seul système... beaucoup d'amusement pour une fille geek. @mskerryschaffer - Kerry Schaffer, Directrice des technologies de l'information chez Marketing Associates.
#SplunkLive nouvelle version du produit de la société Splunk et Hunk continue à livrer pour le monde des AppDev world et devance la concurrence. @aconcolino - Anthony Concolino, Consultant en Management Indépendant.
Je félicite @splunk pour venir avec ce nom de produit intelligent : "Splunk Hunk pour Hadoop" si facile à prononcer. @tobingilman - Tobin Gilman, big data practice lead chez Bootstrap Marketing et Business Development.
Pour une liste complète des fonctionnalités, vous pouvez vous référer à la fiche produit de Hunk, ou en apprendre plus ici.