Amazon lance Kinesis, un ETL temps réel pour collecter les gros volumes de données

L’acronyme “ETL” n’est pas utilisé par Amazon, comme si le concept était suranné. Mais Kinesis est pourtant bien un outil d’alimentation, comme en ont besoin tous les systèmes d’aide à la décision. Mais un outil d’alimentation en temps réel, destiné à ingérer et traiter des gros volumes de données. Amazon annonce un capacité de traitement allant jusqu’à plusieurs To par heure. Une capacité qui intéresse le monde du web (publicité en ligne, jeux, réseaux sociaux), de la finance, de la mobilité (géolocalisation) et surtout le domaine en fort développement des capteurs et de l’internet des objets.
A l’image des pipelines dont il reprend le nom, Kinesis permet d’ouvrir des canaux d’alimentation en temps réel, et d’ajouter des fonctions de retraitement des données, avant de les envoyer vers d’autres services comme Amazon Redshift, S3 ou EMR.
Pour Amazon, Kinesis va permettre aux clients d’ajouter des fonctions de traitement en temps réel aux applications existantes, reléguant à la préhistoire le concept de traitement par lots (batch).
Amazon Kinesis est pour l’instant disponible uniquement sur le centre serveur qui dessert l’Est des Etats-Unis, mais il devrait être déployé dans les autres régions Amazon Web Services dans les prochains mois.