Différences

Ci-dessous, les différences entre deux révisions de la page.

Lien vers cette vue comparative

Les deux révisions précédentes Révision précédente
enseignement:tp:bda:projet:2016 [2017/01/09 11:07]
ecoquery [Kafka]
enseignement:tp:bda:projet:2016 [2017/01/09 12:47] (Version actuelle)
ecoquery [Kafka]
Ligne 58: Ligne 58:
   * Le répertoire bin de kafka est ''/usr/hdp/2.5.0.0-1245/kafka/bin''   * Le répertoire bin de kafka est ''/usr/hdp/2.5.0.0-1245/kafka/bin''
   * Kafka est à démarrer via Ambari (il faut sauter les 2 premières étapes du tutoriel)   * Kafka est à démarrer via Ambari (il faut sauter les 2 premières étapes du tutoriel)
-  * L'url du broker kafka est  ''localhost:6662''+  * L'url du broker kafka est  <del>''localhost:6662''</del> ''sandbox.hortonworks.com:6667''
  
 Pour écrire dans le HDFS depuis Kafka, il est conseillé d'utiliser le [[http://docs.confluent.io/2.0.0/connect/connect-hdfs/docs/index.html|connecteur HDFS]]. A défaut, on pourra utiliser [[https://flume.apache.org/|Apache Flume]], mais ce dernier peut poser des problèmes de performances. Pour écrire dans le HDFS depuis Kafka, il est conseillé d'utiliser le [[http://docs.confluent.io/2.0.0/connect/connect-hdfs/docs/index.html|connecteur HDFS]]. A défaut, on pourra utiliser [[https://flume.apache.org/|Apache Flume]], mais ce dernier peut poser des problèmes de performances.