J’installe Apache Hadoop sur un seul cluster, sur mon portable en fait. J’ai effectué toute l’installation conformément au manuel ici , cependant, j’ai eu des erreurs lors de l’installation. Une solution consiste à le comstackr manuellement en utilisant VS, et je l’ai fait. Mais en construisant le code, j’obtiens une erreur avec la ligne suivante […]
Comme nous le soaps, apache drill peut facilement être interrogé, mais j’ai quelques questions comme suit: Premier : Si apache Drill peut exécuter la mise à jour, supprimer, insérer des opérations sur HDFS. Seconde : Si la réponse à la première question est oui, comment puis-je utiliser apache Drill pour mettre à jour, supprimer ou […]
J’essaie d’installer Apache Hive, j’insère HIVE_HOME et HADOOP_HOME dans hive_config.sh et je copie des fichiers Hive JAR dans le fichier $ HADOOP_HOME / lib. Exception in thread “main” java.lang.RuntimeException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.metastore.HiveMetaStoreClient at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:346) at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:681) at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:625) at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57) at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) at java.lang.reflect.Method.invoke(Method.java:606) at org.apache.hadoop.util.RunJar.main(RunJar.java:156) Caused by: java.lang.RuntimeException: Unable […]
Je reçois une erreur qui, à mon avis, est liée à la configuration de mon répertoire: après l’exécution: hadoop-0.20.205 / bin / hadoop jar hadoop-0.20.205.0 / consortingb / streaming / hadoop-streaming – * .jar -fichier mapper.py -mapper mapper.py -file reducer.py -reducer reducer.py -input cs4501input -output py_wc_out Je reçois: packageJobJar: [mapper.py, reducer.py, / tmp / hadoop-ubuntu […]
Je suis un débutant dans Apache Hadoop et j’ai essayé le programme de comptage Word d’Apache et cela a bien fonctionné. Mais maintenant, je voudrais faire mon propre programme de température extérieure qui calcule les moyennes quotidiennes. Le calcul moyen ne fonctionne pas comme prévu; aucune combinaison et moyenne de données n’est faite. Pour être […]
J’écris une fonction de mappeur qui génère les clés sous la forme d’un identifiant utilisateur et les valeurs sont également du type Texte. Voici comment je fais cela public static class UserMapper extends Mapper { private final static IntWritable one = new IntWritable(1); private Text userid = new Text(); private Text catid = new Text(); […]
Je suis nouveau sur hbase et je veux en savoir plus. Je veux juste savoir s’il existe un concept de validation automatique dans HBASE?
Je suis nouveau à flume et hadoop. J’ai un doute: si on peut utiliser flume sans configurer le hadoop? Quelqu’un peut-il partager ses connaissances?
J’essaie de comprendre les différentes versions de hadoop et j’ai été dérouté après avoir lu cette page . Download 1.2.X – current stable version, 1.2 release 2.2.X – current stable 2.x version 2.3.X – current 2.x version 0.23.X – similar to 2.XX but missing NN HA. Releases may be downloaded from Apache mirrors. Question: Je […]
J’apprends le hadoop en utilisant cloudera single node vm et je suis passé par cette ligne hadoop job -list J’ai reçu un avertissement (L’utilisation de ce script pour exécuter la commande mapred est obsolète. Au lieu de cela, utilisez la commande mapred pour cela.) Je suis conscient que cela fonctionnera bien, mais je suis un […]