Articles of bigdata

Erreur Apache Ambari Stale PID

Je dirige Ambari sur une gouttelette numérique de l’océan. J’ai détruit et réinstallé plusieurs gouttelettes, y compris de nouvelles installations d’Ambari et, par extension, PostgreSQL. Lorsque vous essayez de démarrer le serveur, je continue à courir l’erreur ci-dessous. J’ai redémarré le serveur, reconfiguré le serveur, enlevé le fichier PID obsolète, et bien d’autres choses, mais […]

Map Réduire le travail générant un fichier de sortie vide

Le programme génère un fichier de sortie vide. Quelqu’un peut-il s’il vous plaît me suggérer où je vais mal. Toute aide sera grandement appréciée. J’ai essayé de mettre job.setNumReduceTask (0) car je n’utilise pas de réducteur mais le fichier de sortie est toujours vide. public static class PrizeDisMapper extends Mapper{ int rating = 0; Text […]

Mettre à niveau un index Apache Solr de 1.x à 5.x (ou versions ultérieures)

Je migre de solr 1.0 à 5.3.0. J’ai copié tous les répertoires de données dans les nouveaux répertoires de données de base, mais je reçois l’exception suivante au démarrage: org.apache.lucene.index.IndexFormatTooOldException: La version du format n’est pas prise en charge (ressource BufferedChecksumIndexInput (MMapIndexInput (path = “/ Resume / resume / data / index / segments_1a9”))): -9 […]

Existe-t-il un concept de validation automatique dans hbase?

Je suis nouveau sur hbase et je veux en savoir plus. Je veux juste savoir s’il existe un concept de validation automatique dans HBASE?

Alternative de hive pour la requête Big Data

De la documentation officielle Hive : Hive vise à fournir une latence acceptable (mais non optimale) pour la navigation interactive dans les données, les requêtes sur de petits ensembles de données ou les requêtes de test. Je ne suis pas un expert en architecture de firebase database et j’aimerais savoir s’il existe une alternative lorsque […]

Différence entre shuffle () et rebalance () dans Apache Flink

Je travaille sur le projet final de mon bachelor, qui concerne la comparaison entre Apache Spark Streaming et Apache Flink (uniquement en streaming) et je viens tout juste d’arriver à “Physical partitioning” dans la documentation de Flink. Le fait est que dans cette documentation, cela n’explique pas bien comment ces deux transformations fonctionnent. Directement à […]

Comment installer Apache Bigtop Stack avec Ambari

Quelqu’un peut-il fournir un tutoriel ou des étapes pour installer la stack Apache BigTop à l’aide d’Ambari. J’ai essayé d’utiliser les repos fournis dans le fichier ci-dessous https://github.com/apache/ambari/blob/trunk/ambari-server/src/main/resources/stacks/BIGTOP/0.8/repos/repoinfo.xml Cependant, la stack bigtop n’apparaît pas dans l’interface utilisateur du tableau de bord ambari. Je ne veux pas installer en utilisant la stack HDP.

NoSuchMethodError lorsque hive.execution.engine valorise son tez

J’utilise hive 1.0.0 et apache tez 0.4.1 Lorsque je configure hive pour utiliser tez, je reçois une exception. Dans hive-site.xml lorsque la valeur de hive.execution.engine est mr fonctionne correctement . Mais si je le mets à tez j’obtiens cette erreur: Exception in thread “main” java.lang.NoSuchMethodError: org.apache.tez.mapreduce.hadoop.MRHelpers.updateEnvBasedOnMRAMEnv(Lorg/apache/hadoop/conf/Configuration;Ljava/util/Map;)V at org.apache.hadoop.hive.ql.exec.tez.TezSessionState.open(TezSessionState.java:169) at org.apache.hadoop.hive.ql.exec.tez.TezSessionState.open(TezSessionState.java:122) at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:454) at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:626) at […]

Comment charger des données rdf dans bigdata en utilisant nanosparqlserver

J’ai téléchargé bigdata.war et l’ai déployé en utilisant l’API HTTP de sésame. Maintenant, je ne comprends pas comment je devrais charger des sortingples / provenance rdf avec des sortingplets à bigdata en utilisant nanosparqlserver? J’utilise l’API HTTP de sésame (en utilisant apache tomcat). Puis-je avoir une aide s’il vous plait. Je compte utiliser mysql, java […]

Pourquoi «mapred-site.xml» n’est pas inclus dans la dernière version de Hadoop 2.2.0?

La dernière version de Hadoop fournit mapred-site.xml.template Devons-nous créer un nouveau fichier mapred-site.xml en utilisant ceci? Tout lien sur la documentation ou les explications relatives à Hadoop 2.2.0 sera très apprécié.