Aplica-se A
Revolution Analytics

Problema encontrado no CDH4 de Cloudera, mas aplicáveis a qualquer versão suportada do Hadoop.Quando executar um Hadoop script nos resultados de contexto "local" são produzidos, mas quando em execução no contexto de hadoop-mostra seguinte erro:"Erro interno: não é possível repor hdfs params interno enquanto estiver ligado a um sistema de ficheiros hdfs."Causas possíveis:1. - está ou não a definir a opção 'nameNode' correctamente no comando RxHdfsFileSystem() ou estiver a utilizar o número da porta incorrecta para HDFS dessa mesma função.Se estiver a executar um EdgeNode o formulário de código, certifique-se de que a definição de 'hostName' é o nome real do nameNode e não o nome de anfitrião de edgenode que está a executar.Além disso, verifique o Gestor de Cloudera e verificar que o serviço HDFS está a utilizar a porta '8020', a porta predefinida. Se estiver a utilizar uma porta diferente, terá de o definir explicitamente que a chamada seguinte no seu Hadoop testar script:(Por exemplo)myNameNode <-"test1.acme.com"myPort < - 1700hdfsFS <-RxHdfsFileSystem (nome de anfitrião = myNameNode, porta = myPort)2. - no caso de especificar um nó de limite tem de especificar o mesmo nome de anfitrião e porta definições em RxHadoopMR() e RxHdfsFileSystem()3.-Certifique-se de que copiou o frasco de RevoScaleR de ficheiros a partir do directório em que é iniciado o programa de instalação de rotação (pasta de rotação),Medidor de escala-hadoop-0,1-SNAPSHOT.jar para o directório de lib Cloudera Hadoop, que normalmente é:/OPT/cloudera/parcels/CDH/lib/hadoop/lib (para parcelas) ou/usr/lib/hadoop/lib/ Este ficheiro tem de ser copiados para esta pasta em todos os nós do Hadoop cluster.Depois de modificar qualquer um destes parâmetros, execute novamente o script que revelou inicialmente o erro.Se o erro persistir, contacte o suporte técnico, para uma resolução de problemas mais profundos.

Precisa de mais ajuda?

Quer mais opções?

Explore os benefícios da subscrição, navegue em cursos de formação, saiba como proteger o seu dispositivo e muito mais.