Como instalar o HIVE em Ubuntu (Guia de download e configuração)
ā” Resumo Inteligente
O Apache Hive Ć© instalado em Ubuntu Como uma camada fina de armazenamento de dados sobre um cluster Hadoop jĆ” em execução, a configuração consiste basicamente em descompactar um arquivo e apontar trĆŖs variĆ”veis āāde ambiente para os diretórios corretos.

Antes da instalação do Apache Hive, precisamos de um servidor dedicado. Hadoop instalação, instalado e funcionando com todos os daemons do Hadoop.
Para instalar o Hadoop, consulte este link. link.
Assim que todos os daemons do Hadoop estiverem funcionando corretamente, basta iniciar a instalação do Hive. O passo a passo abaixo descreve quatro etapas:
Processo de instalação do Apache Hive
- PrƩ-requisitos e compatibilidade de versƵes
- Instalação do Hive
- Inicialização do esquema metastore
- Comandos do shell do Hive
PrƩ-requisitos para instalar o Apache Hive em Ubuntu
O Hive não é um banco de dados independente. à uma camada de consulta que traduz HiveQL em tarefas que são executadas em um cluster existente, portanto, quase todas as instalações com falha tracO problema estÔ relacionado a um pré-requisito ausente, e não ao próprio Hive. Confirme o seguinte antes de baixar qualquer coisa:
- Um JDK compatĆvel. O Hive 4.1.x funciona com o JDK 17, enquanto o Hive 4.2.x eleva o requisito mĆnimo para o JDK 21. Verifique a versĆ£o com java -version e certifique-se de que a variĆ”vel de ambiente JAVA_HOME esteja exportada.
- Um cluster Hadoop em execução. Tanto o NameNode quanto o DataNode devem estar ativos. Execute jps e confirme se NameNode, DataNode, ResourceManager e NodeManager aparecem na lista.
- Acesso de escrita ao HDFS. A conta que inicia o Hive precisa de permissão para criar diretórios em HDFS.
- Versões correspondentes. O Hive 4.2.0 foi desenvolvido com base no Hadoop 3.4.1 e no Tez 0.10.5. A linha Hive 3.x chegou ao fim de sua vida útil em outubro de 2024, portanto, uma nova instalação deve ser direcionada à linha 4.x.
- Recursos gratuitos. Uma configuração de aprendizado de nó único funciona confortavelmente com aproximadamente 4 GB de RAM e 20 GB de espaço livre em disco.
Com essas caixas marcadas, a sequência de download e descompactação abaixo ocorre sem surpresas.
Como instalar o Hive em Ubuntu
Abaixo estĆ” um processo passo a passo sobre como instalar o Hive em Ubuntu:
Etapa 1) Baixe e instale o Hive em Ubuntu
Para baixar a versão estÔvel do Hive, consulte o apache URL Conforme mencionado abaixo.
https://www.apache.org/dyn/closer.cgi/hive/ ā vĆ” para o URL e selecione o link de download do espelho Apache. PĆ”gina de downloads do Apache Hive Lista quais versƵes do Hadoop sĆ£o compatĆveis com cada versĆ£o de lanƧamento.
A pĆ”gina espelhada abre com a lista de diretórios de versƵes do Hive disponĆveis, conforme mostrado abaixo.
Selecione a versão mais recente do instalador do Hive. (No meu caso, é a versão 3.1.2.) A pasta de lançamento lista os arquivos binÔrios e de código-fonte lado a lado.
Clique no arquivo .bin e o download comeƧarƔ.
Passo 2) Extraco arquivo tar
Acesse o local do arquivo tar baixado e execute o comando.tracExtraia o arquivo tar usando o seguinte comando para instalar o Hive em Ubuntu no seu sistema.
tar -xvf apache-hive-3.1.2-bin.tar.gz
O terminal exibe cada arquivo à medida que ele é descompactado no novo diretório do Hive.
Etapa 3) Coloque diferentes propriedades de configuração no Apache Hive
Nesta etapa, faremos duas coisas:
- Adicionando o caminho do diretório raiz do Hive ao arquivo .bashrc
- Inserir o caminho do diretório inicial do Hadoop no arquivo hive-config.sh.
1) Mencione o caminho do Hive em ~/.bashrc
Abra o arquivo para edição com o comando mostrado abaixo.
- Abra o arquivo .bashrc conforme mostrado na captura de tela acima.
- Indique o caminho do diretório raiz do Hive, ou seja, o caminho HIVE_HOME, no arquivo .bashrc e exporte-o conforme mostrado abaixo.
Code Para ser colocado no arquivo .bashrc:
export HIVE_HOME="/home/guru99hive/apache-hive-1.2.0-bin" export PATH=$PATH:$HIVE_HOME/bin
Recarregue o arquivo com fonte ~ / .bashrc Assim, o novo caminho entra em vigor na sessão atual do terminal.
2) Exportando o caminho do Hadoop em hive-config.sh
Para comunicar com o ecossistema Hadoop, definimos o caminho do diretório raiz do Hadoop no arquivo de configuração do Hive. Abra o arquivo hive-config.sh conforme mostrado abaixo.
Indique o caminho HADOOP_HOME no arquivo hive-config.sh conforme mostrado abaixo.
Etapa 4) Crie diretórios Hive no Hadoop
Para se comunicar com o Hadoop, precisamos criar diretórios no Hadoop, conforme mostrado abaixo. O Hive grava os dados da tabela gerenciada no diretório `warehouse` e āāa saĆda de preparação no diretório `tmp`.
Conceder permissões de root para criar pastas do Hive no Hadoop. Se nenhuma mensagem de erro for exibida, significa que o Hadoop concedeu permissões com sucesso às pastas do Hive.
Passo 5) Entre no shell do Hive
Acesse o shell do Hive digitando o seguinte: '. /colmeia' comando como mostrado abaixo.
Como inicializar o esquema do metastore do Hive
O Hive armazena todos os nomes de tabelas, colunas e tipos de dados em um repositório relacional chamado metastore. Em uma instalação nova, esse repositório estÔ vazio e, a partir da versão 3.x do Hive, o shell se recusa a iniciar até que as tabelas de esquema existam. O utilitÔrio schematool, que é fornecido no diretório bin do Hive, cria essas tabelas.
Para uma configuração de aprendizagem com um Ćŗnico utilizador, a base de dados Derby incluĆda Ć© suficiente:
$HIVE_HOME/bin/schematool -dbType derby -initSchema
O comando imprime a versĆ£o do esquema que criou e termina com schemaTool concluĆdoO Derby grava seus arquivos no diretório de onde o comando foi executado, portanto, sempre inicie o Hive a partir desse mesmo diretório posteriormente.
O Derby aceita apenas uma sessão ativa por vez, o que o torna inadequado para um cluster compartilhado. Aponte o Hive para MySQL Em vez disso, adicione as propriedades de conexão ao arquivo hive-site.xml e execute a ferramenta novamente com um tipo de banco de dados diferente:
$HIVE_HOME/bin/schematool -dbType mysql -initSchema
A lista completa de propriedades e a alocação de motoristas estão descritas no guia de instruções. Configure o metastore do Hive com MySQLVale a pena lembrar mais duas bandeiras:
- -informações Relata a versão do esquema atualmente registrada no metastore sem alterar nada.
- -upgradeSchema Migra um metastore existente para a versão do esquema da nova versão do Hive instalada.
Com o esquema definido, o shell estÔ pronto para aceitar sua primeira instrução HiveQL.
Comandos do shell do Hive
Aqui, vamos criar uma tabela de exemplo usando o comando "create" do shell do Hive com nomes de colunas.
Código de exemplo para criar um banco de dados no Hive. A captura de tela abaixo mostra a instrução CREATE e a saĆda do comando DESCRIBE, uma após a outra.
A partir da captura de tela acima, podemos observar o seguinte:
1) Criação de uma tabela de exemplo com nomes de colunas no Hive
- Aqui o nome da tabela Ć© āprodutoā com trĆŖs nomes de colunas produto, nome e preƧo
- Os nomes das três colunas são indicados pelos seus respectivos tipos de dados.
- Todos os campos sĆ£o terminados por uma vĆrgula ', '
2) Exibindo informaƧƵes da tabela Hive
- Usando o comando ādescribeā, podemos visualizar as informaƧƵes da tabela presentes no Hive.
- Aqui estão exibidos os nomes das colunas com seus respectivos tipos de dados presentes no esquema da tabela.
- Ao final, serĆ” exibido o tempo gasto para executar este comando e o nĆŗmero de linhas retornadas.
Código de exemplo para criar um banco de dados em Colméia (para autoavaliação)
1) Criar tabela produto(produto int, nome_do_produto string, preƧo float)
Row format delimited Fields terminated by ',';
2) descrever o produto;
Assim que a tabela responde ao comando `describe`, o shell, o metastore e o HDFS sĆ£o interligados. A partir daĆ, a mesma sessĆ£o aceita o protocolo mais amplo. Criar, alterar e excluir tabela declaraƧƵes e o ordenar por, agrupar por e clusterizar por consultas.
Erros comuns de instalação do Hive Ubuntu e como corrigi-los
A maioria das falhas na primeira execução decorre do ambiente ao redor do Hive, e não do próprio Hive. A tabela abaixo relaciona as mensagens que aparecem com mais frequência à sua causa e ao comando que as resolve.
| Mensagem na tela | Causa provƔvel | Fixar |
|---|---|---|
| hive: comando não encontrado | HIVE_HOME/bin não estÔ no PATH. | Verifique novamente as linhas de exportação no arquivo .bashrc e execute o comando. fonte ~ / .bashrc |
| Informações de versão não encontradas no metastore | O esquema do metastore nunca foi inicializado. | Execute o schematool com a opção -initSchema para o tipo de banco de dados escolhido. |
| A chamada para localhost:9000 falhou devido a uma exceção de conexão. | O HDFS não estÔ em execução. | Inicie os daemons do Hadoop e confirme se o NameNode e o DataNode aparecem em jps |
| O NameNode estÔ em modo de segurança. | O NameNode ainda estÔ em modo de segurança de inicialização. | Saia do modo de segurança com hdfs dfsadmin -safemode sair |
| Permissão negada: acesso=ESCRITA em /user/hive/warehouse | O diretório do armazém não possui permissão de escrita para o grupo. | Reaplicar hdfs dfs -chmod g+w nos diretórios de armazenamento e temporÔrios |
| Erro NoSuchMethodError em Preconditions.checkArgument | O Hive e o Hadoop distribuem versões diferentes do arquivo Guava. | Exclua o arquivo JAR antigo do Guava no diretório lib do Hive e copie o arquivo JAR do Hadoop para o mesmo lugar. |
Uma maneira rÔpida de separar um problema do Hive de um problema do Hadoop é executar jps Primeiro. Se os daemons estiverem ausentes, a falha estÔ no cluster; se estiverem presentes e o shell ainda falhar, a falha estÔ na configuração do Hive ou no esquema do metastore. Assim que o shell estiver estÔvel, Operadores e funções integradas do HiveQL A referência é o próximo passo natural.







