Comandos Shell HBase com exemplos

Após a instalação bem-sucedida do HBase no Hadoop, obtemos um shell interativo para executar vários comandos e realizar diversas operações. Usando esses comandos, podemos realizar múltiplas operações em tabelas de dados que podem proporcionar melhor eficiência de armazenamento de dados e interação flexível por parte do cliente.

Podemos interagir com o HBase de duas maneiras,

Modo shell interativo HBase e
Através da Java API

No HBase, o modo shell interativo é usado para interagir com o HBase para operações de tabela, gerenciamento de tabela e modelagem de dados. Usando Java Modelo API, podemos realizar todos os tipos de operações de tabelas e dados no HBase. Podemos interagir com o HBase usando ambos os métodos.

A única diferença entre esses dois é Java A API usa código Java para se conectar ao HBase e o modo shell usa comandos shell para se conectar ao HBase.

Overcap rápido do HBase antes de prosseguirmos-

HBase usa Hadoop arquivos como sistema de armazenamento para armazenar grandes quantidades de dados. Hbase consiste em servidores mestres e servidores de regiões
Os dados que serão armazenados no HBase estarão na forma de regiões. Além disso, essas regiões serão divididas e armazenadas em servidores de múltiplas regiões
Este comando shell permite ao programador definir esquemas de tabela e operações de dados usando interação completa no modo shell
Qualquer que seja o comando que usarmos, ele será refletido no modelo de dados HBase
Usamos comandos shell HBase em interpretadores de script do sistema operacional, como shell Bash
O shell Bash é o interpretador de comando padrão para a maioria dos Linux e Unix distribuições operacionais
Versões avançadas do HBase fornecem comandos shell referências orientadas a objetos no estilo jruby para tabelas
Variáveis de referência de tabela podem ser usadas para realizar operações de dados no modo shell HBase

Por exemplo,

Neste tutorial, criamos uma tabela na qual 'educação' representa o nome da tabela e corresponde ao nome da coluna “guru99”.
Em alguns comandos, “guru99” representa o próprio nome de uma tabela.

Comandos gerais

No Hbase, os comandos gerais são categorizados nos seguintes comandos

Status
Versão
Table_help (varredura, eliminação, obtenção, colocação, desabilitação, etc.)
Quem sou eu

Para entrar no comando shell HBase, primeiro de tudo, temos que executar o código conforme mencionado abaixo

hbase Shell

Assim que entrarmos no shell HBase, podemos executar todos os comandos do shell mencionados abaixo. Com a ajuda desses comandos, podemos realizar todos os tipos de operações de tabela no modo shell HBase.

Vejamos todos esses comandos e seu uso, um por um, com um exemplo.

Status

Syntax:status

Este comando fornecerá detalhes sobre o status do sistema, como número de servidores presentes no cluster, contagem de servidores ativos e valor médio de carga. Você também pode passar quaisquer parâmetros específicos dependendo do status detalhado que deseja saber sobre o sistema. Os parâmetros podem ser 'resumo', 'simples' ou 'detalhado', o parâmetro padrão fornecido é “resumo”.

Abaixo mostramos como você pode passar diferentes parâmetros para o comando status.

Se observarmos a captura de tela abaixo, teremos uma ideia melhor.

hbase(main):001:0>status
hbase(main):002:0>status 'simple'
hbase(main):003:0>status 'summary'
hbase(main):004:0> status 'detailed'

Quando executamos este comando status, ele fornecerá informações sobre número de servidores presentes, servidores mortos e carga média do servidor, aqui na captura de tela mostra informações como- 1 servidor ativo, 1 servidor morto e carga média de 7.0000.

Versão

Syntax: version

Este comando exibirá a versão do HBase atualmente usada no modo de comando
Se você executar o comando version, ele fornecerá a saída conforme mostrado acima

Tabela de ajuda

Syntax:table_help

Este comando orienta

O que e como usar comandos referenciados em tabelas
Ele fornecerá diferentes usos de comandos do shell HBase e suas sintaxes
Aqui na captura de tela acima, mostra a sintaxe para “crio" e "obter_tabela” comando com seu uso. Podemos manipular a tabela por meio desses comandos assim que a tabela for criada no HBase.
Ele fornecerá comandos de manipulação de tabela como put, get e todas as outras informações de comandos.

whoami

Sintaxe:

Syntax: Whoami

Este comando “whoami” é usado para retornar as informações atuais do usuário HBase do cluster HBase.

Ele fornecerá informações como

Grupos presentes no HBase
As informações do usuário, por exemplo, neste caso “hduser”, representam o nome do usuário conforme mostrado na captura de tela

TTL (Tempo de Vida) – Atributo

No HBase, as famílias de colunas podem ser definidas com valores de tempo em segundos usando TTL. O HBase excluirá automaticamente as linhas assim que o tempo de expiração for atingido. Este atributo se aplica a todas as versões de uma linha – até mesmo à versão atual.

O tempo TTL codificado no HBase para a linha é especificado em UTC. Este atributo é usado com comandos de gerenciamento de tabela.

Diferenças importantes entre o tratamento de TTL e os TTLs da família de colunas estão abaixo

Os TTLs das células são expressos em unidades de milissegundos em vez de segundos.
Os TTLs de uma célula não podem estender o tempo de vida efetivo de uma célula além de uma configuração de TTL no nível da família de colunas.

Comandos de gerenciamento de tabelas

Esses comandos permitirão que os programadores criem tabelas e esquemas de tabelas com linhas e famílias de colunas.

A seguir estão os comandos de gerenciamento de tabela

Criar
Lista
Descrever
Desabilitar
Desativar_tudo
Permitir
Habilitar todos
Cair
Soltar_tudo
Mostrar_filtros
Idade
Alterar_status

Vejamos vários usos de comandos no HBase com um exemplo.

Criar

Syntax: create <tablename>, <columnfamilyname>

Exemplo:-

hbase(main):001:0> create 'education' ,'guru99'
0 rows(s) in 0.312 seconds
=>Hbase::Table – education

O exemplo acima explica como criar uma tabela no HBase com o nome especificado fornecido de acordo com o dicionário ou especificações de acordo com a família de colunas. Além disso, também podemos passar alguns atributos de escopo de tabela para ele.

Para verificar se a tabela 'educação' foi criada ou não, temos que utilizar o "Lista" comando conforme mencionado abaixo.

Lista

Syntax:list

O comando “List” exibirá todas as tabelas presentes ou criadas no HBase
A saída mostrada na captura de tela acima mostra atualmente as tabelas existentes no HBase
Aqui nesta captura de tela, mostra que há um total de 8 tabelas presentes dentro do HBase
Podemos filtrar valores de saída de tabelas passando parâmetros opcionais de expressão regular

Descrever

Syntax:describe <table name>

hbase(main):010:0>describe 'education'

Este comando descreve a tabela nomeada.

Dará mais informações sobre as famílias de colunas presentes na tabela mencionada
No nosso caso, dá a descrição da mesa “educação”.
Ele fornecerá informações sobre o nome da tabela com famílias de colunas, filtros associados, versões e mais alguns detalhes.

desabiltar

Syntax: disable <tablename>

hbase(main):011:0>disable 'education'

Este comando começará a desabilitar a tabela nomeada
Se a tabela precisar ser excluída ou descartada, ela deverá ser desativada primeiro

Aqui, na captura de tela acima, estamos desabilitando o ensino de mesa

desativar_tudo

 Syntax: disable_all<"matching regex"

Este comando desabilitará todas as tabelas que correspondem ao regex fornecido.
A implementação é igual ao comando delete (exceto adicionar regex para correspondência)
Depois que a tabela for desativada, o usuário poderá excluí-la do HBase
Antes de excluir ou soltarping tabela, ela deve ser desativada primeiro

Permitir

Syntax: enable <tablename>

hbase(main):012:0>enable 'education'

Este comando começará a habilitar a tabela nomeada
Qualquer que seja a tabela desativada, para retornar ao seu estado anterior, usamos este comando
Se uma tabela for desabilitada em primeira instância e não for excluída ou descartada, e se quisermos reutilizar a tabela desabilitada, teremos que habilitá-la usando este comando.
Aqui na captura de tela acima estamos habilitando a tabela “educação”.

mostrar_filtros

Syntax: show_filters

Este comando exibe todos os filtros presentes no HBase como ColumnPrefix Filter, TimestampsFilter, PageFilter, FamilyFilter, etc.

cair

Syntax:drop <table name>

hbase(main):017:0>drop 'education'

Temos que observar os pontos abaixo para o comando drop

Para deletar a tabela presente no HBase, primeiro temos que desabilitá-la
Para eliminar a tabela presente no HBase, primeiro temos que desativá-la
Portanto, qualquer tabela a ser eliminada ou excluída primeiro, a tabela deve ser desativada usando o comando desabilitar
Na captura de tela acima, estamos soltandoping tabela “educação”.
Antes de executar este comando, é necessário desabilitar a tabela “educação”.

drop_all

Syntax: drop_all<"regex">

Este comando eliminará todas as tabelas que correspondam ao regex fornecido
As tabelas devem ser desativadas primeiro antes de executar este comando usando disable_all
Tabelas com expressões correspondentes de regex serão retiradas do HBase

está ativado

Syntax: is_enabled 'education'

Este comando irá verificar se a tabela nomeada está habilitada ou não. Normalmente, há uma pequena confusão entre as ações de comando “enable” e “is_enabled”, que esclarecemos aqui

Suponha que uma tabela esteja desabilitada, para usar essa tabela temos que habilitá-la usando o comando enable
O comando is_enabled irá verificar se a tabela está habilitada ou não

alterar

Syntax: alter <tablename>, NAME=><column familyname>, VERSIONS=>5

Este comando altera o esquema da família de colunas. Para entender exatamente o que ele faz, explicamos aqui com um exemplo.

Exemplos:

Nestes exemplos, realizaremos operações de comando alter em tabelas e suas colunas. Realizaremos operações como

Alterando nomes de famílias de colunas únicas e múltiplas
Excluindo nomes de famílias de colunas da tabela
Várias outras operações usando atributos de escopo com tabela

Para alterar ou adicionar a família de colunas 'guru99_1' na tabela 'educação' do valor atual para manter no máximo 5 células VERSÕES,

“educação” é o nome da tabela criada com o nome da coluna “guru99” anteriormente
Aqui, com a ajuda de um comando alter, estamos tentando alterar o esquema da família de colunas para guru99_1 de guru99

hbase> alter 'education', NAME='guru99_1', VERSIONS=>5

Você também pode operar o comando alter em vários grupos de colunas. Por exemplo, definiremos duas novas colunas em nossa tabela existente “educação”.

 hbase> alter 'edu', 'guru99_1', {NAME => 'guru99_2', IN_MEMORY => true}, {NAME => 'guru99_3', VERSIONS => 5}

Podemos alterar mais de um esquema de coluna por vez usando este comando
guru99_2 e guru99_3 conforme mostrado na captura de tela acima são os dois novos nomes de colunas que definimos para a tabela education
Podemos ver a maneira de usar este comando na captura de tela anterior

Nesta etapa, veremos como excluir o grupo de colunas da tabela. Para excluir o grupo de colunas 'f1' na tabela 'educação'.

Use um destes comandos abaixo,

hbase> alter 'education', NAME => 'f1', METHOD => 'delete'

hbase> alter 'education', 'delete' =>' guru99_1'

Neste comando, estamos tentando excluir o nome do espaço de coluna guru99_1 que criamos anteriormente na primeira etapa

Conforme mostrado nas capturas de tela abaixo, ele mostra duas etapas – como alterar o atributo de escopo da tabela e como remover o atributo de escopo da tabela.

Syntax: alter <'tablename'>, MAX_FILESIZE=>'132545224'

Passo 1) Você pode alterar atributos de escopo de tabela como MAX_FILESIZE, READONLY, MEMSTORE_FLUSHSIZE, DEFERRED_LOG_FLUSH, etc. Eles podem ser colocados no final; por exemplo, para alterar o tamanho máximo de uma região para 128 MB ou qualquer outro valor de memória, usamos este comando.

Uso:

Podemos usar MAX_FILESIZE com a tabela como atributo de escopo como acima
O número representado em MAX_FILESIZE é em termos de memória em bytes

NOTA: O escopo da tabela de atributos MAX_FILESIZE será determinado por alguns atributos presentes no HBase. MAX_FILESIZE também está nos atributos do escopo da tabela.

Passo 2) Você também pode remover um atributo de escopo de tabela usando o método table_att_unset. Se você ver o comando

alter 'education', METHOD => 'table_att_unset', NAME => 'MAX_FILESIZE'

A captura de tela acima mostra o nome da tabela alterado com atributos de escopo
O método table_att_unset é usado para remover atributos presentes na tabela
Na segunda instância, estamos desativando o atributo MAX_FILESIZE
Após a execução do comando, ele simplesmente removerá a configuração do atributo MAX_FILESIZE da tabela “educação”.

alter_status

 Syntax: alter_status 'education'

Através deste comando, você pode obter o status do comando alter
Que indica o número de regiões da tabela que receberam o nome da tabela de passagem de esquema atualizado
Aqui na captura de tela acima mostra regiões 1/1 atualizadas. Isso significa que ele atualizou uma região. Depois disso, se for bem-sucedido, o comentário será exibido.

Comandos de manipulação de dados

Esses comandos funcionarão na tabela relacionada à manipulação de dados, como colocar dados em uma tabela, recuperar dados de uma tabela e excluir esquema, etc.

Os comandos incluídos nestes são

Contar
colocar
BAIXE
Apagar
apagar tudo
Truncar
Escanear

Vejamos o uso desses comandos com um exemplo.

Contar

Syntax: count <'tablename'>, CACHE =>1000

O comando recuperará a contagem de um número de linhas em uma tabela. O valor retornado por este é o número de linhas.
A contagem atual é mostrada a cada 1000 linhas por padrão.
O intervalo de contagem pode ser especificado opcionalmente.
O tamanho padrão do cache é de 10 linhas.
O comando Count funcionará rapidamente quando configurado com o cache correto.

Exemplo:

hbase> count 'guru99', CACHE=>1000

Este exemplo de contagem busca 1000 linhas por vez de “GuruMesa de 99 polegadas.

Podemos fazer o cache com algum valor menor se a tabela consistir em mais linhas.

Mas, por padrão, ele buscará uma linha por vez.

hbase>count 'guru99', INTERVAL => 100000
hbase> count 'guru99', INTERVAL =>10, CACHE=> 1000

Suponhamos que a tabela “Guru99” tendo alguma referência de tabela como digamos g.

Podemos executar o comando count na referência da tabela também como abaixo

hbase>g.count INTERVAL=>100000
hbase>g.count INTERVAL=>10, CACHE=>1000

colocar

Syntax:  put <'tablename'>,<'rowname'>,<'columnvalue'>,<'value'>

Este comando é usado para seguir coisas

Ele colocará um 'valor' de célula em uma tabela, linha ou coluna definida ou especificada.
Opcionalmente, ele coordenará o carimbo de data/hora.

Exemplo:

Aqui estamos colocando valores na tabela “guru99” na linha r1 e na coluna c1
```
hbase> put 'guru99', 'r1', 'c1', 'value', 10
```
Colocamos três valores, 10,15 e 30 na tabela “guru99” conforme mostrado na imagem abaixo

Suponha que a tabela “Guru99” tendo alguma referência de tabela, digamos, g. Também podemos executar o comando na referência da tabela, como por exemplo
```
hbase> g.put 'guru99', 'r1', 'c1', 'value', 10
```
A saída será conforme mostrado na captura de tela acima após colocar os valores em “guru99”.

Para verificar se o valor de entrada está inserido corretamente na tabela, utilizamos o comando “scan”. Na captura de tela abaixo, podemos ver que os valores foram inseridos corretamente

Code Trecho: Para praticar

create 'guru99', {NAME=>'Edu', VERSIONS=>213423443}
put 'guru99', 'r1', 'Edu:c1', 'value', 10
put 'guru99', 'r1', 'Edu:c1', 'value', 15
put 'guru99', 'r1', 'Edu:c1', 'value', 30

A partir do trecho de código, estamos fazendo essas coisas

Aqui estamos criando uma tabela chamada 'guru99' com o nome da coluna “Edu”.
Ao usar o comando “put”, estamos colocando valores no nome da linha r1 na coluna “Edu” na tabela “guru99”.

BAIXE

Syntax: get <'tablename'>, <'rowname'>, {< Additional parameters>}

Aqui incluem TIMERANGE, TIMESTAMP, VERSÕES e FILTROS.

Ao usar este comando, você obterá o conteúdo de uma linha ou célula presente na tabela. Além disso, você também pode adicionar parâmetros adicionais, como TIMESTAMP, TIMERANGE, VERSIONS, FILTERS, etc. para obter uma linha específica ou conteúdo de célula.

Exemplos:-

hbase> get 'guru99', 'r1', {COLUMN => 'c1'}

Para a tabela “guru99 ′, os valores da linha r1 e da coluna c1 serão exibidos usando este comando, conforme mostrado na captura de tela acima

hbase> get 'guru99', 'r1'

Para a tabela “guru99″ os valores da linha r1 serão exibidos usando este comando

hbase> get 'guru99', 'r1', {TIMERANGE => [ts1, ts2]}

Para a tabela “guru99″ os valores da linha 1 no intervalo de tempo ts1 e ts2 serão exibidos usando este comando

hbase> get 'guru99', 'r1', {COLUMN => ['c1', 'c2', 'c3']}

Para a tabela “guru99”, os valores da linha r1 e das famílias de colunas c1, c2, c3 serão exibidos usando este comando

Apagar

Syntax:delete <'tablename'>,<'row name'>,<'column name'>

Este comando excluirá o valor da célula na tabela definida de linha ou coluna.
A exclusão deve e deve corresponder exatamente às coordenadas das células excluídas.
Ao digitalizar, excluir célula suprime versões mais antigas de valores.

Exemplo:

hbase(main):)020:0> delete 'guru99', 'r1', 'c1''.

A execução acima excluirá a linha r1 da família de colunas c1 na tabela “guru99”.
Suponha que a tabela “guru99” tenha alguma referência de tabela como, digamos, g.
Podemos executar o comando na referência da tabela também como base> g.delete 'guru99', 'r1', 'c1′”.

excluir tudo

Syntax: deleteall <'tablename'>, <'rowname'>

Este comando excluirá todas as células em uma determinada linha.
Podemos definir opcionalmente nomes de colunas e carimbo de data/hora para a sintaxe.

Exemplo:-

hbase>deleteall 'guru99', 'r1', 'c1'

Isso excluirá todas as linhas e colunas presentes na tabela. Opcionalmente, podemos mencionar os nomes das colunas nisso.

Truncar

Syntax:  truncate <tablename>

Após truncar uma tabela hbase, o esquema apresentará, mas não os registros. Este comando executa 3 funções; aqueles estão listados abaixo

Desativa a tabela se ela já estiver presente
Descarta a tabela se ela já estiver presente
Recria a tabela mencionada

Escanear

Syntax: scan <'tablename'>, {Optional parameters}

Este comando verifica a tabela inteira e exibe o conteúdo da tabela.

Podemos passar diversas especificações opcionais a este comando scan para obter mais informações sobre as tabelas presentes no sistema.
As especificações do scanner podem incluir um ou mais dos seguintes atributos.
São eles TIMERANGE, FILTER, TIMESTAMP, LIMIT, MAXLENGTH, COLUMNS, CACHE, STARTROW e STOPROW.

scan 'guru99'

A saída conforme abaixo mostrada na captura de tela

Na captura de tela acima

Mostra a tabela “guru99” com nome da coluna e valores
Consiste em três valores de linha r1, r2, r3 para valor de coluna única c1
Ele exibe os valores associados às linhas

Exemplos:-

Os diferentes usos do comando scan

Command	Uso
digitalizar '.META.', {COLUMNS => 'info:regioninfo'}	Ele exibe todas as informações de metadados relacionadas às colunas que estão presentes nas tabelas do HBase
digitalizar 'guru99', {COLUMNS => ['c1', 'c2'], LIMITE => 10, STARTROW => 'xyz'}	Ele exibe o conteúdo da tabela guru99 com suas famílias de colunas c1 e c2 limitando os valores a 10
digitalizar 'guru99', {COLUNAS => 'c1', TIMERANGE => [1303668804, 1303668904]}	Ele exibe o conteúdo de guru99 com seu nome de coluna c1 com os valores presentes entre o valor do atributo de intervalo de tempo mencionado
digitalizar 'guru99', {RAW => verdadeiro, VERSÕES =>10}	Neste comando RAW=> true fornece recursos avançados como exibir todos os valores das células presentes na tabela guru99

Code Exemplo:

Primeiro crie a tabela e coloque os valores nela

create 'guru99', {NAME=>'e', VERSIONS=>2147483647}
put 'guru99', 'r1', 'e:c1', 'value', 10
put 'guru99', 'r1', 'e:c1', 'value', 12
put 'guru99', 'r1', 'e:c1', 'value', 14
delete 'guru99', 'r1', 'e:c1', 11

Captura de tela de entrada:

Se executarmos o comando scan

Query: scan 'guru99', {RAW=>true, VERSIONS=>1000}

Ele exibirá a saída mostrada abaixo.

Captura de tela de saída:

A saída mostrada na captura de tela acima fornece as seguintes informações

Verificando a tabela guru99 com atributos RAW=>true, VERSIONS=>1000
Exibindo linhas com famílias de colunas e valores
Na terceira linha, os valores exibidos mostram o valor excluído presente na coluna
A saída exibida por ele é aleatória; não pode estar na mesma ordem dos valores que inserimos na tabela

Cluster Comandos de replicação

Esses comandos funcionam no modo de configuração de cluster do HBase.
Para adicionar e remover peers ao cluster e para iniciar e parar a replicação, esses comandos são usados em geral.

Command	Funcionalidade
add_peer	Adicione pares ao cluster para replicar hbase> add_peer '3', zk1,zk2,zk3:2182:/hbase-prod
remover_peer	Interrompe o fluxo de replicação definido. Exclui todas as informações de metadados sobre o par hbase> remove_peer '1'
start_replication	Reinicia todos os recursos de replicação hbase> start_replication
parar_replicação	Interrompe todos os recursos de replicação hbase>stop_replication

Resumo

O shell HBase e os comandos gerais fornecem informações completas sobre diferentes tipos de manipulação de dados, gerenciamento de tabelas e comandos de replicação de cluster. Podemos realizar diversas funções utilizando estes comandos nas tabelas presentes no HBase.

Comandos Shell HBase com exemplos

Comandos gerais

Status

Versão

Tabela de ajuda

whoami

TTL (Tempo de Vida) – Atributo

Comandos de gerenciamento de tabelas

Criar

Lista

Descrever

desabiltar

desativar_tudo

Permitir

mostrar_filtros

cair

drop_all

está ativado

alterar

alter_status

Comandos de manipulação de dados

Contar

colocar

BAIXE

Apagar

excluir tudo

Truncar

Escanear

Cluster Comandos de replicação

Resumo

Resuma esta postagem com:

Assine a newsletter

Comandos gerais

Status

Versão

Tabela de ajuda

whoami

TTL (Tempo de Vida) – Atributo

ARTIGOS RELACIONADOS

Comandos de gerenciamento de tabelas

Criar

Lista

Descrever

desabiltar

desativar_tudo

Permitir

mostrar_filtros

cair

drop_all

está ativado

alterar

alter_status

Comandos de manipulação de dados

Contar

colocar

BAIXE

Apagar

excluir tudo

Truncar

Escanear

Cluster Comandos de replicação

Resumo

Resuma esta postagem com:

Assine a newsletter