Hive Stvaranje tablice: Interno, Izmjena i Brisanje s primjerima

Operacije s tablicom kao što su stvaranje, mijenjanje i brisanjeping Tablice u Hiveu mogu se vidjeti u ovom vodiču. Svaka operacija se prvo prikazuje kao aktivna sesija, a zatim kao naredba za višekratnu upotrebu.

Kako stvoriti, promijeniti i ukloniti tablicu u Hiveu

Na donjoj snimci zaslona stvaramo tablicu sa stupcima i mijenjamo naziv tablice.

1. Izrada tablice guru_sample s dva naziva stupaca kao što su „empid“ i „empname“
2. Prikaz tablica prisutnih u bazi podataka guru99
3. guru_sample se prikazuje ispod tablica
4. Mijenjanje tablice „guru_sample“ kao „guru_sampleNew“
5. Ponovno, kada izvršite naredbu "show", prikazat će se novi naziv guru_sampleNew

Sesija u nastavku izvodi svih pet koraka redom na košnica> prompt, a dva poziva SHOW TABLES prije i poslije preimenovanja čine efekt vidljivim.

Ispustitiping tablica guru_sampleNovo:

Jedna naredba DROP TABLE uklanja preimenovanu tablicu, a Hive odgovara s OK.

Sintaksa i uobičajene klauzule za Hive CREATE TABLE

Gornji primjer koristi najkraći mogući oblik. Dokumentirana izjava prihvaća nekoliko opcionalnih klauzula, a svaka od njih odlučuje o nečemu što primjer ostavlja po zadanim postavkama.

CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.]table_name
  [(col_name data_type [COMMENT col_comment], ...)]
  [COMMENT table_comment]
  [PARTITIONED BY (col_name data_type, ...)]
  [CLUSTERED BY (col_name, ...) INTO num_buckets BUCKETS]
  [ROW FORMAT row_format]
  [STORED AS file_format]
  [LOCATION hdfs_path]
  [TBLPROPERTIES (property_name=property_value, ...)];

Povezani obrazac, STVORI TABLICU nova_tablica KAO postojeća_tablica, kopira shemu bez kopiranja redaka. Strukturne klauzule poput PARTITIONED BY i CLUSTERED BY detaljno su obrađene u vodiču za Pregrade i kante za košnice.

Vrste tablica i njihova upotreba

Što se tiče tablica, to je baš kao i način na koji stvaramo u tradicionalnim relacijskim bazama podataka. Funkcionalnosti poput filtriranja i spajanja mogu se izvoditi na tablicama.

Hive se bavi s dvije vrste struktura tablica, internim i eksternim tablicama, ovisno o učitavanju i dizajnu sheme u KošnicaIzbor nije kozmetički: on odlučuje tko je vlasnik podatkovnih datoteka i što se s njima događa kada se tablica ukloni.

Interne tablice u Hiveu

• Interna tablica je po prirodi čvrsto povezana. U ovoj vrsti tablice prvo moramo stvoriti tablicu i učitati podatke.
• Ovo možemo nazvati podacima na shemi.
• Kap po kapping iz ove tablice bit će uklonjeni i podaci i shema.
• Pohranjena lokacija ove tablice bit će na /user/hive/warehouse.
• Interne tablice nazivaju se i upravljanim tablicama i samo one podržavaju transakcije TRUNCATE, ARCHIVE, MERGE, CONCATENATE i ACID.

Kada odabrati interni stol?

• Ako su podaci za obradu dostupni u lokalnom datotečnom sustavu
• Ako želimo da Hive upravlja cijelim životnim ciklusom podataka uključujući brisanje

Primjer isječka koda za internu tablicu

1. Za izradu interne tablice

    Hive>CREATE TABLE guruhive_internaltable (id INT,Name STRING);
   	 Row format delimited 
   	 Fields terminated by '\t';

2. Učitajte podatke u internu tablicu

       Hive>LOAD DATA INPATH '/user/guru99hive/data.txt' INTO table guruhive_internaltable;

3. Prikažite sadržaj tablice

       Hive>select * from guruhive_internaltable;

4. Za ispuštanje interne tablice

       Hive>DROP TABLE guruhive_internaltable;

Ako ste izbrisali guruhive_internaltable, uključujući njezine metapodatke i podatke, bit će izbrisani iz Hivea. Osim ako nije naveden PURGE, datoteke se premještaju u mapu za smeće HDFS-a, a ne uklanjaju se odmah.

Na sljedećem snimku zaslona možemo vidjeti izlaz sve četiri naredbe u jednoj sesiji, koja završava uspješnim uklanjanjem.

U gornjem kodu i na snimci zaslona radimo sljedeće stvari,

• Napravite internu tablicu
• Učitajte podatke u internu tablicu
• Prikažite sadržaj tablice
• Za ispuštanje interne tablice

Vanjske tablice u Hiveu

• Vanjska tablica je labavo povezana po prirodi. Podaci će biti dostupni u HDFS-u. Tablica će biti kreirana na HDFS podacima.
• Drugim riječima, možemo reći da stvara shemu na podacima.
• U trenutku padaping Iz tablice se uklanja samo shemu, podaci će i dalje biti dostupni u HDFS-u kao i prije.
• Vanjske tablice pružaju opciju za stvaranje više shema za podatke pohranjene u HDFS-u umjesto brisanja podataka svaki put kad se shema ažurira
• Od Hivea 4.0.0, postavljanje svojstva tablice external.table.purge na true uzrokuje da DROP također briše podatke.

Kada odabrati vanjski stol?

• Ako su podaci obrade dostupni u HDFS-u
• Korisno kada se datoteke koriste izvan Hivea

Primjer isječka koda za vanjsku tablicu

1. Izradi vanjsku tablicu

   Hive>CREATE EXTERNAL TABLE guruhive_external(id INT,Name STRING)
   	 Row format delimited
   	 Fields terminated by '\t'
   	 LOCATION '/user/guru99hive/guruhive_external';

2. Ako ne određujemo lokaciju u trenutku stvaranja tablice, podatke možemo učitati ručno.

       Hive>LOAD DATA INPATH '/user/guru99hive/data.txt' INTO TABLE guruhive_external;

3. Prikažite sadržaj tablice

     Hive>select * from guruhive_external;

4. Za uklanjanje vanjske tablice

     Hive>DROP TABLE guruhive_external;

Na sljedećoj snimci zaslona možemo vidjeti izlaz. Imajte na umu da ispuštanje na kraju uklanja samo shemu - datoteka pod putanjom LOCATION ostaje netaknuta.

U gornjem kodu radimo sljedeće stvari

• Napravite vanjsku tablicu
• Učitajte podatke u vanjsku tablicu
• Prikažite sadržaj tablice
• Ispustitiping vanjska tablica

Razlika između internih i eksternih tablica

The Dokumentacija Apache Hivea Pravilo je jasno navedeno: Hive pretpostavlja da posjeduje podatke za upravljane tablice, a ne za vanjske, te svaka gore navedena razlika proizlazi iz te jedne pretpostavke.

Referenca naredbi ALTER TABLE i DROP TABLE

Gornje snimke zaslona prikazuju samo preimenovanje i ispuštanje. To su izjave koje praktičar najčešće koristi na postojećoj tablici.

Dvije zaštitne mjere vrijedi ugraditi u svaki skript. IF EXISTS sprječava neuspjeh drop-anja na tablici koja je već uklonjena, a DESCRIBE FORMATTED potvrđuje je li cilj MANAGED_TABLE ili EXTERNAL_TABLE prije nego što se drop pokrene.

Pitanja i odgovori