■ はじめに https://dk521123.hatenablog.com/entry/2020/02/25/231235 の続き。 HiveQL を書く機会が得られて、 ちょこちょこSQLと違うので、基本文法を中心にメモる。 目次 【０】データベース関連 【１】テーブル作成 【２】テーブル削除 【３】テーブル…

■ はじめに https://dk521123.hatenablog.com/entry/2020/05/27/175610 などで、でてきたトラブルを纏める 目次 【１】エラー「Column repeated in partitioning columns」が発生する 【２】エラー「Need to specify partition columns」が表示 ※ その他のHi…

■ はじめに https://dk521123.hatenablog.com/entry/2019/11/14/221126 https://dk521123.hatenablog.com/entry/2019/11/24/225534 https://dk521123.hatenablog.com/entry/2020/01/04/150942 の続き。 今回は、Python から Hive / HiveQL を使えるやり方を …

■ はじめに https://dk521123.hatenablog.com/entry/2020/02/25/231235 の続き。 今回は、 文字列置換の関数に絞って、知識を整理する 目次 【０】API仕様 【１】translate() 【２】replace() 【３】regexp_replace() 【０】API仕様 https://cwiki.apache.or…

■ はじめに https://dk521123.hatenablog.com/entry/2020/02/25/231235 の続き。 Hiveの解析を行っていて、 徐々にだが知識が積み重なってきたので、ここで整理。 目次 【０】Hiveコマンド 【１】 Hiveコマンドオプション 【２】 WITH 句 【０】Hiveコマンド…

■ はじめに https://dk521123.hatenablog.com/entry/2019/12/28/021109 https://dk521123.hatenablog.com/entry/2020/01/02/000000 https://dk521123.hatenablog.com/entry/2019/11/25/235219 で、Hive の環境設定を行った。 今回は、HiveQL の Hello World …

■ はじめに https://dk521123.hatenablog.com/entry/2020/01/01/000000 の続き。 目次 【０】設定環境 １）前提条件 【１】Derby のインストール １）Derby の ダウンロード ２）Derby の インストール ３）環境変数の設定 ４）環境変数の有効化 ５）動作確…

■ はじめに https://dk521123.hatenablog.com/entry/2019/12/26/223506 の続き。 やっとこ、Apache Hadoop on Windows が終わったので 今度は、Hive環境を構築する ■ 設定環境 DBについては、サポートされているDB（※）から 選択すればいいが、今回は、Derby…

■ はじめに https://dk521123.hatenablog.com/entry/2019/09/15/100727 の続き。 今回は、「Hive / HiveQL」を扱う。 目次 【１】Hive 【２】HiveQL (ハイブキューエル) 【３】関連用語 １）パーティション（Partition） ２）メタストア (Metastore) ３）メ…