2020-09-01から1ヶ月間の記事一覧
■ はじめに https://dk521123.hatenablog.com/entry/2017/02/26/231046 の続き、又は、以下の関連記事の一部。 https://dk521123.hatenablog.com/entry/2020/09/29/165636 今回は、 IAM（Identity and Access Management）のIAM Policy（ポリシー） について…
■ はじめに https://dk521123.hatenablog.com/entry/2017/03/06/212734 https://dk521123.hatenablog.com/entry/2017/04/03/235355 https://dk521123.hatenablog.com/entry/2017/12/15/232236 の続き。 トラブルシューティングのために、 Amazon S3 の アク…
■ はじめに シェルで何かを行う際に、あの時のあの処理ってどう書いたっけ？ ってことが多いので、メモ。 目次 【１】ファイル名を取り出す 【２】ファイル内容を表示する 【３】特定の拡張子でループさせる 【４】拡張子を別拡張子に置き換える 【５】ファ…
■ はじめに https://dk521123.hatenablog.com/entry/2020/07/20/232009 の続き。 単語帳だけでなく、TOEICの文法問題も扱えるようにするために 質問⇒回答・解説のような画面を作りたい。 そこで、画面を切り替えられる Fragment（フラグメント）について扱う…
■ はじめに 2020/09/24 現在、 AWS Glue コンソール上に「AWS Glue Studio New」って でてたので、どんなサービスかを調べてみた。 因みに、検索したところ、情報源は、以下の英語サイトだけ。 https://aws.amazon.com/jp/about-aws/whats-new/2020/09/annou…
■ はじめに https://dk521123.hatenablog.com/entry/2020/08/26/193237 の続き。 AWS Glue の Spark Job で、Redshift にデータを追加することなどを考える また、前回も述べているが、 Redshiftは、PostgreSQLから派生したものなので、 PostgreSQLでも使え…
■ はじめに 小ネタ。 今回は、テスト用のデータ(固定値)をダミーデータとして Hiveのテーブルに突っ込む方法をメモ。 ■ サンプル USE target_db; set hive.execution.engine=mr; CREATE EXTERNAL TABLE sample_test_table( sample_id STRING, name STRING, c…
■ はじめに https://dk521123.hatenablog.com/entry/2020/07/20/232009 の続き。 Android で 英単語帳を作っているのだが 以下のサイトなどにあるように https://atsueigo.com/vocabulary_google_image/ https://zinsoku.com/english-google-images/ 英単語…
■ はじめに いまさらながら、ImageView について、まとめる。 目次 【１】ImageView について 【２】 ImageView に関するあれこれ １）URLから画像を表示するには ２）ImageViewに表示されている画像ファイルを保存するには 【１】ImageView について * 画像…
■ はじめに Hive の 設定プロパティ(Configuration Properties) について 大分、知識が溜まってきたので、まとめておく。 公式サイト https://cwiki.apache.org/confluence/display/Hive/Configuration+Properties * なお、Hadoopに関する設定プロパティにつ…
■ はじめに https://dk521123.hatenablog.com/entry/2020/07/16/224332 の続き。 Hive の パーティション (Partition) にまつわるTipsをまとめておく cf Partition = 仕切り壁、分割、分配 目次 【１】Partition 関連の設定プロパティ １）hive.exec.dynamic…
■ はじめに https://dk521123.hatenablog.com/entry/2019/10/04/000000 https://dk521123.hatenablog.com/entry/2020/09/10/174223 https://dk521123.hatenablog.com/entry/2020/09/09/000000 https://dk521123.hatenablog.com/entry/2020/09/11/154403 http…
■ はじめに https://dk521123.hatenablog.com/entry/2019/10/04/000000 https://dk521123.hatenablog.com/entry/2020/09/10/174223 https://dk521123.hatenablog.com/entry/2020/09/09/000000 https://dk521123.hatenablog.com/entry/2020/09/11/154403 の続…
■ はじめに https://dk521123.hatenablog.com/entry/2019/10/04/000000 https://dk521123.hatenablog.com/entry/2020/09/10/174223 https://dk521123.hatenablog.com/entry/2020/09/09/000000 の続き。 今回は、Pentaho での DB を使った処理を扱う。 Pentah…
■ はじめに https://dk521123.hatenablog.com/entry/2019/10/04/000000 の続き。 Pentaho (ペンタホ) を扱う機会があるので、 まずは、導入方法について、扱う。 なお、Pentahoとは、何ぞやについては、上記の記事を参照のこと 目次 【０】Pentahoの種類 【…
■ はじめに https://dk521123.hatenablog.com/entry/2019/10/04/000000 https://dk521123.hatenablog.com/entry/2020/09/10/174223 の続き。 pdi-ce-9.0.0.0-423\data-integration\samples 配下には、 サンプルデータがある。 このデータを使って、Hello Wor…
■ はじめに https://amazon.qwiklabs.com/ で「Introduction to Amazon API Gateway（日本語版）」って いうハンズオンラボがあったので、少し勉強してみる 個人的な感想 * ハンズオンラボにそって行えば、大体な雰囲気は理解できる * 特に、サービス始めで…
■ はじめに 小ネタ。 前方一致をやりたくて調べたら、 意外と grep を使ったりとかが多かった。 ただ、もっとシンプルにできる方法があったので、メモ。 目次 【１】部分一致（前方一致・後方一致） 【２】サンプル 例１：前方一致 例２：後方一致 例３：部…
