【Github】Github Actions ~ Github Actions環境変数 ~

■ はじめに 小ネタ。 今回は、Github Actions に関する環境変数について、とりあげる。 目次 【1】Github Actions に関する環境変数 1)AGENT_TOOLSDIRECTORY 2)RUNNER_ALLOW_RUNASROOT 【2】Github Actions に関する環境変数の永続化 【1】Github Act…

【Linux】lnコマンド / update-alternativesコマンド

■ はじめに めちゃくちゃいまさらながら、 lnコマンド / update-alternativesコマンドについてメモ。 ついでに、あいまいだった Linux のハードリンク(hard link)と シンボリックリンク(Symbolic link) について学んでおく。 目次 【1】lnコマンド 1)…

【AWS】CloudFormation ~ AWS CLI ~

AWS

■ はじめに AWS CloudFormation について担当することになりそうで 後輩にGUIよりAWS CLIの方が作業しやすいですよって 教えてくれたので、メモ。感謝、、、 目次 【1】AWS CLI 1)aws cloudformation create-stack 2)aws cloudformation deploy 3)aws…

【Python】Python ~ python-dotenv ~

■ はじめに 業務で、「.env」を扱うのができてきた。 このファイルを、Pythonで扱うには、 python-dotenv ってライブラリを使うので、 .envファイル(dotenv)を含めて調べてみた 目次 【1】.envファイル(dotenv) 【2】python-dotenv の インストール 【…

【AWS】Amazon SNS ~ AWS CLI ~

AWS

■ はじめに Github workflow の実装で、成功・失敗に関わらず、 通知機能を持たせようと考えていて、 Amazon SNS(Simple Notification Service)のAWS CLI で 実装してみたのだが、メッセージの改行で 意外にハマったのでメモっておく なお、Amazon SNSに関…

【Snowflake】Snowflake ~ IDENTIFIER / SET ~

■ はじめに 小ネタ。 https://dk521123.hatenablog.com/entry/2024/02/19/152927 の作業時に、Snowflake の IDENTIFIER を習ったのでメモ。 ついでに、SET に関してもメモっておく。 (小ネタだったが、書いていく内に思った以上に書く量が多くなってしまっ…

【Snowflake】Snowflake ~ Data Sharing ~

■ はじめに 業務で、Snowflake の Data Sharing (データ共有)について 扱う機会がでたので、ちょこっと調べてみた。 目次 【1】Snowflake Data Sharing 【2】主な操作 1)CREATE SHARE 2)SHOW SHARES 【3】共有方法 1)共有へのデータベースロールの…

【Github】Github Actions ~ 設定値を切り替えることを考える ~

■ はじめに Github Actions で、例えば、 https://dk521123.hatenablog.com/entry/2020/04/16/113816 でやったように、 Dev/Stage/Prodなどで設定値が変更する必要があるので どう実装していくかを考える 目次 案1:workflow_dispatch + inputs で切り替え…

【Github】GitHub CLI ~ 入門編 ~

■ はじめに Github Actions を調べている時に、 https://dk521123.hatenablog.com/entry/2024/01/28/004128 において、workflow_dispatchで手動実行しようとした際に デフォルトブランチではないと、Githubの画面上に実行ボタンが出てこない という問題があ…

【Linux】Linux ~ 代表的なディレクトリ ~

■ はじめに めちゃくちゃいまさらながら Linuxの代表的なディレクトリに関して メモっておく 【1】代表的なディレクトリ ディレクトリ 説明 /bin 基本コマンドが格納 /etc コマンドやアプリケーションの設定ファイルが配置 /usr 共有できて読み込み可能なフ…

【Github】Github Actions ~ workflow_run / workflow_call ~

■ はじめに 実作業において、Github Actionsで ファイル分割して実行したいケースが出てきそうになっている。 そこで、今回は、onイベント の workflow_run / workflow_call について 掘り下げる。 目次 【0】workflow_run / workflow_call との違い 【1】…

【Github】Github Actions ~ Artifact ~

■ はじめに Github Actions の アーティファクト (Artifact) についてまとめる 目次 【1】Artifact 1)Artifactに関する例 【2】Artifact に関するアクション 1)actions/upload-artifact アクション 2)actions/download-artifact アクション 【3】サ…

【AWS】CloudFormation ~ EC2 ~

AWS

■ はじめに 業務で、AWS CloudFormation (CFn) を使って EC2を立ち上げそうなので、予習しておく 目次 【1】CloudFormation による EC2 【2】API 【3】ソフトウェアをインストールするには 1)cfn-init ヘルパースクリプト 2)AWS CloudFormation のベ…

【AWS】CloudFormation ~ 基礎知識編 ~

AWS

■ はじめに AWS CloudFormation (CFn) について 業務で触る可能性が出てきたので、知識を整理・復習する 目次 【1】CloudFormation 1)動画 2)料金 【2】CloudFormation の流れ 1)スタック (Stacks) 2)テンプレート(Template) 【3】関連用語 1…

【Github】Github Actions ~ timeout-minutes ~

■ はじめに Github Actions において、 例えば、別処理結果を待つのにシェルで無限ループする箇所があるのだが これはこれでちょっと怖いので、Timeoutについて調べてみた 目次 【1】Github ActionsでTimeoutを設定するには 【2】利点 【3】timeout-minut…

【トラブル】【Docker】Proxy環境下でdocker pullしたらエラー

■ はじめに Proxy環境下でdocker pullしたらエラーでハマったのでメモ。 目次 【1】現象 【2】エラー内容 【3】原因 【4】解決案 【1】現象 Amazon EC2において、Proxy経由で docker イメージを pull/buildなどを使用としている。 そこで、以下の関連記…

【Github】Github Actions ~ Self-hosted runners / あれこれ編 ~

■ はじめに https://dk521123.hatenablog.com/entry/2023/12/18/204119 の続き。 Github Actions の Self-hosted runners に関するTipsをまとめておく 目次 【1】サービスとして設定するには 1)設定手順例 2)アンインストールする 3)ユーザを指定して…

【Squid】プロキシサーバ / Squid ~ Whitelist編 ~

■ はじめに Proxyサーバの Squid の Whitelist (ホワイトリスト) について 触ったので、メモに残しておく。 ついでに、Blacklist(ブラックリスト)についても言及する。 目次 【1】ProxyサーバにおけるWhitelist 【2】設定手順 1)設定ファイル「squid.c…

【Kafka】Apache Kafka ~ 環境構築 / Linux編 ~

■ はじめに Apache Kafka ~ 環境構築 / Windows編 ~ https://dk521123.hatenablog.com/entry/2023/04/23/235534 のLinux版。 目次 【1】構築手順 - 通常版 0)前提条件 1)Kafka のインストール 【2】モジュール起動 1)zookeeper起動 2)Kafka brok…

【Github】Github Actions ~ Pythonを使うには ~

■ はじめに Github Actions で、以下の関連記事で行ったような https://dk521123.hatenablog.com/entry/2024/01/22/210831 https://dk521123.hatenablog.com/entry/2024/01/05/000000 Github Actions で脆弱性診断の結果をCSVファイル化して、、、 とかやる…

【Docker】脆弱性エラー対応時に役立ったDockerコマンド

■ はじめに 完全に個人的なメモ。 https://dk521123.hatenablog.com/entry/2024/01/22/210831 で、発生した脆弱性エラーを調査している。 調査の一環として、 AWS EMR リポジトリの Docker イメージをローカル上に Pull し Inspector2の「Affected Package (…

【Shell】シェル ~ Shebang ~

■ はじめに Github Actions や CloudFormation などの インフラ系のサービスを扱う際に、Bashをよく使用しているが Shebang (シェバン)のところとかあいまいなことがあるので これを機にちゃんと調べてみた 目次 【1】Shebang 【2】効能 【3】構文 【4】…

【Squid】プロキシサーバ / Squid ~ ログ編 ~

■ はじめに Squidのログについて徐々に書き溜めていく 目次 【1】squid の ログ 1)/var/log/squid/access.log 2)/var/log/squid/cache.log 3)/var/log/squid/store.log 4)/var/log/squid/squid.out 【2】Tips 1)デバッグ方法 2)アクセスログの…

【AWS】Amazon ECR ~ boto3 ~

AWS

■ はじめに https://dk521123.hatenablog.com/entry/2024/01/05/000000 https://dk521123.hatenablog.com/entry/2024/01/22/210831 で、Amazon ECR の Dockerイメージのスキャンについて触れたが、 エラーを解消できても、時間が経つと別のエラーが検知され…

【Github】Github Actions ~ GITHUB_OUTPUT ~

■ はじめに Github Actions ~ GITHUB_ENV ~ https://dk521123.hatenablog.com/entry/2023/12/29/000840 で、各Stepで値を受け渡す「$GITHUB_ENV」を取り上げたが 今回は、Job間の値の受け渡しに使う「$GITHUB_OUTPUT」について扱う 目次 【1】GITHUB_OUTP…

【Linux】tailコマンド

■ はじめに 小ネタ。 tailコマンドについて扱う 【1】tailコマンド * ファイルの最終行から数行を表示するコマンド * 標準では10行を表示 【2】-fオプション * ログファイルなどのリアルタイム監視 * --follow 1)使用例 例1:/var/log/cron https://dk5…

【Github】Github Actions ~ ワークフロー制御 ~

■ はじめに 今回は、Github Actions の ワークフロー実行 の行う・行わないを制御するために必要な扱う。 目次 【1】needs 1)needs.<job_id>.result 2)needs.<job_id>.outputs.<output name> 【2】if 1)if の指定の種類 2)if に指定する主なイベント 【3】on 1)push 2)work</output></job_id></job_id>…

【Python】Python ~ TOML ~

■ はじめに TOMLファイルを読み込み そのデータ内を使うツールが必要になりそうなので PythonでTOMLをどう扱うかを調べてみた なお、TOMLについては、以下の関連記事を参照のこと TOML https://dk521123.hatenablog.com/entry/2023/04/25/103533 目次 【1】…

【Terraform】Terraform ~ AWS CodeArtifact ~

■ はじめに AWS CodeArtifact の環境を軽くTerraformで作ったので そこで得たことをメモっておく 目次 【1】API 1)aws_codeartifact_repository 【2】使用上の注意 1)external_connections は1つしか指定できない 【3】サンプル 例1:既存のdomainを…

【AWS】AWS CodeArtifact ~ 独自JARをリポジトリにあげる ~

AWS

■ はじめに 今回は、独自のJARなどを AWS CodeArtifact のリポジトリにあげる方法について 記録しておく 目次 【1】JARをリポジトリにあげるには 【2】前提条件 1)IAMロール 【3】手順 Step1: CodeArtifact 認証トークンを取得 Step2: JAR を CodeArtif…