doc には KeyVault + SecretScope 使えって書いてあるけど Standard Tier だと SecretScope 使えんかったのでメモ。 Azure Data Lake Stor […]
続きを読むPostgreSQL 12 で Merge っぽい事をやる
BigQuery でいつも使ってる MERGE を Postgres 12 でやろうとしたらなかったので代替策をメモ。 ON CONFLICT を使う。 BigQuery だとこうだけど: Postgres […]
続きを読むUbuntu 20.04: カーソルが点滅したままログイン画面が出ない場合の対策
新たに Ubuntu 20.04 をインストールしたPCでログイン画面が出て来なかったのでメモ PC起動後、画面左上でずっとカーソルが点滅してる状態になったら Ctrl + ALT + F2 を押したのち、 […]
続きを読むFaker でダミーデータを生成する
ダミーデータ生成に使ったら便利だったのでメモ。 Welcome to Faker’s documentation まずはインストール コマンドラインで使える 日本語データが欲しい場合 データベースに入れてテ […]
続きを読むBigQuery: Information Schema から DDL を生成する
これは便利なのでメモ これで CRATE TABLE 文が出てくる。
続きを読むRaspberry Pi 4 に Airflow をインストールする
やっと動いたのでメモ。 OS は Ubuntu Server 20.04 LTS に入れ替え済み。 何も考えずに Airflow の公式ドキュメントのとおりにインストールしたら、やれ pendulum がイ […]
続きを読むUbuntu: swapfile を作成する
Ubuntu VM に swapfile を追加したのでメモ。 2GB のスワップを作るにはこうする。 再起動後に自動でマウントさせるために fstab も直す。
続きを読むknown_hosts からホストを消す
サーバーを再インストールしたあとにクライアントから ssh したら fingerprint が合わないって怒られたのでメモ
続きを読むPostgreSQL: Reporting Carrier On-Time Performance をロードする
US Department of Transportation が公開してるデータセットを Postgres12 にロードしたのでメモ。 まずは下記からデータをダウンロードする。 On-Time : Rep […]
続きを読むAirflow を Nginx のリバースプロキシで SSL 化
Airflow を Nginx のリバースプロキシの後ろにおいたのでメモ。 Airflow 単体でも証明書パスを指定してSSL化出来るらしいがやっぱ Nginx よね(テキトー Nginx + LetsEn […]
続きを読む