洪水浸水想定区域データをGoogleマップに載せたい
この数日試行錯誤していたんだけど、一番簡単な方法が分かったので、書いておく。 まず、国土交通省はオープンデータとして洪水浸水想定区域データを配布している。これは大きく2つ、国が管理する河川と都道府県が管理する河川に分かれ […]
Galleria買った
ここ数ヶ月なんだかんだとAI関連をイジる必要があって、AzureのGPU VMでUbuntuだったりWin11だったりを動かして色々やってたんだけども、バッチ的な処理はいざ知らず、リアルタイムに処理するものはやはり苦しい […]
Stable Diffusion (AUTOMATIC1111) をsystemdで
systemdでAUTOMATIC1111を起動したい。複数のユーザーが同時に起動することは考えにくいので、"@"付きUnitファイルではなく、~/.config/systemd/user/に"sdwui.service […]
Azure上のStable Diffusion (AUTOMATIC1111)をhttps対応する
gradio経由が安定しない webui-user.shに"share"を追加するとgradio経由でアクセス出来るんだけども、とっても安定しない。まあ、作者もドキュメントに use share=True for gra […]
スクリプト一発でStable Diffusion WebUIを立てる
#2023.03.13: CivitAIがファイル公開方式を変更したようで、下記スクリプトだとファイルを取得不可能。 手作業でやるのが面倒なので、スクリプトにした。別に難しいことはしてない。
Stable Diffusionで4K壁紙を出力したい（3840 x 2160ピクセル）
Azure HPC VMのStandard_NC24ads_A100_v4、GPUメモリ80GBだと、2048 x 1024 + Hires. fixで4096 x 2048の画像は出力出来なかった。よく見るとメモリのフ […]
Azure HPC VMでStable Diffusionすると速いのか？（結論：すげえ速かった）
手元にあるSDできる環境はMac Studioのみなのだけど、GPUとして見た時にはMac Studioの性能はRTX3090の半分以下のようなので、もうちょっと速い環境が欲しいっちゃ欲しい。メモリ24GBを搭載している […]
データベース正規化の呪い（ノロい）
正規化は正義 正規化が絶対的な正義だった時代がある。ストレージのコストが高く、同じデータを複数のテーブルで保持するなんてもってのほか。更新するにも同時に複数のテーブルを更新しないとならない。だから、第一正規形から第三正規 […]
Cloud Gamingで久々にゲームにハマった
NieR Automata以来か？ 年いちぐらいで何かしらのゲームにハマるんだけど、前回は世の中からだいぶ遅れてのNieR Automataだった。違うんですよ、2Bちゃんのお尻にハマったのもあるんだけど、世界観とストー […]
PostgreSQLの移行ツール・pgcopydbを試してみた
DMSの制限にヒットする Azure Database for PostgreSQL Single ServerからFlexible Serverへの移行に際して、Azure Database Migration Ser […]
竈門禰豆子 on Azure Database for PostgreSQL / MySQL Flexible Server
「竈門禰豆子」の「禰」が異体字セレクタによって7バイトあり、MySQLに適切な設定をしないと格納出来ない、というのがちょっと話題になったので試してみた。 Azure Database for PostgreSQL まず、 […]
オンプレ・IaaSからAzure DB for PostgreSQL Flexible Serverに
オンプレやIaaSで動いてるPostgreSQLを、Azure Database for PostgreSQL Flexible Serverに移行する時に、同程度のサイズ（vCPU数、メモリ、ストレージ）なら、post […]
Azure StorageにアップロードされたCSVをAzure PostgreSQLに入れる
この記事は Azure Advent Calendar 2021 22 日目のエントリです。 何をするかというと タイトルの通りなんだけども、AzureのStorage AccountのContainerにCSVファイル […]
シングルノードのCitusをDockerでシャーディングしてみる
この記事は PostgreSQL Advent Calendar 2021 7 日目のエントリです。 Citusって何？ CitusはPostgreSQLをシャーディングしてスケールアウト出来るようにするPostgreS […]
RHEL8とFlexible Server PostgreSQLでLogical Replicationする
自宅のRHEL8上のPostgreSQLから、Azure Database for PostgreSQL Flexible ServerにLogical Replicationを設定してみる。自宅鯖がPublisher、 […]
PostgreSQLから並列COPYするスクリプト
先にPythonで書き殴ったやつをブログに書いたけれど、もうちょっと使いやすいようにならんかと、コマンドっぽく書き直したので、githubに置いた。 要はpsql -c 'COPY'を並列に実行するだけなんだけど、毎回の […]
Azure DB for PostgreSQL Single Server with pg_dump or a Python script
I did it with DMS, but I'd also like to know how long it takes to do with pg_dump. Loaded the same dummy data […]
Azure DB for PostgreSQL バルクINSERT, Single vs Flexible
Flexibleの方が同じインスタンスサイズでも速くなってるはずだけれど、バルクで入れたらどうなるんかな、と。コードは以下。1,000ファイルに分割されたトータル143GBのデータをINSERT文で投入（COPYではない […]
Azure DB for PostgreSQL Single to Flexible Migration
I'd like to know how long it takes to migrate from PostgreSQL Single Server to Flexible Server. Deploy a Linux […]
サクッとPostgreSQLを立ててテストして畳む
Azure CLIとjqがインストールされていることが前提だけれども、Azure Database for PostgreSQL Flexible Serverをサクッと立てて、テストして、畳む方法 from 自宅。自宅 […]