Azure Azure Cognitiveが返す複合型の取り扱い
ハンズオンをやりながら、そういやCognitiveが返す複合型の取り扱いってPythonでどうすっかな、という疑問が湧き。
それっぽいクラスはSDKにあるんだけど、これはazure_aiエクステンションが返すものとは合致しないので、...
Azure
Azure Azure azcopy最終更新？
久々に見たら、azcopy-10.25.1が出てることに気付いたが、golang-1.22.4を要求するのでRHEL8だとビルドできん。で、yum module info go-toolsetしても1.22は無いので、とりまビルドできるa...
Azure Azure Database for PostgreSQL Flexible Server で azure_ai エクステンションを用いる演習
Azure Database for PostgreSQL Flexible Serverにはazure_aiエクステンションというのがあって、これはPostgreSQL単体でAzure OpenAI APIやAzure AI Trans...
Azure How to enable audit log on worker nodes
Azure Cosmos DB for PostgreSQL supports pgAudit extension and there's a guide on learn.microsoft.com. However, the guid...
Azure PL/PGSQLでダウンサンプリングしたい
先日あるお客様との会話で、膨大なデータをグラフにするのに、pg_cronでaggregation（事前集計）をかけておけば、そのグラフをダッシュボードでインタラクティブにスケールを変更しつつ、少ないデータをfetchするだけで良いので、む...
Azure azure_aiとpgvectorで、ベクトル化コードを書かずにRAGしたい
検証していないので概念図なのだけれど、たぶん出来るはず。
Azure Database for PostgreSQL Flexible Serverには、pgvectorとazure_aiエクステンションが追加されている。従って、a...
Azure Chat with RTXをMacから使いたい
Chat with RTXを構築したのは良いが、それはつよつよマシンなのでいちいちMac / Winを切り替えるのはだるい。
で、Chat with RTXを起動する時に「share=Trueをlaunch()に追加しろ」とあるのだ...
Azure Chat with RTXでおれおれRAG環境を作った
NVIDIAがChat with RTXをリリースしてくれたので、GitHubからcloneしてシコシコビルドせずとも、アプリをダウンロードするだけでRAG（Retrieval Augmented Generation）を利用できるように...
Azure azcopyを更新した
azcopyによるAzureへのバックアップのエラーが出ていたので、なんぞ？と思ったら、クレデンシャルの期限切れだった。ついでに、azcopyが新しくなっていたので、RPMパッケージを作り直した。SPECファイルはGitHubに。
...
Azure Cosmos DB for PostgreSQLに格納されたデータを分析に回す話
ひと口に分析といっても色々なパターンがあると思うのだけど、格納されているデータ全体を分析したいという話ではなく、格納されているデータのうち、一定の条件を満たすものだけを対象にしたい場合にどうするのが良いか、という話。
分析を実行する...
Azure LangChainを使わない分かる
「ほーいいじゃないかこういうのでいいんだよこういうので」（の絵をここに貼る）
AI担当じゃないんですけど
ABEJA Tech Blogの"LangChainを使わない"を読んで、首がちぎれるほど頷いてしまった人は少なくないん...
Azure この声優さん、確かこの作品であの声優さんと共演してたよなぁ
はじめに
（この記事はMicrosoft Azure Tech Advent Calendar 2023シリーズ2の12月6日のエントリーです）
「ある声優さんが別の声優さんと共演してたよなぁ」って、知りたくなりません？
...
Azure PostgreSQL on Azure IaaS
主にPaaS（Azure Databae for PostgreSQL Flexible Server）との違いをチェックするために使うのだけど、あまりしょっちゅうやることではないので忘れる。毎回「どうして5432/tcpにアクセスできな...
Azure Cosmos DB for PostgreSQLのパーティションとカラムナーストレージ
公式ドキュメントにパーティショニングとカラムナーストレージのことは書いてあるのだけれど、実データを入れてテーブルがどのように見えるかについて、分散テーブルも含めてまとめて説明したものはないように思うので、書いておく。
テーブルの種類...
Azure Azure Functions (Python) + Cosmos DBまとめ
はじめに
Cosmos DB for NoSQLのオススメ言語はC# / Node.jsなのだけれど、AIや他のソリューションと組み合わせる時にPythonの膨大な資産はやはり魅力的なこともあり、Azure FunctionsをPy...
Azure PythonのCosmos ChangeFeedのDocument
Cosmos DBのChangeFeedをPythonで書こうとすると、デコレータ含めた定義はこんな感じになる。
@app.cosmos_db_trigger(arg_name="documents",
...
Azure Azure Cosmos DBのPython SDKでのロギングレベル
デフォルトのままAzure Cosmos DBにPythonで接続してあれこれやってると、INFOレベルのログが出力されて肝心のデバッグ用のprint()とかが見えなかったり、ERRORが一瞬で流れて行っちゃって見えないw
from...
Azure Cosmos DB ChangeFeedのPythonのトリガー
を書いてたら、どうにも動かない。
ドキュメントには
@app.cosmos_db_trigger(arg_name="documents",
database...
Azure Apple Silicon上のVSCodeでPythonのAzure Functionsを動かしたい
なんかねぇ、Functionsのランタイム（func）がArm64に対応してないんですよ。プロジェクト作って動かそうとしたら、Arm64は知らん、とか言われて。はー、めんど。
で、ちょっと探したらワークアラウンドを見つけた。要は、無...
Azure Azure Cosmos DB ChangeFeed + Functions
これは知っている、理解している人には別に大した話ではないのだけれど、ひょっとしてということがあるので。
例えば、Pythonで
とあるデータをhttp/httpsで取得してそのデータをJSONに加工して保存してもしJSONの中...
Azure Stable Diffusion (AUTOMATIC1111) をsystemdで
systemdでAUTOMATIC1111を起動したい。複数のユーザーが同時に起動することは考えにくいので、"@"付きUnitファイルではなく、~/.config/systemd/user/に"sdwui.service"なるファイルを以...
Azure Azure上のStable Diffusion (AUTOMATIC1111)をhttps対応する
gradio経由が安定しない
webui-user.shに"share"を追加するとgradio経由でアクセス出来るんだけども、とっても安定しない。まあ、作者もドキュメントに
use share=True for gradio...
Azure スクリプト一発でStable Diffusion WebUIを立てる
#2023.03.13: CivitAIがファイル公開方式を変更したようで、下記スクリプトだとファイルを取得不可能。
手作業でやるのが面倒なので、スクリプトにした。別に難しいことはしてない。
#!/bin/bash
# In...
Azure Stable Diffusionで4K壁紙を出力したい（3840 x 2160ピクセル）
Azure HPC VMのStandard_NC24ads_A100_v4、GPUメモリ80GBだと、2048 x 1024 + Hires. fixで4096 x 2048の画像は出力出来なかった。よく見るとメモリのフラグメンテーション...
Azure Azure HPC VMでStable Diffusionすると速いのか？（結論：すげえ速かった）
手元にあるSDできる環境はMac Studioのみなのだけど、GPUとして見た時にはMac Studioの性能はRTX3090の半分以下のようなので、もうちょっと速い環境が欲しいっちゃ欲しい。メモリ24GBを搭載しているRTX4090は確...