tiktokenで文字列をエンコードする時、vocabulary定義をダウンロードするため、インターネットに接続できない環境では、事前にダウンロードが必要になる。このエントリでは、その手順を示す。tiktoken | GitHubhttps://github.com/openai/tiktoken該当のダウンロード処理は、次...
このエントリでは、Forgejo Runnerでsetup-pythonを動かしたメモを残しておきます。Forgejo/Runner自体のセットアップ関連は、過去のエントリを参照ください。UbuntuLinuxにForgejoをセットアップする手順https://takemikami.com/2024/03...
このエントリでは、Forgejoでpandocを使ってdocxを表示する設定方法を示します。また、あわせてDiffの確認できるように設定します。Forgejoのセットアップ関連は、過去のエントリを参照ください。UbuntuLinuxにForgejoをセットアップする手順https://takemi...
このエントリでは、ForgejoでJupyteNotebook(ipynb)を表示する設定方法を示します。 本エントリは、以下の記事を参考にしています。How to render Jupyter Notebooks on Gitea | Giteahttps://blog.gitea.com/render-jupyter-...
このエントリでは、AWS CloudFormationのテンプレートからパラメータシートを生成して、実装とパラメータ設計の乖離を防ぐように運用する対応を検討します。テンプレートからパラメータ生成は次のツールがありますが、フォーマット等をカスタマイズしたいニーズもあると思うので、このエントリでは自前で実装することにします。cfn-docgen - AWS CloudFormationテンプレートからドキュメントを自動生成す...
このエントリでは、UbuntuLinuxにMLflowをセットアップする手順を示します。 MLflowhttps://mlflow.org/試した環境:Ubuntu Linux 22.04.3MLflow 2.11.1MLflowのセットアップ以下の手順に従って、MLf...
このエントリでは、UbuntuLinuxにForgejoをセットアップする手順を示します。CI/CDを動かすため、Forgejo runnerもセットアップします。Forgejohttps://forgejo.org/Forgejo Actions administrator guide | Forgejo<a href="https://forgej...
2024年から新NISAがはじまるので、少しでも積立できるお金を増やせるように、最近の数ヶ月は家計の見直しをしていました。まだまだ見直しできる点はあると思われるものの、MoneyForwardを使ってある程度は見直しできたと思うので、そのノウハウをメモしておきます。全体の流れは次の通りです。準備段階生活費の支払いを銀行引落・振込orクレカに寄せて1ヶ月生活する<...
このエントリでは、2023年、今年買って良かったと思ったものを紹介していこうと思います。※IT技術者っぽいものは出てきません。ドアのすきま風ストッパーすきま風ストッパー https://www.amazon.co.jp/gp/product/B08LBPHGWZ/ドアの下側に差し込んで使う...
この記事は、ソフトウェアテスト Advent Calendar 2023 の13日目の記事です。ソフトウェアテスト Advent Calendar 2023https://qiita.com/advent-calendar/2023/softwaretestingこのエントリでは、pytestのfixtu...
このエントリでは、Cloud-initの設定ファイルを作成する時、手軽に手元の環境で動作確認をできるよう、WindowsにMultipassを入れて環境を作ってみます。Multipasshttps://multipass.run/Cloud-init<a href="https://canonical-cloud-init.readthedocs-hoste...
このエントリでは、CeleryでFastAPIのバックグラウンドジョブを動かす手順をまとめています。また、動かすプロセスがいくつかあり面倒なので、Supservisorでまとめて起動できるようにしています。各プロセスは、次の役割を担います。FastAPI: ジョブを受け付けるRedis: ジョブのキューを管理するCelery: ジョブを起動する<...
AWS Batch(Fargate)で、Subnet外にアクセスできないPrivateSubnet上のComputingEnvironmentでECRのPrivateRepositoryからimageをpullして実行する手順をまとめておきます。作成するシステムの構成は、次の図のとおりです。<img src="https://lh3.googleusercontent.com/pw/ADCreHe2zRGkdgMdf0n_jXhdg7Kwc...
このエントリでは、AWSのSecretsManagerから情報を取得するアプリケーションを、ローカルPCで開発する際に便利な、AWS Secrets Manager emulatorの使い方手順をまとめています。AWS Secrets Manager emulatorhttps://github....
以下のエントリでLangServeを動かしたので、次はAWS Lambdaに対応したLangServeアプリケーションの作成を考えたいと思います。LangChainで作ったChainをLangServeでAPI化する手順https://takemikami.com/2023/11/18/LangChainC...