Fractal Prologue 徒然なるままに...データと遊ぶ
Posts with the tag ML:

機械学習パイプラインの作り方を改めて考えてみる

はじめに もう今年もあと数週間ということで,1年があっという間に終わってしまいますね😅 この記事は MLOps Advent Calendar 2023 の15日目の記事になります!アドベントカレンダーの日付を選ぶ際についつい自分の好きな数字を選びがち

ANN ライブラリの Annoy で build index する時に Illegal Instruction Error が発生した

はじめに Annoy という Spotify が開発している Python 製の ANN (Approximate Nearest Neighbors) のライブラリがあり,それを使ってレコメンドアイテムの類似度を計算する機会があったのですが,コンテナ化したものを Vertex AI Pipelines 上で動かしていたところ,Fatal Python error:

CML を使った ML モデルの CI/CD

はじめに Continuous Machine Learning (CML) という機械学習モデルの CI ツールを個人プロジェクトで導入したので,その紹介をしようと思います. 機械学習プロジェクトでテストを考える時に,大きく3つあると思っています. ソフトウェアのテスト

FastAPI と RabbitMQ を用いた機械学習タスクの非同期処理

はじめに 最近,機械学習を使ったアプリケーションのバックエンドでどういった処理を行ってモデル作成などを行っているか気になったので,モデル作成時によく行われる非同期処理を FastAPI と RabbitMQ を用いて検証したお話になりま

Tensorflow の Callback 関数をカスタマイズ

はじめに AWS の SageMaker 上で SageMaker Python SDK を使用して独自の機械学習モデルを作成することができますが,その際に学習や評価が行える Estimator という SageMaker の interface があります. 一方で,SageMaker Experiments で実験管理を行いたい場合には,この Estimator に

RuntimeError: CUDA error: Device-side assert triggered の解決方法

はじめに Pytorch でモデルを作成していた際に,「RuntimeError: CUDA error: device-side assert triggered」が発生し,原因がよくわからなかったので,調べたことをメモしておきます. エラー発生の原因 調べてみると,原因と