Trainiumを使って学習した大規模言語モデルをECS on EC2でInferentiaにデプロイしてみた

まるクラ勉強会で「AWS ParallelClusterとTrainiumを使って大規模言語モデルをトレーニングする入門」というタイトルで登壇しました

Colab Enterpriseで日本語版 Gemma 2 2B を動かして性能を確認してみた

AWSの新認定試験 AWS Certified AI Practitioner (AIF) 勉強会を実施したのでその内容をまとめました【その３：SageMaker＋その他】

AWSの新認定試験 AWS Certified AI Practitioner (AIF) 勉強会を実施したのでその内容をまとめました【その２：生成AI＋Bedrock】

AWSの新認定試験 AWS Certified AI Practitioner (AIF) 勉強会を実施したのでその内容をまとめました【その１：AI/ML一般知識】

ParallelClusterでTrainiumを使ってTanuki-8Bをベースにモデル学習してみた

RemixプロジェクトのコンテナをECSにデプロイしてみた

pnpmを使って作成したVite + Remixプロジェクトをコンテナ環境で起動してみた

SageMakerの新しいSDKとしてSageMaker Coreが発表されました。

ワークショップを通じてAWS ParallelClusterに入門してみた

そのlistとdict、ひょっとするとtupleとnamedtupleで良いかも？

uvを使ってPython実行環境を整理してみた

生成AI（Claude 3.5 Sonnet）を使って、画像のモデレーションが可能かどうかを検証してみた

複数のGitHubアカウントを同一マシンで使い分ける方法（フォルダごとのリモート紐づけ設定）

チュートリアル動画にしたがってCloudflare Workersを使ってみた【その２】

チュートリアル動画にしたがってCloudflare Workersを使ってみた

Viteで作成したプロジェクトをCloudflare Pagesにデプロイしてみた

「生成AI時代に必要な検索とレコメンドをざっくり抑える」というタイトルでDevelopersIO 2024に登壇しました #devio2024

Amazon SageMakerでマネージドなMLflowが使用できるようになりました

画像の回転などの変換処理が埋め込みベクトルに与える影響を確認してみた

Snowflake NotebooksでGit連携機能を使ってみた

Snowflake Notebooksを使ってみた

『実践AI/ML ~よくあるユースケースとレコメンデーションの効果的な活用戦略~』というタイトルでShowcaseに登壇し、レコメンド活用についてご紹介しました

エンジニア向けのBIツール、QuaryをBigQueryに接続して使ってみた（CLI編）

エンジニア向けのBIツール、QuaryをBigQueryに接続して使ってみた

SageMakerで機械学習アクティビティとIAMポリシーの関係を整理してみた

WindowsマシンでPython環境構築をpoetry + pyenvで再度やってみた

EventBridge Schedulerを使って、特定の期間のみNATゲートウェイを有効化することを実現する

SageMaker StudioのCode Editor Spaceをカスタムイメージで起動する方法

SageMaker StudioのJupyterLab Spaceをカスタムイメージで起動する方法

Terraformを使ってWiki.jsをAmazon RDSをデータベースとして動かしてみた

PythonでUnboundLocalErrorに遭遇したら

Nginx + OAuth2 Proxy + StreamlitでGoogleログイン後にStreamlitにアクセスする環境をローカルコンテナ環境で作ってみた

【小ネタ】Officeが入ってないLinuxなどのマシンでPowerPointファイルをスライド一枚ずつJPEGファイルに変換する方法

Amazon Rekognitionをアルティメット完全理解する

Amazon SageMaker上でText Generation InferenceのMessages APIを使って、オープンなLLMをOpenAI互換なAPIで使ってみた。

OpenAI APIのAssistants APIを使用して、ファイルのやり取りを含むアシスタントを作成してみた。

Hugging FaceのChat Template機能を使って、OSSな大規模言語モデルをOpenAIのモデルっぽく使ってみた。

FinchがWindowsでもサポートされました！ので使ってみました！！

【OpenAI APIアップデート紹介】新しいテキスト埋め込みモデルが公開、APIキーのより細かい管理が可能に、その他

AWS LambdaのPythonランタイムとAWSが提供するLambdaレイヤのPythonライブラリを調べてみた。

【小ネタ】何回やってもSlackアプリのBot Nameが変更できない時のワークアラウンド

【書評】Pythonによる時系列予測

Google Cloud上でGoogleのマルチモーダルモデル Gemini をVertex AIから使ってみた

HHKB Studioが届いたのでセットアップしてみた

「機械学習、アナリティクス系 “推し” アップデート紹介」というタイトルでre:Invent 2023の振り返り勉強会「CM re:Growth 2023」に登壇しました #AWSreInvent #cmregrowth

AWS re:Invent 2023 で発表されたAmazon SageMakerに関するアップデートや記事をまとめてみた #AWSreInvent

Google Cloud上でGoogleの次世代のASR（自動音声認識）モデル「Chirp」を使ってみた

AWS re:Invent 2023 で発表されたAmazon Qに関するアップデートや記事をまとめてみた #AWSreInvent

Amazon Personalizeに追加されたContent Generatorを使って実際にレコメンドにキャッチフレーズを付けてみた #AWSreInvent

AWS re:Invent 2023で発表されたAmazon Bedrock関連のアップデートをまとめてみた #AWSreInvent

[アップデート] Amazon Transcribe Call Analyticsが生成AIの処理による通話要約をプレビューで提供開始 #AWSreInvent

[アップデート] Amazon Bedrockで簡単にRAGが実現できる、Retrieval Augmented Generation (RAG) with Knowledge BaseがとうとうGAになりました！！ #AWSreinvent

[アップデート] 音声データを文字起こしして、医療向けインサイトとして要約ができる AWS HealthScribe がGA になりました!! #AWSreinvent

[アップデート] Transcribeが新しい音声基盤モデル搭載のASR（自動音声認識）を発表しました #AWSreinvent

Whisperなどの前段処理に使えるかも!? PythonのWebRTC VADを使って 音声分割を検討してみた

OpenAIのJSON Modeでテキストを一定のフォーマットに整形してみた

OpenAI APIで自分だけのアシスタントを作れる！！OpenAI DevDayで発表されたAssistants APIについて試してみた。

より高速に効率的にFunction callingを実行できる！！OpenAI DevDayで発表されたFunction callingの並列実行について試してみた。