# 自然言語処理 の記事一覧

Amazon SageMaker上でText Generation InferenceのMessages APIを使って、オープンなLLMをOpenAI互換なAPIで使ってみた。

Hugging FaceのChat Template機能を使って、OSSな大規模言語モデルをOpenAIのモデルっぽく使ってみた。

[まとめ]LLMへ至る道~24本分のブログをまとめるとこうなります~[25日目]

[上級編]LLMへ至る道~BERTはよく聞くけど実は~[19日目]

[上級編]LLMへ至る道~画期的な機構！Attentionさん~[16日目]

[上級編]LLMへ至る道~Transformerは何をするのか~[15日目]

[中級編]LLMへ至る道~Seq2Seqってやつがいるらしい~[14日目]

[中級編]LLMへ至る道~要約処理って何しているの？~[13日目]

[中級編]LLMへ至る道~文章で類似度ってどういうこと？~[12日目]

[中級編]LLMへ至る道~文脈を考慮して単語を埋め込んでみるって？~[11日目]

[中級編]LLMへ至る道~RNNってやつがいるらしい~[9日目]

[中級編]LLMへ至る道~単語を埋め込むってどういうこと？~[8日目]

[中級編]LLMへ至る道~トークナイザーってなんだ？~[7日目]

[中級編]LLMへ至る道~自然言語処理ってなに？~[6日目]

Vertex AIで使用できるPaLM2のchat-bisonというチャットモデルをコンソールとローカル環境から使ってみた

Cloudflare社のWorkers AIでも使用されているM2M100という多言語翻訳モデルを使ってみた

【レポート】AIを活用したスクリプト制作支援機能に学ぶ、成功するAI支援機能の開発と導入のポイント #CEDEC2023 #classmethod_game

[レポート] AIでゲームキャラクターの表情を自動設定。Cygames社のAI活用事例セッション #CEDEC2023 #classmethod_game

シングルGPUで動作するTransformer相当のRNNモデル　RWKV-Raven-14Bを試してみた

大規模言語モデルをシングルGPUで動かせる!? FlexGenを触ってみた

「コサイン類似度」で文書がどれだけ似ているかを調べてみた

日本語自然言語処理オープンソースライブラリ「GiNZA」で構文解析をやってみた

[レポート] 機械学習に関する Amazon Research Award 受賞者の講演を聴講しました（その１） #reinvent #AIM408

人間の言葉をコンピュータが理解できるようにするための「ベクトル化」の話

[レポート] NLPを説明可能にする最先端の技術についてBreakout Sessionを聴講しました！ #reinvent #BOA401

Hugging Faceのモデル学習で、モデルをカスタマイズする方法

Amazon SageMaker JumpStartでBERTベースの多言語モデルをファインチューニングして日本語テキストの感情分類モデルを作成する

文脈化単語表現モデル”ELMo”を動かしてみた

Hugging Faceのモデル学習で、ロス関数をカスタマイズする方法

Hugging Faceのモデル学習で、各レイヤ毎に別のLearning Rateで学習する方法

Hugging FaceのLearning Rateを調整するためのSchedulerについて深堀する

Hugging FaceでEarlyStoppingを使用する方法

Hugging Faceで学習するためにcsvファイルからDatasetDictクラスを作成する方法

Hugging Faceを使って事前学習モデルを日本語の感情分析用にファインチューニングしてみた

【BERT】mobileBERTをPythonで動かしてみた

DistilBERTの日本語事前学習済みモデルを使ったりFine-Tuningもしてみる