TECH BLOG
ブログ
#Transformer
-
【AI Shift Advent Calendar 2023】ベクトルベースのRetrieverの学習と評価
こんにちは、AIチームの戸田です 本記事はAI Shift Advent Cal…
2023.12.08 Research -
Kaggleで学んだBERTをfine-tuningする際のTips⑥〜LLMでも使える学習効率化編〜
こんにちは！AIチームの戸田です 本記事では私がKaggleのコンペティションに…
2023.08.17 Research -
Decision Transformer 精度向上実験① 〜state lossの有効性についての検証〜
こんにちはAIチームの戸田です 本記事ではオフライン強化学習手法の一つであるDe…
2023.04.11 Research -
trlxを用いた文書生成モデルの学習②~PPO編~
こんにちはAIチームの戸田です 前回に続き、最近話題のChatGPTの学習に使わ…
2023.03.06 Research -
trlxを用いた文書生成モデルの学習①~ILQL編~
こんにちはAIチームの戸田です 今回は最近話題のChatGPTの学習に使われてい…
2023.02.28 Research -
【PyTorch】GPTをPrompt-tuningしてみた
こんにちは．AIチームの二宮です． 本記事では，最近話題のPrompt-tuni…
2023.01.19 Research -
Kaggleで学んだBERTをfine-tuningする際のTips⑤〜ラベルなしデータ活用編〜
こんにちは！AIチームの戸田です！ 本記事では私がKaggleのコンペティション…
2023.01.17 -
【AI Shift/Kaggle Advent Calendar 2022】Kaggleで学んだBERTをfine-tuningする際のTips④〜Adversarial Training編〜
こんにちは！AIチームの戸田です！ 本記事はAI Shift Advent Ca…
2022.12.09 -
【AI Shift Advent Calendar 2022】SetFitによるfew-shotテキスト分類
こんにちは！AIチームの戸田です。本記事はAI Shift Advent Cal…
2022.12.01 -
TransformerモデルへのMC Dropoutの適用
こんにちはAIチームの戸田です 今回はTransformerモデルにMonte …
2022.02.17 Research
PICK UP
TAG
- Advent Calendar（21）
- Advent Calendar 2021（17）
- Advent Calendar 2023（25）
- adversarial training（1）
- AI（3）
- API（1）
- API Gateway（1）
- architecture（2）
- ArgoCD（1）
- Azure（1）
- BigQuery（3）
- Bigtable（1）
- Bun（2）
- CA BASE NEXT（1）
- causal inference（1）
- Chart（1）
- ChatGPT（2）
- Chrome（1）
- Cloud Endpoints（1）
- Cloud Run（1）
- Container Apps（1）
- Data Visualization（6）
- Deep Learning（26）
- Deno（1）
- DialogFlow（4）
- Elasticsearch（2）
- Elixir（1）
- EM（1）
- FAQ検索（5）
- few-shot learning（1）
- Firebase（2）
- Firestore（3）
- Frontend（7）
- GAS（1）
- GCP（7）
- GitHub Actions（2）
- GKE（2）
- Golang（4）
- Google Colab（1）
- gRPC（2）
- HLS（1）
- Hono（1）
- huggingface（1）
- JavaScript（2）
- JavaScript Core（1）
- JIT（1）
- Kaggle（20）
- LightGBM（1）
- LLM（13）
- LocalFirst（1）
- machine learning（1）
- Next.js（1）
- Node（1）
- OpenAI（1）
- ORM（1）
- PdM（2）
- Phoenix（1）
- PMM（1）
- Product（1）
- Prompt-tuning（1）
- python（7）
- RAG（3）
- React（4）
- React.js（1）
- Research（2）
- RLHF（2）
- RPA（1）
- Server component（1）
- SIP（1）
- SQL（2）
- SQLBoiler（1）
- Tableau（11）
- Terraform Cloud（1）
- TPU（1）
- Transformer（14）
- treatment assignment（1）
- treatment effect estimation（1）
- TypeScript（2）
- V8（1）
- voicebot（1）
- WebKit（1）
- WebSocket（1）
- WebWorker（1）
- XGBoost（1）
- Zig（1）
- インターン（6）
- インフラ（1）
- お知らせ（1）
- コンペティション（1）
- タスク指向対話（8）
- データアナリスト（7）
- フロントエンド（1）
- ベイズ推定（1）
- ボイスボット（1）
- マルチモーダル（1）
- 予測モデル（1）
- 信号処理（8）
- 内定者バイト（1）
- 効果検証（1）
- 参加報告（18）
- 大規模言語モデル（1）
- 学会発表（3）
- 対話（9）
- 強化学習（7）
- 感情分類（1）
- 振り返り（1）
- 数学（2）
- 機械学習（12）
- 測度論（2）
- 異常検知（1）
- 発表報告（19）
- 終話判定（2）
- 統計（1）
- 自然言語処理(NLP)（96）
- 話者交代（2）
- 論文調査（1）
- 量子化（1）
- 音声処理（13）
- 音声区間検出（2）
- 音声言語理解(SLU)（5）
- 音声認識（20）