AWS認定試験 AI Practitioner(予想問題) その2

問題 11 / 65

日本語・英語・フランス語を同じモデルで扱う際に最も適したトークナイゼーション方式はどれか

完全な単語単位のトークナイザーを用いる
サブワードトークナイザー(SentencePieceやBPEなど)を用いる
文字単位のトークナイザーを採用する
形態素解析だけで語を分割する
語幹抽出のみで語彙を圧縮する

当サイトでは、ユーザー体験の向上を目的としてCookieを使用しています。サイトの利用を継続することで、Cookieの使用に同意したものとみなされます。