AWS認定試験 AI Practitioner(予想問題) その1

問題 3 / 65

語彙サイズを抑え希少語問題に対処しつつ未知語を扱いやすくする手法はどれか?

語幹化や原型化(stemming/lemmatization)
ワンホットベクトルによる表現
埋め込みベクトルに対するPCA等の次元削減
単語をそのままフィルタリングして削除する
サブワード分割(BPEやSentencePiece等のサブワードトークン化)

当サイトでは、ユーザー体験の向上を目的としてCookieを使用しています。サイトの利用を継続することで、Cookieの使用に同意したものとみなされます。