AWS認定試験 AI Practitioner(予想問題) その1

問題 3 / 65

語彙サイズを抑え希少語問題に対処しつつ未知語を扱いやすくする手法はどれか?

①語幹化や原型化(stemming/lemmatization)
②ワンホットベクトルによる表現
③埋め込みベクトルに対するPCA等の次元削減
④単語をそのままフィルタリングして削除する
⑤サブワード分割(BPEやSentencePiece等のサブワードトークン化)

当サイトでは、ユーザー体験の向上を目的としてCookieを使用しています。サイトの利用を継続することで、Cookieの使用に同意したものとみなされます。