アテンション機構とは

入力された文章や画像の中で、注目すべき重要な部分に重みをつけて処理するAIの仕組み。前後の文脈を正確に捉えられるため、自然な文章生成や高精度な翻訳に不可欠とされる。

たとえるなら — 長い文章を読むときに、話の要点を理解する上で重要な言葉だけに蛍光ペンで印をつけて集中して読むような仕組みです。