#493 現代のLLMの弱点、長い文章で重くなるを解決する日本発のアイディア「PHOTON」

LLMの裏側で使われているトランスフォーマーには長い文章を突っ込むと重くなるという弱点があります。 今日はそんな弱点を解決する論文が日本から出てきたとのことでそれについて紹介していきます！ ※終盤でじゅんぺーの録音が途切れております Claude 紹介コード ----------------------------------------------------------------------------------- お便りはこちらにラジオネームをご記入の上お送りください！ [email protected] 質問内容はなんでもOK！ 今困っていることや、キャリアについて、これからエンジニアを目指すにあたっての悩みなどどしどしご連絡ください こちらのGoogleフォームへの回答でもOKです！( Xで「#ひまじんプログラマー」をつけてツイートしてくれたらめちゃくちゃやる気出ます！ よろしくお願いします！ ----------------------------------------------------------------------------------- オンラインコミュニティ「ひまプロ談話室」のお知らせ ひまプロ談話室では絶賛メンバー募集中です。 エンジニア友達を探したい！アウトプットの場が欲しい！他のエンジニアから刺激をもらいたい！など、日々のエンジニアリング業務をもっと楽しくしたい方や、もっと成長できる環境が欲しいという方向けのコミュニティです。 以下のフォームからお申し込みできます。 ひまプロ談話室参加申込みフォーム ----------------------------------------------------------------------------------- Xのフォローもよろしくお願いいたします！ ・かいち ・のり ・じゅんぺい ----------------------------------------------------------------------------------- BGM: MusMus様 See Privacy Policy at https://art19.com/privacy and California Privacy Notice at https://art19.com/privacy#do-not-sell-my-info.