ai2026/5/29 13:00:00
認知圏論トランスフォーマー：言語モデリングのための圏論的帰納的バイアス
ニュース概要
認知圏論トランスフォーマー(CCT)は3億600万パラメータのアーキテクチャで、事前学習されたGPT-2 Smallバックボーンを圏論から導出された認知的に根拠のあるコンポーネント、および認知科学からのいくつかのインスピレーションで拡張しています。マッチドステップ・プロトコル下(215,000最適化ステップ)で...
ニュースタイムライン
2026年6月30日
テンソルネットワークを用いた子供の感情記憶のモデリングarXiv cs.LG
2026年6月30日
Transformer言語モデルにおける状況モデリングとメンタライジングの発達的軌跡arXiv cs.CL
2026年7月2日
EVOTS: 時系列予測のための進化的トランスフォーマー探索arXiv cs.LG
2026年7月2日
トランスフォーマーが「不可能な」言語を学習する時、何を学ぶのか？arXiv cs.CL
2026年7月7日
QuantFlow: 時系列予測のためのフェデレーテッド・マンバベース・ポスト・トランスフォーマー基盤モデルarXiv cs.LG
記事AI質問チャット
PREMIUMこの記事についてAIが質問に答えます。背景・要約・影響まで深堀り。
ログインして利用関連記事
こんな記事も読まれています
この記事について疑問がありますか?
事実誤認や不適切な内容について通報できます (要ログイン)。
異議申し立て・通報
