講演情報
[1Yin-A-04]記号挿入パターンが意味連鎖に与える影響の実験的観察記号挿入パターンが意味連鎖に与える影響の実験的観察
〇鈴木 雅斗1 (1. West Los Angeles College)
キーワード:
大規模言語モデル、トークン化、注意機構、構文的撹乱、内容制御
本研究では,大規模言語モデル(LLM)における内容制御および意味理解の脆弱性について,構文的操作の観点から観察的分析を行う。具体的には,全角記号を一定間隔で挿入する単純な構文ルールが,モデルのトークン化および注意機構に影響を与え,結果として通常は抑制される話題を含む出力が生成される事例を確認した。本手法は,敵対的学習や外部ツールを用いず,平文入力のみで再現可能である点に特徴がある。観察結果から,周期的な記号挿入が語彙単位の分断を引き起こし,意味的連鎖の追跡や内容制御アルゴリズムの動作に影響を与える可能性が示唆された。本研究は,LLMにおける意味理解と内容制御の関係を再検討するための基礎的知見を提供するとともに,今後の安全設計および評価手法の検討に資するものである。
