コンテキストサイズってのがあってだな
llmってのは実は毎回これまでのやりとりの全文を入力してるんだけど、コンテキストサイズを超えた分は前方向から無視されるんだ
そもそも記憶してるわけではない
だから「忘れられる」とよく表現されるけど、無視されるという方が正確