RT Natalie Wolchover: 明白なことかもしれませんが、私の印象では、優れた数学者は往々にして学んだことを~永遠に、驚くべき詳細さで記憶しており、新しい文脈で必要に応じて事実や技法を呼び出すことができます。そしてLLMは確かに学んだことを記憶しています!
ナタリー・ウォルクハバーの投稿を引用したポール・グレアム氏のリツイート。優れた数学者は学んだことを驚くべき詳細さで長期間記憶し、新しい文脈で必要な事実や技法を自在に呼び出せるという指摘。そして大規模言語モデル(LLM)も同様に学習内容を記憶できる点を興味深い相似として提起している。