統計的自然言語処理によりおぼろげながら浮かんできた思考の仕組みと教育の未来｜Singularity Society
note.com/singsoc/n/n989c18fe2a98?magazine_key=m07294b059a7a
1 Users
0 Comments
1 Highlights
0 Notes
Tags
Top Highlights
Satoshi：GPT3.5のtokenizerがなぜか「こんにちは」だけを１トークンで表せるという不思議な謎を指摘した人がいたので試したところ、確かにそうでした。「おはよう」「こんばんは」「今日は」は１トークン化されていないのに、なぜか「こんにちは」だけ特別扱いされています。
Ready to highlight and find good content?
Glasp is a social web highlighter that people can highlight and organize quotes and thoughts from the web, and access other like-minded people’s learning.