それもそうなんですよね

5:48 AM

途中のUTF8BOMについては特に気配りがないし。

5:51 AM

一応UTF8とUTF16BEをcatしたソースコードを読み込ませたりしたときに

5:51 AM

UTF16先頭から末尾までが一個のunknown tokenになるという機能があるけど (edited)

5:51 AM

それが必要なのかというとウーン？