源词组
中文分词器
WordPiece
“油价”
“油价”
“油”“价”
“0.5%”
“0.5%”
“0”“.”“5”“%”
“元宵节”
“元宵节”
“元”“宵”“节”
“6834人”
“6834”“人”
“68”“#34”“人”