tokenizer.encode_tokenizerencode转为onehot

1、StringTokenizer st = new StringTokenizersrc， quot_quotwhile sthasMoreElements String s1 = stnextTokenif s1length 1 if s1equalsquotULquotsbappendquot_quotelse sbappends1。

2、这是 StringTokenizer 类下的一个方法你首先要知道 StringTokenizer 是干什么用的StringTokenizer 用来分割字符串，你可以指定分隔符，比如#39，#39，或者空格之类的字符nextToken 用于返回下一个匹配的字段 给你一。