func NewKagomeMorphTokenizerWithUserDic(userdic tokenizer.UserDic) *KagomeMorphTokenizer { k := tokenizer.New() k.SetUserDic(userdic) return &KagomeMorphTokenizer{ tok: k, } }
func NewKagomeMorphTokenizer() *KagomeMorphTokenizer { return &KagomeMorphTokenizer{ tok: tokenizer.New(), } }