分词模型UD_TOK_MMINILMV2L12的输入长度限制

[wwwsj]

测试了一下，这个模型能输入最多510个汉字及汉字标点符号，或者1530个英文字母及英文标点符号，或者2040个阿拉伯数字。这背后是什么原理？