最新

1 分•作者: Luc•9 个月前•原帖

1 分•作者: azalemeth•9 个月前•原帖

3 分•作者: pabs3•9 个月前•原帖

1 分•作者: Klaster_1•9 个月前•原帖

3 分•作者: isaacfrond•9 个月前•原帖

1 分•作者: thunderbong•9 个月前•原帖

7 分•作者: JPLeRouzic•9 个月前•原帖

1 分•作者: liualexander112•9 个月前•原帖

1 分•作者: gpi•9 个月前•原帖

2 分•作者: smu•9 个月前•原帖

2 分•作者: panic•9 个月前•原帖

1 分•作者: ltratt•9 个月前•原帖

2 分•作者: skimdesk•9 个月前•原帖

1 分•作者: robin_reala•9 个月前•原帖

4 分•作者: springkim•9 个月前•原帖

我用C++构建了一个分词器，并提供了Python绑定，其在处理大输入时的性能比HuggingFace的分词器快10倍。该分词器经过优化，旨在实现最低的内存使用和延迟。<p>基准测试和比较已包含在自述文件中。欢迎反馈或贡献！

2 分•作者: todsacerdoti•9 个月前•原帖

4 分•作者: 8-prime•9 个月前•原帖

1 分•作者: yanko•9 个月前•原帖

1 分•作者: Sontho•9 个月前•原帖

2 分•作者: thunderbong•9 个月前•原帖