跳到正文
github.com(经 Hacker News)·· 2026-08-20AI 评分29

Parmar:将 BPE 令牌化用作 LZMA 的预处理(9.6%,且速度更快)

Show HN: Parmar——将BPE令牌化用作LZMA的预处理(9.6%,且速度更快)

阅读原文

本站未展示全文,请前往来源网站阅读。

AI 导读

Parmar 将 BPE 令牌化用作 LZMA 的预处理,压缩率提升 9.6%,且速度更快。该项目已在 GitHub 开源,相关讨论出现在 Hacker News。

来源:github.com(经 Hacker News) · github.com