牛马论坛查看原帖 →

微信输入法敏感词提取器

以南 2 阅读 6 回复
我没有安装微信输入法。坐等 V 友共享词库。
我也没有安装微信输入法。坐等 V 友共享词库。
我也也没有安装微信输入法。坐等 V 友共享词库。
为啥有人要用💩,rime 不好吗
众所不周知,微信输入法存在一个内置的敏感词库
具体表现为:命中该词库的输入,无法组词、联想、形成记忆、永远不会出现在候选中(例如:鸡巴)
该词库并非实时联网获取,而是直接集成在输入法的安装包内
出于兴趣,在 AI 的辅助下,我编写了本微信输入法敏感词提取器
目前该词库的词条数量在 1 万出头,提取效果预览:
(由于内容过于劲爆,这里不放结果了)
本工具从微信输入法安装目录的.\BuildIn\cell_dict.ssrc.zh 文件提取,在 Windows 最新版测试通过
具体用法:
python export_sensitive_single.py -f <cell_dict.ssrc.zh> -o <out.txt>此外还有一些有趣的发现,微信输入法还另内置一个不那么敏感的“敏感词”库( kind=440 )
该额外的词库虽然可以组词,但是在输入法实现中被单独归类,
至于是否有特殊处理(比如记录),本人没有进一步分析
工具下载地址: https://pastebin.com/emEXbrCh (提取码:x7E56zQ4uZ )


⚠️内容来自互联网,如有侵权请点击反馈!侵权投诉
一万出头比我预想的
[这只是一个小尾巴]
你这个脚本测试关键词有风险啊,可以用脏话,但不能用 xx 开坦克,x 大大 这种自投罗网的词语

阅读全文与全部回复 →