python开发的敏感词检查代码有吗？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

推荐学习书目

› Learn Python the Hard Way

Python Sites

› PyPI - Python Package Index

› http://diveintopython.org/toc/index.html

› Pocoo

值得关注的项目

› PyPy

› Celery

› Jinja2

› Read the Docs

› gevent

› pyenv

› virtualenv

› Stackless Python

› Beautiful Soup

› 结巴中文分词

› Green Unicorn

› Sentry

› Shovel

› Pyflakes

› pytest

Python 编程

› pep8 Checker

Styles

› PEP 8

› Google Python Style Guide

› Code Style from The Hitchhiker's Guide

这是一个创建于 4194 天前的主题，其中的信息可能已经有所发展或是发生改变。

一个小站，天天随机的被阻止，提示可能保护敏感信息。白天还好一些，到了晚上基本都是阻止的
想找个敏感词检查代码，把网站的页面查一边

敏感

代码

阻止

10 条回复 • 2023-06-27 15:23:51 +08:00

harmy

2013-05-18 10:33:31 +08:00

https://github.com/observerss/textfilter

micyng

2013-05-18 11:00:12 +08:00

http://cooder.sinaapp.com/?p=81070 之前看到一兄弟用ac自动机写的，代码其实可以更精简 ;)

est

2013-05-18 11:00:17 +08:00

头痛医头么。。。。

wuxqing

2013-05-18 11:14:10 +08:00

@harmy 试了下
敏感词：开锁

内容：
我提供开×锁

还是过滤不了

harmy

2013-05-18 11:27:18 +08:00

@wuxqing 这当然屏蔽不了，关键字中间加干扰字符体现了网民对抗屏蔽的智慧和无奈

likuku

2013-05-18 12:39:22 +08:00

这个，因为没有统一的有关部门官方版词库，所以很难搞。大些的网站的确会有时被通知某些关键词需要过滤，但不会给到完整列表，只是有需求了才通知一次。

troycheng

2013-05-20 14:59:19 +08:00

@micyng 那是我在学校的时候写的，没什么经验，请多指教

troycheng

2013-05-20 15:01:10 +08:00

@wuxqing 这个得改造一下算法了，我见过这边有加入距离的方式计算的，搜搜相关的文献？

wuxqing

2013-05-20 19:39:17 +08:00

@troycheng 你挺厉害嘛

lchynn

2023-06-27 15:23:51 +08:00

加符号屏蔽什么的不算啥，你看过运营商过滤短信的哪个库，就知道多麻烦了。
简直就是各种火星文，同音字，同形字，甚至白字错字的大集成。
太佩服垃圾短信制造者了，把汉语缺字、倒序、错序、白字、仍然能正确读出主要语义的特点发挥了到了极点。