当前位置:首页 » 净水方式 » 过滤词库

过滤词库

发布时间: 2021-04-03 13:28:03

1. 为什么挂机短信在编辑短信时会跳出编辑内容含有非法字符

为确保电信挂机短信的短信内容的合法性,挂机短信采用敏感词词库过滤方式,如果编辑的短专信内容含有黄属、赌、毒以及敏感信息,将都无法通过敏感词字库过滤,建议用户遇到这样的问题需要检查短信内容是否合法,重新修改短信后再提交。

2. 怎样可以有效地整理SEO词库

第一、你首先后集自身行业词

第二、去渠道拓展(比如:网络知道、网络蜂巢、相关搜索等)

第三、过滤掉不需要的词和符号

第四、以词根为界限提取后缀,统计词频和搜索量

第五、根据词缀找出对应的变量和组合方式

第六、归类

3. 如何利用聚合页和词库做SEO流量

对大中型网站的SEO工作来说,人工分类只能解决中短尾词的着陆页需求,可能做成分类列表,也可能做成专题页来抢占关键词排名。

但还有大量的长尾搜索需求该如何覆盖呢?

常规做法是长尾词聚合页。

聚合页是什么?

举个例子,看下面的阿里巴巴产品聚合页

通过关键词去站内搜索出一些结果做成SEO Friendly的静态化页面。

聚合页面之间需要做一些内链,并且在网站高权重页面加索引入口,以加快收录,从而获得大量长尾流量。

这种做法对于B2B和分类信息网站来说都是惯用手段。

搜索引擎也会时不时打击下这种页面类型,但如果网站内容足够丰富,搜索相关性不是太离谱,内容足够支撑页面的话,这种优化方法必须要做。

词库搭建

因为聚合页是由大量长尾关键词自动生成,所以词库质量好坏,直接影响到搜索流量。

如何获得大量长尾词?

金花关键词工具
战神关键词工具
5118关键词拓展

5118付费会员可以下载某个域名下的全部网络PC关键词。

通过以上工具,可以获得大量长尾关键词,以便于做后续的研究分析。

词库清洗

虽然可以通过第三方工具可以获得大量关键词,但是你需要做数据清洗,比如过滤一些违法词,或者对关键词进行文本分析替换或删除。

如果词量巨大,动辄百万,甚至千万的时候,常规的文本编辑器都很难处理了。(比如sublime,editplus等)

这时候需要用靠编程的手段来辅助处理,或者使用一些Linux下的强大文本处理指令,如Sed或Awk。这些工具Mac也是默认支持的。

比如我需获取从300万词中提取纯关键词,就是不包含地区名(主要是城市名)、不包含”供应“、”价格“、”批发“等,最好是一个专有名词,不包含其他修饰词或组合。

比如”石家庄小松挖掘机价格“,处理后的”纯词“应为”小松挖掘机“。

这样方便以后自己拓展,比如为了抢产品的价格和报价,我们可以组合词 ”小松挖掘机价格“,”小松挖掘机报价“等长尾词,这样页面设计和SEO元素都会更加精准,页面质量也可以更高。

如果想做图片词聚合页面,使用”纯词“ 另外组合出”小松挖掘机图片“即可。

为了实现这样的效果,需要简单学一些sed命令。

删除包含某个关键词的行

比如我要删除包含:”美女“ 关键词的行。

sed -i.bak '/美女/d' filename

这个命令就可以删除词库中包含”美女“这个关键词的行,直接更新当前文件,并且对原始文件做一个备份,扩展名为.bak。(filename.bak)

关键词替换

比如我要把所有关键词中包含的”出口“换成“进口”:

sed -i.bak 's/出口/进口/g' filename

s字符代表替换,g代表全局替换,如果只替换第一个出现的“出口”,则可以去掉。

关键词删除

那删除呢?其实就是也是一种替换,那就是把符合的词,替换成空。

比如我要把所有关键词中开头包含的”供应“去掉:

sed -i.bak 's/^供应//g' filename

s字符代表替换,“^供应”代表以“供应”开头的关键词(支持正则),g代表替换所有“供应”,如果只替换第一个出现的“供应”,则可以去掉。

如果我要把所有关键词中结尾包含的”厂“去掉:

sed -i.bak 's/厂$//g' filename

“厂$”代表以“厂”结尾的关键词

根据关键词长度过滤词

删除小于等于三个字符的关键词

sed -i.bak -r '/^.{,3}$/d' filename
注意:这里不是按字节算的长度,比如即使UTF-8格式,也是每个汉字算1个,而不是算3。

删除大于等于十个字符的关键词

sed -i.bak -r '/^.{10,}$/d' filename
当然,值得字符长度区间也是可以的。

4. 阿里巴巴国际站关键词怎么管理过滤品牌禁售词

使用TXT文档积累和记录下品牌词,作为你的品牌词库,以后你被投诉的品牌词,或者证实内是阿里禁容发的品牌词,都可以添加到词库里去

附件是我整理的国际站品牌词库,内含4500多个品牌词,包括阿里巴巴国际站系统已公示和收录的品牌词(这类词用在标题和关键词系统会提示疑似品牌词,请勿发布;如果发布则系统会自动抽检基本立马扣0.2分一个产品),以及我遇到的和收集的品牌词

你可以下载,发布产品的时候遇到感觉拼写奇怪或是品牌词的可以在这个文档里对比一下,并同时去网络多判断

注:发布产品时系统不提示是品牌词,则阿里未收录,系统不抽检扣分,但是品牌方可以进行投诉。这种词一般没有什么影响,第一次投诉并不扣分,所以想用也可以用用

5. 如何编辑搜狗拼音输入的词库

你是要创建词库,还是编辑已有的词库呢?

搜狗官方不提供本地的词库编辑器,
一般来说需要你将已经编辑好的词条上传到搜狗官网,
由官方转化成可以使用的词库格式。

无论是创建还是编辑词库,第一步都是到搜狗官网注册一个账号
http://pinyin.sogou.com/

创建词库

1.选择要创建的词库类型 >> 2.创建一个新的细胞词库 >> 3.预览结果 >> 4.提交审核
请选择您要创建的词库类型
一般词库
个人专用词库

细胞词库上传注意事项:

* 1. 上传文本格式为一行一词,每行不得超过10个汉字,多余的部分将会被过滤
* 2. 确保文本中无字母(拼音除外)、数字、乱码、标点等符号,否则将被过滤
* 3. 合格词条数目不得小于5条,不得多于5万条
* 4. 为确保词条质量,请勿上传单字,否则将被过滤
* 5. 如需注音请在单个汉字后标注,如“长chang相守”;切勿在词语后标注多个拼音
* 6. 本系统提供创建或增删词条的对比预览功能,请确认修改无误后提交

编辑词库

先下载已有的词库,为TXT格式,经过修改后,进入“创建词库”中的步骤。。。

6. 那位达人有非法关键词的词库...在线等...

最近刚好网监的朋友给我发了份最新的非法信息关键词过滤,不过在家里,晚上回家传到我的网站上。

7. sqlserver中有一张非法过滤词库表,表中5000+条数据,后台用C#,如何以最快速度对一篇文章进行非法过滤。

先把词库读到内存中的字典:以第一个字符为Key的字典,以List<string>为Value(考虑到可能有词汇版第一个字权符是相同的)

Dictionary<char, List<String>> 词库 = newDictionary<char, List<String>>();

再用 System.IO.FileStream类 读取文件。

先读取一行string line = FileStream1.ReadLine()

然后一个一个字符Read,判断是不是ContainsKey('字符'),如果含有,再把这个字符开头的列表中完整字符串读出来,然后进行比对

foreach (string 字符串 in 列表)

{

int 开始位置 =当前字符在行中位置

int 搜索长度 =要比较的字符串长度

使用line.IndexOf(字符串, 开始位置, 搜索长度) > 0 或者使用

line.Contains(字符串) //哪种效率高要试试才知道

这样只需要把文件扫描一次,每次调用哈希表来判断字符,时间复杂度O(1),匹配时搜索当前行的小范围,性能比多次扫描大大提升。

}


我只提供思路,具体代码的自己写把。

如满意,请采纳,谢谢。

8. 关于javaweb的过滤器filter的疑问

过滤器只过滤请求,不过滤响应。请求方式有REQUEST、INCLUE、FORWARD、ERROR四种。
=============
你在说什么?
用户在请求页面时,服务器不会直接把请求给页面,而是先通过Filter,直到所有Filter都通过之后,再给要请求的页面。容器再把动态页面转成静态的,再发给用户端浏览器。

9. C++编程题:输入一段文字,其中包含一些非法的单词,请将这些非法单词删除或替换,然后输出过滤后的文字

提供一个思路
做一个合法单词库
把所有合法单词按照一定组织存起来
然后依次比较单词值 相同则合法,不同则删除

如果要替换的话,就查找最像的单词,这个算法就多了,你可以查一下

10. 高分求论坛过滤词库

不好意思,我找不到,或许你上http://bbs.house365.com/printthread.php?threadid=985072看看吧,或许会有,我确实帮你不到了。

热点内容
丁度巴拉斯情人电影推荐 发布:2024-08-19 09:13:07 浏览:886
类似深水的露点电影 发布:2024-08-19 09:10:12 浏览:80
《消失的眼角膜》2电影 发布:2024-08-19 08:34:43 浏览:878
私人影院什么电影好看 发布:2024-08-19 08:33:32 浏览:593
干 B 发布:2024-08-19 08:30:21 浏览:910
夜晚看片网站 发布:2024-08-19 08:20:59 浏览:440
台湾男同电影《越界》 发布:2024-08-19 08:04:35 浏览:290
看电影选座位追女孩 发布:2024-08-19 07:54:42 浏览:975
日本a级爱情 发布:2024-08-19 07:30:38 浏览:832
生活中的玛丽类似电影 发布:2024-08-19 07:26:46 浏览:239