K-PageSearch是由Kwindsoft自主研发的专业网页搜索引擎系统,拥有行业先进的智能分析和检索技术,核心由多线程采集系统、智能分析系统、海量索引系统、全文检索系统四大部分构成。系统采用专业级的搜索引擎系统架构,支持海量数据毫秒级全文检索。主要面向大中型行业搜索引擎、地方搜索引擎、专类信息搜索引擎等应用领域设计的专业全文检索产品,为用户提供海量数据全文检索应用的理想解决方案。
功能特点
多线程网络蜘蛛
网页定向采集
多语言网页编码自动识别
哈希表网页去重
智能网页正文抽取
基于词库的智能中文分词
中文分词词库管理
海量数据毫秒级全文检索
缓存技术
网页快照
高级搜索
竞价排名
网络蜘蛛
网络蜘蛛采用多线程并发采集网页,结合高效的采集机制和策略部署,最大限度提高网页采集的效率。支持网页定向采集,垂直搜索引擎提高数据质量和相关度的关键技术,用户可以自定义采集规则针对特定网页进行采集。支持多种动态和静态网页类型采集,多语言网页编码自动识别。采用哈希表网页去重技术,具有高性能、低系统占用的特点,使网络蜘蛛高效稳定运行。支持单个或批量网站采集、自动采集、自动更新功能。
正文抽取
智能网页正文抽取技术,它的作用是把一个网页的主题中心内容抽取并把与该网页主题无关的信息(广告、导航、版权等非网页正文内容信息)过滤。这项技术有效提高网页信息采集的质量和检索相关度,智能自动识别、准确网页正文抽取,准确率达到95%以上。
中文分词
基于词库的智能中文分词技术,支持中英文切分、中文简繁字体转换、全角半角转换、中文姓名识别等多项智能分析技术。用户可以根据自己的应用需要扩充和维护词库,以达到最佳的分词效果。
ID:32200
声明:本站所有资源均来源于互联网收集,仅供学习参考使用,如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。