搜索引擎技术
YaCy是一个完整的搜索设备,具有用户界面,索引,管理和监控功能。下图显示了其组件:
image.png
YaCy通过网络抓取工具收集网页。然后解析文档,编制索引并在本地存储搜索索引。如果您的对等方是对等网络的一部分,那么您的本地搜索索引也会合并到该网络的共享索引中。如果开始搜索,则本地索引与来自YaCy搜索网络中的对等方的全局搜索索引一起贡献。
点对点网络
YaCy peer使用Distributed Hash Table连续交换索引片段。因此,即使在提交用户查询之前,索引数据也可以到达本地对等体,但是当然在需要时它仍然从远程对等网络加载。
image.png
搜索结果处理和欺诈保护
https://vimeo.com/33025433
组件
YaCy由各种组件组成,这些组件通过黑名单,审核功能和社区通信为索引的联网,管理和维护提供服务。下图显示了YaCy中的组件:
image.png
网友评论