新一代最强域名—网址—IP信息—关键词Url采集工具(Msray)

系统简介

Meta Search Ray，简称msray。 是一款特色并行式元搜索引擎的扩展加强版。包含URL采集、域名采集、IP采集、搜索引擎数据采集、处理、过滤、存储等多个功能；

可根据使用者提供的关键词，自动从多个搜索引擎获取搜索结果数据, 并且支持自动去重复、多种定制化功能如过滤、导出、推送等，便于数据分析与处理。并同时具有系统自带引擎，可无限抓取互联网公开内容。

软件采用的GO语言开发，并提供本地WEB管理后台对软件进行相关操作，无需使用复杂的命令，功能强大且简单易上手!

主要运用于全网域名/网址/IP信息检索、指定关键词批量数据采集、网络推广分析、内容源收集，以及为各种大数据分析等提供数据支撑。

同时支持存储域名、根网址、网址(url)、IP、IP所属国家、标题、描述等多种数据;

软件官网：Msray - 新一代特色并行式元搜索引擎数据收集软件|域名采集|网址采集|URL采集|IP|关键词采集

在线文档：软件介绍 · GitBook

推荐理由

必应搜索引擎，无视安全验证不需要代理！可多线程稳定持续搜索；

百度搜索引擎的，可多线程持续稳定采集，无视安全验证不需要代理！并且与百度原版引擎结果一致。

国内引擎与国外引擎同时支持。国外引擎还包括duckduckgo, yandex等等。

系统优势

1. 采用GO语言开发(企业级项目标准)。跨平台，可完美运行在ubuntu、centos、windows、mac等系统;
2. 多搜索引擎并行式+多线程搜索搜索+多线程外链引擎。支持国内外多个知名搜索引擎，可突破安全验证! 陆续维护添加；
3. 采用B/S架构，自带WEB管理后台可远程访问！无需使用命令,方便上手与降低使用难度。
4. 支持按任务，自定义开启与关闭指定的搜索引擎，自定义线程数等；
5. 采集效率高,日采集百万/千万级不重复无压力；
6. 采用GO语言开发并引入自有算法，系统资源占用小，CPU和内存压力超小；
7. 可智能识别结果中的泛域名站群，并自动加入黑名单，防止大量同一域名的子二级域名；
8. 使用简单便捷，无需技术经验也可以快速上手使用；
9. 支持无限采集，支持搜索引擎相似搜索词的自动抓取与自动化扩展添加种子关键词；
10. 高效的全自动结果防重复功能(100%无重复)；
11. 超全面的多种过滤方案支持，比如按域名级别、按标题、按内容、按国家、按域名后缀等等;
12. 可保存域名、根网址、网址(url)、IP、IP所属国家、标题、描述等多种数据;
13. 全面的数据导出功能，支持按任务定制多种格式数据导出，也支持按时间(比如按天)导出所有结果，甚至无需人工导出自动生成记录保存到本地;
14. 支持数据实时推送功能接口，可自定义接收数据的HTTP接口地址，方便扩展开发与对数据进行自定义二次处理，比如联动其他软件;
15. 不定期更新其他扩展功能，如"同服务器IP网站查询"功能，可免费使用。
16. 完善的在线说明文档，稳定与快速的版本更新服务;

运行环境

1: 跨平台，同时支持ubuntu、centos、windows、mac等系统; 
2: 建议操作系统选择64位系统。
3: 建议使用chrome浏览器访问软件后台;