Majestic-12 - 因特网搜索引擎研究 - 项目介绍

碧城仙

Majestic-12 项目官方主页： http://www.majestic12.co.uk

项目简要介绍如下：

Majestic-12 是一个基于分布式原理的万维网搜索引擎研究项目。项目的客户端使用一种类似“crawls”(爬行者)的技术监视指定的网站，以便及时的了解哪些站点的内容发生了改变，随后将更新一个存于项目服务器上的主要查寻索引文件。

该项目所使用的客户端名称为 MJ12node (又名：DSearch)。目前(2005年7月15日)已经推出了 Windows 版本和 Linux 版本，版本号为 1.0.5 。使用 Windows 版本的用户必须先安装 微软 .NET 1.1 版。Linux 版本的用户必须先安装 Mono。前一个在2005年7月14日发布的版本 0.1.4 版仍然可以继续使用。另外有一款辅助软件 MJ12agent ，可以允许您监视局域网内的其他安装有 MJ12node 的计算机上的客户端运行情况。

(翻译：碧城仙，中国分布式计算总站版权所有)

下面转一幅客户端运行界面截图：

equn

该项目人数稳定增加中。


好看的Scr。

碧城仙

Majestic-12 项目官方主页：http://www.majestic12.co.uk
Majestic-12 项目官方论坛：http://www.majestic12.co.uk/forum/

客户端下载页面：http://www.majestic12.co.uk/projects/dsearch/download.php

Majestic-12 项目统计：http://www.majestic12.co.uk/projects/dsearch/stats.php

目前该项目全世界只有 73 名志愿者参加，其中 0 位中国人.......

项目由英国伯明翰的一家因特网服务公司开发，创办人 Alex Chudnovsky 。

碧城仙

关于“爬行者”的概念，可能很多朋友不熟悉....

Crawler 是搜索引擎用的网络爬行者，通过它们在 Web 上爬行，寻找超链接，抓取页面内容，为搜索引擎下一步索引工作做准备。

关于这种技术可以访问微软主页以了解更多深层次的知识，推荐阅读《解读Microsoft ·NET技术基础》。以下为部分内容转载：

网络爬行者可以访问一个已注册的 URL ，并且能够发现和索引网页上的文字。然而这种 "robots.txt" 方法， 决定于网络爬行者定位每个网站及网站上服务描述文件的能力。这种分布式方法具有升级潜力，但是缺少一种机制来保证服务描述文件格式的一致性以及跟踪它们所发生的变化的方便性。

equn

引用 碧城仙 在 2005-8-2 23:08 时的帖子:
关于“爬行者”的概念，可能很多朋友不熟悉....

Crawler 是搜索引擎用的网络爬行者，通过它们在 Web 上爬行，寻找超链接，抓取页面内容，为搜索引擎下一步索引工作做准备。

关于这种技术可以访问微软主页以 ...

Baidu 的 Crawler 也称 Baidu Spider 吗？

池龙

引用 equn 在 2005-8-3 08:09 时的帖子:


Baidu 的 Crawler 也称 Baidu Spider 吗？

应该是一样的东西，不过我似乎觉得叫Spider的多一些？

lu_pp

下载量太大了
我家宽带有流量限制
不参加了

watson_yan

有无中国的team?

第三类接触

有个MJ@China，但是加不上。

watson_yan

太占带宽了，电驴都没法下载了。不玩了。
人太少没有成就感

roka

hehe

bbrang

支持一下阿  很好

cnchina

普通的家用寬帶能用么？有沒有哪位能夠提供點信息？還有，平時在使用時能不能掛成休息的？

cnchina

今天加入了项目，开了一整个下午（从12点到现在5小时）（流量有点大。。快一G。。不过还好家里不限流量，但就路由有点烫）

把自己推到单天排名第73（估计还能往上爬）：

#	Nick	URLs done	Data (MB)
73	EY	29,999	648

把中国顶到单日27单月38（似乎就我一人？）

27

China

29,999

648

38

China

29,999

648

------
刚才回来才发现有Team China，加上我就3人。。。
http://majestic12.kicks-ass.org/teams/team.jhh?teamid=102