RENDLER是一个基于Apache Mesos的分布式爬虫框架,有很多值得借鉴的东西,大家可关注下。

Mesos-RENDLER-01

Mesos-RENDLER-02

https://github.com/mesosphere/RENDLER
http://mesosphere.github.io/presentations/hack-week-2014

安装 vagrant ssh

先运行 https://github.com/mesosphere/RENDLER/blob/master/cpp/README.md

Mesos-RENDLER-03

Mesos-RENDLER-04

分配的CPU和内存

Mesos-RENDLER-05

mv result.dot ../

cd /home/vagrant/hostfiles/bin

./make-pdf

Generating ‘/home/vagrant/hostfiles/result.pdf’


发表评论

OpenID

电子邮件地址不会被公开。 必填项已用*标注

Anonymous

电子邮件地址不会被公开。 必填项已用*标注