熊猫智能采集监测引擎的“云计算”功能的说明
1、熊猫的云计算,是基于对等网(P2P)架构的云计算,将所有在线的熊猫软件的计算机联网成一个虚拟的超级计算机。每个熊猫端都可以是云计算请求端,也可以是云计算协助端。
2、熊猫的云计算请求分成三种类别:A、单纯的云下载请求,B、单个页面的下载兼分析(或简称单页执行),C、项目整体云外包运行。
2.1、单纯的云下载模式:请求云端电脑协助完成对目标网址的下载。可以用于解决IP被封的难题,也可以解决目标网站访问速度慢的问题(测速后择优下载)。
2.2、单个页面的下载兼分析:下载、计算都在云端进行。除包含上述2.1功能外,还可以几十倍、几百倍的节约本地硬件资源,进而大量节省对硬件的投入。
2.3、项目整体云外包运行:比上述2.2更加节约本地硬件资源,适合采集监控项目数量庞大时的需要集约式管理的场合。
3、云请求或响应云请求,使用账号的“积分”进行衡量。云请求端消耗积分,相应的云响应端则可以赚取积分。
3.1、单纯云下载请求,每请求一次,消耗积分0.1。对应的响应端则赚取积分0.1。
3.2、单页执行场合,请求一次,则消耗积分1,对应的响应端则赚取积分1。
3.3、项目外包场合,需要消耗的积分=采集结果数量(含被过滤掉的结果)。
3.4、云计算请求失败时则不产生积分变化。
3.5、测速模式下,每测速一次,消耗积分100。
3.6、对于熊猫的免费版,如果项目本身的就需要消耗积分,则最终消耗的积分等于两者的累加。
3.7、对于熊猫的商业版,账号本身的积分,可用于云请求。
4、账号积分:
4.1、每个账号初始积分为10000。可以通过各种免费途径获取,如在线挂机熊猫软件,响应云请求、友情推广、友情链接等等。
4.2、账号累计的积分,可以自己使用,也可以出售给需要积分的其他熊猫用户。也就是通过熊猫的云计算功能,你只需要将熊猫软件打开,就可以赚取现金。
4.3、默认情况下,每个熊猫端都许可云计算协助(协助下载和下载兼执行)。如果你想更多的赚取积分,可以设置为“接收所有的云计算请求(含外包运行)”
4.4、用户可以关闭熊猫端的对云计算协助功能(或只对专用云端服务),但此时就无法享受挂机获赠积分的福利。
4.5、熊猫会自行控制云计算对本地CPU资源的消耗,因此熊猫的云协助功能不会明显影响你的电脑的性能,不会影响你对电脑的正常使用。只是利用了你电脑的闲置资源。
5、“专用云端”:
5.1、可以设置本地熊猫软件只对指定账号的云请求进行响应,则可以设置为“只服务专用云端”。
5.2、使用专用云端时,要求彼此的熊猫登录账号是相同的。因此不会因为云计算而产生积分的改变或传递。
6、其它机制:
6.1、单页执行场合,如果需要“模拟发布”,则发布会在本地进行。整体云外包运行场合,模拟发布会在云端实现。
6.2、云请求时云端下载的文件,会一并回传到本地。
6.3、每个项目的高级设置中,都有各自的云计算机制的设置。
6.4、单页执行和云外包运行,都需要网络传递本地配置包,此时项目的云计算设置宜选择“云端点重复使用”。
6.5、对云计算协助端的选用,会综合协助端电脑的性能、当前负荷、网速、历史协助记录等因素,并进行随机选用。
7、同一个电脑,可以通过复制熊猫的安装目录的方式来同时启动多个熊猫软件。此时就需要设置每个熊猫软件的云计算通讯端口,确保端口号不重复、不冲突。
8、完全版、舆情版、网络版(及以上)版本用户,可以搭建自己的云计算的桥介服务器。组建专用、独立的云网络。
9、基于对等网架构的云计算,是新颖的技术,暂无可借鉴的先例。因此其熊猫云计算功能的完善是需要一个过程,使用过程产生的错误BUG、问题、疑问,欢迎反馈。
输入网址即可采集
输入关键词即可采集
云采集功能
依据内容判断文章相似度,并过滤重复
多模板功能
万能的可视化发布功能
灵活的数据清洗功能
灵活的数据二次加工功能
通用性的采集软件
智能化辅助操作
全程可视化鼠标操作
可采集结构复杂的对象集合
采集结果可以是由多张表组成的复杂数据关系
强悍的抗干扰能力
电话:171 9219 7361
建议/合作: 139 1618 6547
邮箱:123jlxie@ 163.com