简介

这是由云天河自封装的一款行为类爬虫框架

章节列表

等等云天河有空了再写写

起步

配置

进入项目根目录
复制初始配置文件

sqls/es6/conf/db/mysql.jsmysqlredis

安装

下载 Chrome

linux 环境

这样安装后,该环境就不需要动配置文件了

windows 环境
60以上版本es6/conf/index.jschrome.exe

配套服务

MysqlRedisNode

安装依赖

目录介绍

es6es5

运行

请使用普通用户权限运行,否则chrome无法调起

RabbitMQsupervisor
操纵浏览器

性能测试

基础配置

CPUGPU

实际资源消耗

TODO

依赖项目

API

golang
对应项目地址

后台

php
cURL

后台与行为类爬虫的通信方式

后台请求拉取 -> 发送渠道拉取信息到 MQ -> MQ 消费

查看漫画

public/index.html