clark1203 发表于 2020-3-22 23:06:37

家用爬虫架构服务器搭建


开个记录贴，打算组个家庭爬虫服务器

基于 nas 家用小主机，树莓派的分布式系统

clark1203 发表于 2020-3-22 23:09:42

master做数据分析MySQL，MongoDB，es，kafka，docker私有仓库等等
slave树莓派跑爬虫

clark1203 发表于 2020-4-17 09:27:54

搭建日志：
1、淘宝购买二手配件： 128g固态硬盘，8g DDR3内存条

clark1203 发表于 2020-4-17 11:33:49

1、安装ubuntu https://blog.csdn.net/baidu_36602427/article/details/86548203
2、安装clash，基于规则访问外网。 https://www.jianshu.com/p/2906066d2e0a
3、安装向日葵 远程控制
4、设置ubuntu免密码登录系统，开机自动启动clash和向日葵

clark1203 发表于 2020-4-17 12:13:36

5、购买智能插座，实现远程开关机
页: [1]
查看完整版本: 家用爬虫架构服务器搭建