家用爬虫架构服务器搭建

clark1203

开个记录贴，打算组个家庭爬虫服务器

基于 nas 家用小主机，树莓派的分布式系统

clark1203

master做数据分析MySQL，MongoDB，es，kafka，docker私有仓库等等
slave树莓派跑爬虫

clark1203

搭建日志：
1、淘宝购买二手配件： 128g固态硬盘，8g DDR3内存条

clark1203

1、安装ubuntu https://blog.csdn.net/baidu_36602427/article/details/86548203
2、安装clash，基于规则访问外网。 https://www.jianshu.com/p/2906066d2e0a
3、安装向日葵 远程控制
4、设置ubuntu免密码登录系统，开机自动启动clash和向日葵

clark1203

5、购买智能插座，实现远程开关机