爬虫实现思路-CFANZ编程社区

1、安装docker

1卸载系统之前的docker

yum remove docker \
				docker-client \
 				docker-client-latest \
 				docker-common \
 				docker-latest \
 				docker-latest-logrotate \
 				docker-logrotate \
 				docker-engine

2、安装Docker-CE

#安装必须的依赖 
sudo yum install -y yum-utils \
	device-mapper-persistent-data lvm2
#查看是否安装成功
yum list installed | grep -E 'yum-utils|device-mapper-persistent-data|lvm2'
#设置dockerrepo的yum位置 
#sudo yum-config-manager --add-repo  #https://download.docker.com/linux/centos/docker-ce.repo 
#下面是国内镜像网站
sudo yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
	#安装docker，以及docker-cli 
	sudo yum install docker-ce docker-ce-cli containerd.io

3、启动docker

sudo systemctl start docker

4、设置docker开机自启

sudo systemctl enable docker

5、配置docker镜像加速

#阿里云，容器镜像服务 
#下面只是例子，没有实际效果
sudo mkdir -p /etc/docker 
sudo tee/etc/docker/daemon.json<<-'EOF' 
{
	"registry-mirrors"["https://***************.mirror.aliyuncs.com"] } 
EOF 
sudo systemctl daemon-reload 
sudo systemctl restart docker
#操作过程如下：

操作过程：

图1
在这里插入图片描述

图2

在这里插入图片描述

2、docker 安装mysql

1、下载镜像文件

docker pull mysql:5.7

2、创建实例并启动

docker run -p 3306:3306 --name mysql \
-v /mydata/mysql/log:/var/log/mysql \
-v /mydata/mysql/data:/var/lib/mysql \
-v /mydata/mysql/conf:/etc/mysql \
-e MYSQL_ROOT_PASSWORD=root \
-d mysql:5.7
#参数说明
#-p 3306:3306：将容器的 3306端口映射到主机的3306端口
#-v /mydata/mysql/conf:/etc/mysql：将配置文件夹挂载到主机
#-v /mydata/mysql/log:/var/log/mysql：将日志文件夹挂载到主机
#-v /mydata/mysql/data:/var/lib/mysql/：将配置文件夹挂载到主机
#-e MYSQL_ROOT_PASSWORD=root：初始化 root 用户的密码

MySQL 配置

vi /mydata/mysql/conf/my.cnf 
[client] 
default-character-set=utf8 

[mysql] 
default-character-set=utf8 

[mysqld] 
init_connect='SET collation_connection = utf8_unicode_ci' init_connect='SET NAMES utf8' 
character-set-server=utf8 
collation-server=utf8_unicode_ci 
skip-character-set-client-handshake 
skip-name-resolve 
#注意：解决MySQL连接慢的问题 
#在配置文件中加入如下，并重启mysql 
#[mysqld] 
#skip-name-resolve 
#解释： 
#skip-name-resolve：跳过域名解析

3、通过容器的mysql命令行工具连接

docker exec -it mysql mysql -uroot -p

在这里插入图片描述

4、设置root远程访问

grant all privileges on *.* to 'root'@'%' identified by 'root' with grant option; 
flush privileges;

5、进入容器文件系统

docker exec -it mysql /bin/bash

3、docker 安装redis

1、下载镜像文件

docker pull redis

2、创建实例并启动

mkdir -p /mydata/redis/conf
touch /mydata/redis/conf/redis.conf

docker run -p 6379:6379 --name redis \
    -v /mydata/redis/data:/data \
    -v /mydata/redis/conf/redis.conf:/etc/redis/redis.conf \
    -d redis redis-server /etc/redis/redis.conf