爬虫小项目

介绍

主要用来上传做的爬虫小项目

软件架构

本仓库主要基于python语言，使用的是python的开源版本---Anaconda(有时也会使用PyCharm)，包含了conda、Python在内的超过180个科学包及其依赖项。可以创建多个python环境，并为每个python环境安装不同的包，不同环境相互切换，操作简单，使用方便。

Anaconda安装教程

1. 下载地址：https://www.anaconda.com/download/
2. 打开下载好的 Anaconda.exe文件，出现如下界面

点击next即可

用户协议，点击 I Agree

选All Users 点Next

选择安装路径，不建议装在C盘，可自己定义路径，选择好后点击next

第一个选项是添加环境变量，默认是没有勾选的，请务必勾选上，如果这里不勾选，后续安装完成后想要自行添加环境变量会非常麻烦。勾选完后点击 Install 安装。如果忘了勾选可以卸载重装。

最后一步了，继续点Next。

Finish完成。（那两个 √ 可以取消。） 安装完成后在开始菜单会多出一个快捷方式，也就是Anaconda下的子程序：

安装完毕！

Anaconda使用教程

主要用的两个为Anaconda Prompt 和Anaconda Navigator，Anaconda Prompt 就是我们的cmd，打开后如下：

以后的创建环境和环境切换，和pip安装各种包全在这里， 介绍几个常用的快捷键：

1. conda info 查看当前环境的信息

2. conda info -e 查看已经创建的所有虚拟环境

目前我创建的3个不同的虚拟环境，分别32位python2.7、32位python3.6和64位python3.7

3. conda activate xx 切换到xx虚拟环境

现在即切换到了64位python3.7环境

4.set CONDA_FORCE_32BIT=1 # 切换到32位 set CONDA_FORCE_32BIT=0 # 切换到64位

表示已经切换到32位

5.conda remove -n env_name --all 移除环境，也可在Anaconda Navigator中移除

这是我们添加的清华源，加快包的下载速度， 我们创建的环境和环境里的安装的包可以在Environments里查

也可以在这里创建虚拟环境和移除虚拟环境，还可为每个独立的环境安装需要的包

参考学习

1. https://www.bilibili.com/video/BV1Qi4y1s72J/
2. https://www.bilibili.com/video/BV1gz4y1f7D2?from=search&seid=4207918731662181718&spm_id_from=333.337.0.0