系列文章目录
前言
更新日期:2022年9月7日
本系列文章是作者学习网络爬虫技术过程中的笔记,记录作者实操过程给读者作为学习网络爬虫技术的入门参考。
本章记录作者搭建学习网络爬虫技术的开发环境全过程。
一、系统环境
作者使用的电脑系统环境如下:
OS: Microsoft Windows 10 专业版 (64位)
CPU: (英特尔)Intel(R) Core(TM) i5-8265U CPU @ 1.60GHz(1801 MHz) 8核
RAM: 16 GB(2667 MHz)
二、安装软件工具
1.安装VS Code
官网下载地址: VS Code
当前最新版本为 1.71 ,点击“Download”下载自己系统对应的安装包
按如下图示勾选
2.安装python扩展
打开VS Code,按下快捷键Ctrl+Shift+X,进入插件管理页面,搜索python,选择Microsoft出品的python扩展,点击“安装”
3.安装配置Node.js
到Node.js 官方网站下载最新的长期支持版本:
选择默认安装
勾选同意,点击下一步
将Node.js安装到D盘
不用选择安装其他的工具
开始安装
完成安装
完成Node.js后在控制台确认安装是否正确
1. node -v 查看node的版本
2. npm -v 查看npm的版本(新版的node安装自带安装npm)
在Node.js安装目录下新建node_global和node_cache
以管理员身份打开控制台,配置路径:
npm config set prefix "D:\Program Files\nodejs\node_global"
npm config set cache "D:\Program Files\nodejs\node_cache"
添加系统环境变量NODE_PATH
总结
本文以作者开发环境为例,介绍了在Windows 10环境下安装配置网络爬虫的开发环境。本环境使用VS Code作为编辑平台,配合python和Node.js开发工具,是后续网络爬虫实践课程的实验基础,在进行后续课程前务必成功配置好此开发环境。