【网络爬虫技术入门-搭建网络爬虫开发环境】

发布于:2022-12-25 ⋅ 阅读:(456) ⋅ 点赞:(0)

系列文章目录

第一章 搭建网络爬虫开发环境



前言

更新日期:2022年9月7日

本系列文章是作者学习网络爬虫技术过程中的笔记,记录作者实操过程给读者作为学习网络爬虫技术的入门参考。

本章记录作者搭建学习网络爬虫技术的开发环境全过程。


一、系统环境

作者使用的电脑系统环境如下:

OS: Microsoft Windows 10 专业版 (64位)

CPU: (英特尔)Intel(R) Core(TM) i5-8265U CPU @ 1.60GHz(1801 MHz) 8核

RAM: 16 GB(2667 MHz)

二、安装软件工具

1.安装VS Code

官网下载地址: VS Code

当前最新版本为 1.71 ,点击“Download”下载自己系统对应的安装包

按如下图示勾选

2.安装python扩展

打开VS Code,按下快捷键Ctrl+Shift+X,进入插件管理页面,搜索python,选择Microsoft出品的python扩展,点击“安装”

3.安装配置Node.js

到Node.js 官方网站下载最新的长期支持版本:

选择默认安装

​ 

勾选同意,点击下一步

​ 

将Node.js安装到D盘

​ 

 不用选择安装其他的工具

 

开始安装 

 完成安装

完成Node.js后在控制台确认安装是否正确

1. node -v 查看node的版本
2. npm -v 查看npm的版本(新版的node安装自带安装npm)

在Node.js安装目录下新建node_global和node_cache

​ 

 以管理员身份打开控制台,配置路径:

  1. npm config set prefix "D:\Program Files\nodejs\node_global"

  2. npm config set cache "D:\Program Files\nodejs\node_cache"

添加系统环境变量NODE_PATH


总结

本文以作者开发环境为例,介绍了在Windows 10环境下安装配置网络爬虫的开发环境。本环境使用VS Code作为编辑平台,配合python和Node.js开发工具,是后续网络爬虫实践课程的实验基础,在进行后续课程前务必成功配置好此开发环境。


参考资料

1、VSCode安装使用教程(最新详细版)

2、VS code配置Python开发环境

3、nodejs安装及环境配置

4、vue+vscode+nodejs 开发环境搭建


网站公告

今日签到

点亮在社区的每一天
去签到