小白运行PY爬虫代码简单教程,高手绕道

本帖最后由 xmasdoctor 于 2018516 15:18 编辑
看好多如我一般的新司机不懂得如何运行PY程序,或者不懂得如何将论坛里的代码搞起来,下面我随便说说:
注:如果是已经弄好的.py文件,直接看第二步.
第一步:1.将代码原格式复制到文本编辑器里,例如系统自带的记事本;
注意不得删除里面的空格和回车,不得含有代码序号
如:(为保证格式完整性

小白运行PY爬虫代码简单教程,高手绕道

本帖最后由 xmasdoctor 于 2018516 15:18 编辑

看好多如我一般的新司机不懂得如何运行PY程序,或者不懂得如何将论坛里的代码搞起来,下面我随便说说:

注:如果是已经弄好的.py文件,直接看第二步.

第一步:1.将代码原格式复制到文本编辑器里,例如系统自带的记事本;

注意不得删除里面的空格和回车,不得含有代码序号

如:(为保证格式完整性,下面每一行都添加了↓标志,实际使用时切记不要带!!!)

↓posts = []

↓ for title, url, img in zip(titles, urls, imgs):

↓ post = {

↓ ‘title’: title.text,

是对的,

↓posts = []

↓for title, url, img in zip(titles, urls, imgs):

↓post = {

↓’title’: title.text,

或者

↓01.posts = []

↓02. for title, url, img in zip(titles, urls, imgs):

↓03. post = {

↓04. ‘title’: title.text,

之类的是错误的.

2.另存为xxx.py,并记得选编码为UTF8;

注意,存储前记得跟网上提供的代码核对一下.

第二步:1.安装python;

记得安装过程中记得勾选选项中带path的那一项,是python的环境.

2.安装库;

一般的库大都可以用按win+R,在运行里直接输入pip install ??? 之类的代码安装,

例如pip install requests,再例如pip install BeautifulSoup4这样的,推荐安装requests,别的可以看代码安装,代码里import后面的单词往往涉及到库,此处不过多深入.

但!!!有些py要安装scrapy库才可以运行。

在windows下,直接安装运行pip install scrapy容易报错,如下:

building ‘twisted.test.raiser’ extension

error: Microsoft Visual C++ 14.0 is required. Get it with “Microsoft Visual

C++ Build Tools”: http://landinghub.visualstudio.com/visualcppbuildtools

由错误提示可知是由于安装twisted导致的这个错误的发生,所以需要先安装twisted, 不能使用pip install twisted,这会导致这个错误继续发生。

解决方案:

1.http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 在这个地址下载相应版本的Twisted***.whl

其中cp后面就是依赖的Python版本。 amd64表示64位给作系统。下载后将文件放到D盘下,如当前使用的是Twisted18.4.0cp36cp36mwin_amd64.whl ,则输入pip install D:\Twisted18.4.0cp36cp36mwin_amd64.whl 安装,以此类推。

2.然后运行pip install scrapy执行安装给作.

这样就不会错了.

第三步,好了,可以运行你的PY程序了.

:部分知识点借鉴网络

:转载请注明出处:http://www.wnflb.com/thread11488511.html

2楼:福利吧,赛博自由空气

3楼:jackymark 发表于 2018519 00:21

收藏起来 以后会用上 谢谢拉

棉薄之力,不足挂齿

4楼:老司机遨游天际 发表于 2018518 22:37

为啥不加个代码框框呢

我这不是代码哟,只是示例,越简单越好

5楼:收藏起来 以后会用上 谢谢拉

6楼:为啥不加个代码框框呢

7楼:tyoodonvcd 发表于 2018517 09:10

很不错的安装教程,我就是刚开始不会安装库搞得焦头烂额

我这么一搞,应该就简单多了吧.

8楼:tyoodonvcd 发表于 2018517 10:48

https://lao4g.win/ 这镜像站不错嘛 怎么弄的 。。

应该不难弄,不过我不会,可以问问别的老司机.

9楼:https://lao4g.win/ 这镜像站不错嘛 怎么弄的 。。

10楼:很不错的安装教程,我就是刚开始不会安装库搞得焦头烂额

11楼:wwww_wwww 发表于 2018516 22:05

@LONG 这个也是福吧的站点?怎么看着像爬过去的 https://lao4g.win/

我觉得肯定不是官方的。但,我个人认为稍稍有点宣传的作用,也还是不错。当然,方式有待……

12楼:@LONG 这个也是福吧的站点?怎么看着像爬过去的 https://lao4g.win/

13楼:今天看到老司机的一个镜像站(涉及本文的地址为:https://lao4g.win/news/8849.html)转载文章时格式还是有问题,所以特地把这里的原帖重新编辑了一下,谢谢大家支持!

(0)

相关推荐