当前位置:首页 > python > 正文内容

python scrapy库安装

zhangsir4年前 (2022-08-23)python391

(1)安装

pip install -i https://pypi.tuna.tsinghua.edu.cn/simple scrapy

 (2) 报错1: building 'twisted.test.raiser' extension

              error: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++

              Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools

     解决1

       http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted

       Twisted‑20.3.0‑cp37‑cp37m‑win_amd64.whl

       cp是你的python版本

       amd是你的操作系统的版本

       下载完成之后 使用pip install twisted的路径  安装

       切记安装完twisted 再次安装scrapy


 (3) 报错2  提示python -m pip install --upgrade pip

      解决2   运行python -m pip install --upgrade pip


 (4) 报错3   win32的错误

      解决3   pip install pypiwin32


 (5) 如果你觉得安装麻烦,可以直接安装anaconda


zhangsir版权f8防采集https://mianka.xyz

扫描二维码推送至手机访问。

版权声明:本文由zhangsir or zhangmaam发布,如需转载请注明出处。

本文链接:https://mianka.xyz/post/12.html

标签: pythonscrapy
分享给朋友:
返回列表

没有更早的文章了...

下一篇:scrapy创建项目与运行

“python scrapy库安装” 的相关文章

Selenium添加Cookie来实现自动登录

Selenium添加Cookie来实现自动登录第一步获取你登录的cookie,以csdn为例from selenium import webdriver driver = webdriver.Chrome() driver.get('...

权大师商标查询api

''' data:2022-10-15 autor:zhangsir 权大师商标查询api ''' import requests import json import time import h...

解决Django的request.POST获取不到请求参数的问题

这个是Django自身的问题:只要在请求头的添加"content-type":'application/x-www-form-urlencoded'就行。...

python selenium 使用代理ip

代码如下:from selenium import webdriver chromeOptions = webdriver.ChromeOptions() chromeOptions.add_argument("--proxy-serv...

Linux系统下使用Python+selenium+谷歌浏览器下载文件

from seleniumwire import webdriver import time ch_options = webdriver.ChromeOptions() ch_options.add_argument("-...

python 实现快速扣背景图功能

一,实现快速扣背景图需要rembg这个三方库#引入rembg库 from rembg import remove #素材 input_path = 'input.jpg' #效果 output_path =&nbs...