Python3.8搭建Scrapy开发环境的方法


这篇文章主要介绍了Python3.8搭建Scrapy开发环境的方法的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Python3.8搭建Scrapy开发环境的方法文章都会有所收获,下面我们一起来看看吧。virtualbox_v6.0.14 centos_v7.1908 python_v3.8.0 mongodb_v3.2.22 pip_v19.3.1 windows pycharm-2019.2.3企业版(社区版不支持远程连接linux开发),需激活使用系统自带python2.7.5不做处理,尝试过pyenv安装3.8,但是到安装scrapy的时候报错不断,最终又卸载了pyenv重新手动编译安装。为了保证虚拟机和宿主机能互相访问和正常通信,采用2虚拟网卡的配置方式。在virtualbox菜单中设置–>网络,启用2个虚拟网卡(虚拟机启用,如下2图),网卡1连接方式设置为”网络地址转换nat“,可保证虚拟机访问外部网络和宿主机,网卡2连接方式设置为”桥接网卡“,可保证宿主机能访问到虚拟机。在virtualbox虚拟机上安装centos7,系统在安装过程中最好能配置启用2网卡(centos系统启用)。安装过程略。启动虚拟机后使用# ip addr可查看centos系统网卡使用及ip分配情况。enp0s3是nat网卡信息,ip默认是10.0.2.15;enp0s8是桥接模式下网卡信息,默认分配的ip和宿主机会在同一个网段下。如果看不到某网卡的ip信息,可能是系统在安装的时候没有启用网卡,可在/etc/sysconfig/network-scripts/ifcfg-enp0s3/etc/sysconfig/network-scripts/ifcfg-enp0s8中修改onboot参数为yes,然后重新启动网络服务# systemctl start network.service或者# service network restart即可。系统使用dvd镜像安装完成后默认有ssh服务。宿主机如果使用ssh连接虚拟机需要设置防火墙开放22端口。# firewall-cmd --zone=public --add-port=22/tcp --permanent# 防火墙开放22端口# firewall-cmd --reload#重新加载防火墙配置# firewall-cmd --zone=public --list-port#查看已开放端口至此可以使用windows客户端工具ssh远程连接虚拟机访问操作,主要是方便和宿主机共享剪贴板。使用阿里yum源可参考下面这一段这里需要安装一大坨,是网上搜集+自己实践加上去的,不想折腾就都从了吧添加mongodb国内镜像源 # vim /etc/yum.repos.d/mongodb.repo 粘贴以下内容刷新yum缓存# yum makecache安装mongodb重启mongod服务查看mongod版本# mongod --version防火墙开放27017端口安装python3.8下载python3.8源码编译安装check依赖,生成makefile,# ./configure --prefix='/usr/local/python3'编译# make安装# make install做软链python3.7后–with-ssl不可用,执行configure的时候 不加–with-ssl也可以安装成功,如果不成功,可以在pytho 香港云主机n-3.8.0/modules/setup文件中去掉以下3行的注释符可以先修改pip源路径,pipfile文件中[source]下面url属性,比如修改成:url = “https://pypi.tuna.tsinghua.edu.cn/simple”也可以直接用以下命令执行安装接下来会安装很多scrapy的依赖包,到安装twisted的时候会很慢,要耐心等待。看到如下图即安装成功!关于“Python3.8搭建Scrapy开发环境的方法”这篇文章的内容就介绍到这里,感谢各位的阅读!相信大家对“Python3.8搭建Scrapy开发环境的方法”知识都有一定的了解,大家如果还想学习更多知识,欢迎关注开发云行业资讯频道。

相关推荐: NumPy的numpy.newaxis怎么使用

这篇文章主要介绍“NumPy的numpy.newaxis怎么使用”,在日常 香港云主机操作中,相信很多人在NumPy的numpy.newaxis怎么使用问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”NumPy的numpy.new…

免责声明:本站发布的图片视频文字,以转载和分享为主,文章观点不代表本站立场,本站不承担相关法律责任;如果涉及侵权请联系邮箱:360163164@qq.com举报,并提供相关证据,经查实将立刻删除涉嫌侵权内容。

(0)
打赏 微信扫一扫 微信扫一扫
上一篇 10/28 11:50
下一篇 10/28 11:52

相关推荐