pycharm

Python

限于喜欢 提交于 2020-08-08 13:59:06
前言 如果你在 51 Testting 上面见到这篇文章,不要以为我是盗版哦!因为那是我投稿的文章 模块和包的定义 模块的定义: 任何 *.py 的文件都可以当作模块使用 import 导入 包的定义: 包含一个__init__.py和其他模块、其他子包的一个目录 实际项目中,所谓的包和模块分别代表什么,如下: 包就是指 test 模块就是 do_excel.py , http_request.py , run.py 导入包的各种方法 我们以上面这个目录讲解,在 run.py 文件中导入各个包的方式 导入单个test包 import test 导入report、log包 # 同时导入,用逗号隔开,墙裂推荐 import report, log # 分开导入 import report import log 导入单个test包,并起别名 import test as t 导入report、log包,并都起别名 import report as r, log as l 导入project包下的old包 import project.old 导入project包下的old包下的test包 # 方式一:链式调用 import project.old.test # 方式二:from .. import .. from project.old import test 到这里先总结下知识点

招聘信息太多,哪家职位才是适合你的?Python采集招聘信息

◇◆丶佛笑我妖孽 提交于 2020-08-08 12:09:04
前言 在招聘信息上,会提及工作的职位,不过大多描述是笼统的,还需要我们去了解工作的具体内容和性质。要知道,在不同的公司,同样的职位做的事情也是不一样的,工作方法更是大相径庭。所以,要尽可能详细地了解你所投递的职位的具体工作内容、要求。在了解清楚一切后,才能判断出这个职位是否与你的专业、能力、兴趣等相契合。 拉勾招聘是专业的互联网求职招聘平台。致力于提供真实可靠的互联网招聘求职找工作信息。 今天我们一起使用 python 采集拉钩的 python 招聘信息,分析一下找到高薪工作需要掌握哪些技术。 开发环境: 1. 解释器: Python 3.6.5 | Anaconda, Inc. 2. 编辑器: pycharm 社区版 然后信心满满的 ennn 翻车了 不怕,再来!!! 步骤 导入模块: import requests import pprint 正常的情况下,确定爬取的url路径,headers参数就行了,但是有反爬 加上防盗链,Origin,Host参数,还是不行,所以可能就是Cookie的问题了。 还要构建 ip 池 代码如下 def get_cookie(): # 获取服务器返回的 cookie url = ' https://www.lagou.com/jobs/list_python?labelWords=&fromSearch=true&suginput= '

我眼中的华为公有云AI平台--ModelArts

邮差的信 提交于 2020-08-08 11:21:17
前言 AWS Sagemaker has been a great deal for most data scientists who would want to accomplish a truly end-to-end ML solution——by John Moolayil 这是数据科学在线网站“towards data science”一篇文章中的一段话。时常有人问我,“为什么会有ModelArts存在”,这是一个很有价值的问题,结合国外专家对AWS Sagemaker的评价,我决定写一篇文章,讲讲我对华为云ModelArts全流程AI平台的理解。 ModelArts平台的初心 为什么不能仅仅使用开源软件构建AI训练和推理过程?答案是,可以的,但是不能用于大规模生产环境下,至于为什么我这么说,让我们先谈谈人工智能产品。我认为,如果要将人工智能技术集成到各个行业,需要有一套完整的软硬件平台支撑。 人工智能平台大致的分层架构如下图所示: 完整的人工智能平台,水平方向上支持端、边、云三种场景,每个场景均涵盖了从底层硬件至上层应用。 最底层是芯片层(例如华为的昇腾芯片、Google的TPU芯片、NVIDIA的GPU卡),再往上是适用于端边云的硬件系统(包括服务器和终端设备等)及其基础软件环境(如云服务、操作系统)。 位于这三层之上的是AI计算引擎层,AI计算引擎可以借助计算资源

odoo Windows10启动debug模式报错(Process finished with exit code -1073740940 (0xC0000374))

廉价感情. 提交于 2020-08-08 07:34:03
之前用win10系统,安装odoo总是启动debug模式启动不起来很恼火。 报错问题:Process finished with exit code -1073740940 (0xC0000374) 在启动debug的时候,直接弹出看着像内存报错的问题。一直没有找到解决办法。 今天偶尔发现了这个错误的解决办法 下面说说一些我从别人那边看到的解决办法,是否能够帮助大家解决问题。最后我说一下我的终极解决办法。 出现在这个错误:Process finished with exit code -1073740940 (0xC0000374) 场景 1.python3.7.1打开pycharm,运行odoo12源码,出现错误: 可能原因及解决方法: 由于系统更新,可能导致这个错误。------系统更新还原 由于安装模块 matplotlib画廊 ------通过>pip uninstall matplotlib卸载,则可以恢复正常 新安装的Windows 10 企业版系统。运行pycharm出现错误。---------通过安装python3.5.4可以解决了 以上方法是看到其他博友总结的解决办法。 下面我说下我无意中在找错误的时候发现了一个问题, 就是win10 系统有个地方需要设置一下,马上就可以用了。 我们打开控制面板 在右上角搜索区域 点击管理,到管理界面

如何让你在众多二手车中挑中满意的?python帮你实现(附源码)

橙三吉。 提交于 2020-08-08 04:01:12
前言 老司机带你去看车,网上的几千条的二手车数据,只需几十行代码,就可以统统获取,保存数据到我们本地电脑上 知识点: 1.python基础知识 2.函数 3.requests库 4.xpath适合零基础的同学 环境: windows + pycharm + python3 爬虫流程: 1.目标网址 2. 发送请求,获取响应 3. 解析网页 提取数据 4. 保存数据 加企鹅群695185429即可免费获取,资料全在群文件里。资料可以领取包括不限于Python实战演练、PDF电子文档、面试集锦、学习资料等 步骤: 1.导入工具 import io import sys import requests # pip install requests from lxml import etree # pip 2.获取汽车详情页面的url,解析网站 def get_detail_urls(url): # 目标网址 # url = 'https://www.guazi.com/cs/buy/o3/' # 发送请求,获取响应 resp = requests.get(url,headers= headers) text = resp.content.decode( ' utf-8 ' ) # 解析网页 html = etree.HTML(text) ul = html.xpath( ' //ul[

如何让你在众多二手车中挑中满意的?python帮你实现(附源码)

狂风中的少年 提交于 2020-08-08 03:44:12
前言 老司机带你去看车,网上的几千条的二手车数据,只需几十行代码,就可以统统获取,保存数据到我们本地电脑上 知识点: 1.python基础知识 2.函数 3.requests库 4.xpath适合零基础的同学 环境: windows + pycharm + python3 爬虫流程: 1.目标网址 2. 发送请求,获取响应 3. 解析网页 提取数据 4. 保存数据 加企鹅群695185429即可免费获取,资料全在群文件里。资料可以领取包括不限于Python实战演练、PDF电子文档、面试集锦、学习资料等 步骤: 1.导入工具 import io import sys import requests # pip install requests from lxml import etree # pip 2.获取汽车详情页面的url,解析网站 def get_detail_urls(url): # 目标网址 # url = 'https://www.guazi.com/cs/buy/o3/' # 发送请求,获取响应 resp = requests.get(url,headers= headers) text = resp.content.decode( ' utf-8 ' ) # 解析网页 html = etree.HTML(text) ul = html.xpath( ' //ul[

基础爬虫小案例:约会吧小姐姐照片,联系方式随手可得(附源码)

馋奶兔 提交于 2020-08-07 13:12:25
前言 百度贴吧是以兴趣主题聚合志同道合者的互动平台,同好网友聚集在这里交流话题、展示自我、结交朋友。贴吧中有的帖子当中有用户上传的图片,今天跟着老师把约会吧全吧的图片给爬取下来吧 预先清理磁盘哦~~ 本文亮点: 1、分析页面(静态or动态) 2、两层数据解析 3、海量图片数据保存 环境介绍: python 3.6 pycharm requests parsel(xpath) 爬虫的一般思路 1、确定爬取的url路径,headers参数 2、发送请求 -- requests 模拟浏览器发送请求,获取响应数据 3、解析数据 -- parsel 转化为Selector对象,Selector对象具有xpath的方法,能够对转化的数据进行处理 4、保存数据 开始我们的案例吧 步骤 1、导入工具 import requests import parsel 2、确定爬取的url路径,headers参数 base_url = ' https://tieba.baidu.com/f?ie=utf-8&kw=%E7%BE%8E%E5%A5%B3&fr=search ' headers = { ' User-Agent ' : ' Mozilla/5.0 (Windows NT 10.0; WOW64; Trident/7.0; rv:11.0) like Gecko ' } 3、发送请求 --

django.db.utils.InternalError 1054 Unknown column 不存在代码中

青春壹個敷衍的年華 提交于 2020-08-07 09:28:02
解决方法请直接看结尾!!! 我本来是觉得这个问题这么难解决,应该写个blog一遍解决一边记录下各种尝试过程,结果emmm。 我今天打算给一个点位(Point模型)添加照片(Photo模型,外键Point模型)的时候,输完p.photo_set.all()本来期待输出<QuerySet []>(毕竟照片还没有添加)遇到了一个特别奇怪的报错。 >>> from routes.models import Route, Point, Photo >>> p = Point.objects.get(id=3) >>> p <Point: No.3 point 3> >>> p.photo_set.all() django.db.utils.InternalError: (1054, "Unknown column 'routes_photo.photo_file' in 'field list'") routes_photo是应用名_模型名,这个报错的意思是photo_file字段在数据库中不存在。 但是,问题是,这个photo_file在我的代码里也不存在啊!!!不信你看嘛!!! pycharm中ctrl+shift+F全局搜索photo_有很多搜索结果(在模型Photo下定义了不少字段),但是没有定义photo_file。 不过这个photo_file的确曾经存在的,我把photo