pip

by 程序员野客 1 简介 newspaper 框架是一个主要用来提取新闻内容及分析的 Python 爬虫框架，更确切的说，newspaper 是一个 Python 库，但这个库由第三方开发。 newspaper 主要具有如下几个特点： 比较简洁 速度较快 支持多线程 支持多语言 GitHub 链接： https://github.com/codelucas/newspaper 安装方法： pip3 install newspaper3k 2 基本使用 2.1 查看支持语言 import newspaper print(newspaper.languages()) 2.2 获取新闻 我们以环球网为例，如下所示： import newspaper hq_paper = newspaper.build("https://tech.huanqiu.com/", language="zh", memoize_articles=False) 默认情况下，newspaper 缓存所有以前提取的文章，并删除它已经提取的任何文章，使用 memoize_articles 参数选择退出此功能。 2.3 获取文章 URL >>> import newspaper >>> hq_paper = newspaper.build("https://tech.huanqiu.com/", language=

pyload是一款基于 Python 编写的开源 下载管理器 ，自带Web管理面板。遵守AGPL开源协议。易于扩展，不仅支持直接下载直链，而且也可以从网站中解析出文件/视频进行下载，如115网盘，youtube等。 Linux安装方法： Pip安装 pip install pyload-ng 或Wget wget https//github.com/pyload/pyload/archive/stable.zip 命令行运行: pyload web面板访问地址：你的IP:8000 默认用户名和密码是：pyload GitHub 仓库挂件 WordPress 插件 pyload / pyload The free and open-source Download Manager written in pure Python https://pyload.net 1,920 613 Download ZIP 相关文件下载地址 本地直接下载 来源： oschina 链接： https://my.oschina.net/u/4415966/blog/4475858

实验环境 1.安装Python 3.7 2.安装requests, bs4，pymysql 模块 实验步骤 1.安装环境及模块 可参考博客https://blog.51cto.com/13760351/2500048 2.编写代码 # 51cto 博客页面数据插入mysql数据库 # 导入模块 import re import bs4 import pymysql import requests # 连接数据库账号密码 db = pymysql.connect(host='172.171.13.229', user='root', passwd='abc123', db='test', port=3306, charset='utf8') # 获取游标 cursor = db.cursor() def open_url(url): # 连接模拟网页访问 headers = { 'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) ' 'Chrome/57.0.2987.98 Safari/537.36'} res = requests.get(url, headers=headers) return res # 爬取网页内容 def find_text

tf1.13.1 及 tf2.0.0 相关依赖及版本 　　 　　 硬件说明：显卡NVIDIA-GEFORCE-GTX-1060 1.驱动版本检查，并且更新显卡驱动【这一步很重要，你的驱动版本低了，cuda及cudnn就可能出错】 错误：DLL load failed: 找不到指定的模块。 cmd中输入：nvidia-smi 　　　　 显卡驱动已经是最新的了。如果不是最新的显卡驱动，需要手动更新一下。 补充：驱动version对应 cuda 和 cudnn的版本 　　　　 我们安装的cuda 是10.0.130 所以：win10对应的nvidia的驱动版本要大于411.31。【我更新后的显卡驱动为：436.48满足条件】 　　　　 假如你的驱动版本低于411.31，就需要更新驱动 驱动下载地址：https://www.nvidia.com/Download/index.aspx?lang=en-us 选择下载版本：根据自己电脑的显卡型号进行选择（百度相关机型，就能有详细信息；也可以在硬件里查看；） 第一次下载的标准版本，提示我的电脑windows Drivers Type 为DCH 而不是标准版本，所以重新下载安装成功。 　　　　 下载的驱动：436.48-desktop-win10-64bit-international-dch-whql.exe 按提示（prompts）安装即可。

升级pip，遇到报错如下： PS C:\temp> python -m pip install --upgrade pip WARNING: Retrying (Retry(total=4, connect=None, read=None, redirect=None, status=None)) after connection broken by 'SSLError(SSLCertVerificationError(1, '[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: self signed certificate in certificate chain (_ssl.c:1108)'))': /simple/pip/ WARNING: Retrying (Retry(total=3, connect=None, read=None, redirect=None, status=None)) after connection broken by 'SSLError(SSLCertVerificationError(1, '[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: self signed certificate in

问题： Here is the problem 这是问题所在 I have a requirements.txt that looks like: 我有一个require.txt看起来像： BeautifulSoup==3.2.0 Django==1.3 Fabric==1.2.0 Jinja2==2.5.5 PyYAML==3.09 Pygments==1.4 SQLAlchemy==0.7.1 South==0.7.3 amqplib==0.6.1 anyjson==0.3 ... I have a local archive directory containing all the packages + others. 我有一个本地存档目录，其中包含所有软件包和其他软件包。 I have created a new virtualenv with 我创建了一个新的virtualenv bin/virtualenv testing upon activating it, I tried to install the packages according to requirements.txt from the local archive directory. 激活它后，我尝试根据本地存档目录中的requirements.txt安装软件包。 source bin/activate

什么是tox tox官方文档的第一句话 standardize testing in Python，意思就是说标准化python中的测试，那是不是很适合测试人员来使用呢，我们来看看他究竟是什么？ 根据官方文档的解释，tox是一个管理测试虚拟环境的命令行工具，可以支持穿件隔离的python环境，在里面可以安装不同版本的python解释器和项目的各种依赖库，可以进行自动化测试、打包以及持续集成。 tox能做什么 创建测试虚拟环境 运行静态代码分析与测试工具 自动化构建包 针对 tox 构建的软件包运行测试 检查软件包是否能在不同的 Python 版本/解释器中顺利安装 统一持续集成（CI）和基于命令行的测试 怎么配置tox 安装tox 使用 pip install tox 安装，在命令行执行tox -e envname运行指定的测试环境 tox配置 tox的行为既可以通过命令行来控制也可以通过配置文件进行控制，支持有以下三种形式的配置文件 pyproject.toml tox.ini setup.cfg 什么是tox tox官方文档的第一句话 standardize testing in Python，意思就是说标准化python中的测试，那是不是很适合测试人员来使用呢，我们来看看他究竟是什么？ 根据官方文档的解释，tox是一个管理测试虚拟环境的命令行工具

PDF（Portable Document Format），中文名称便携文档格式是我们经常会接触到的一种文件格式，文献、文档...很多都是PDF格式。它以格式稳定的优势，使得我们在打印、分享、传输过程中能够最优的保持原有色彩和格式。 PDF是以PostScript语言图像模型为基础的一种文档格式，它在格式的稳定性方面虽然具有很大优势。但是，在可编辑性方面却为使用者引入了另外一个困扰。 例如，在文档的分割、合并、剪切、转换、编辑等方面PDF就有些捉襟见肘了。 Adobe Reader、福昕阅读器、熊猫PDF...经常用到的PDF工具只能用于文档阅读，但是免费版都不可以用于文档编辑。虽然，网页版PDF工具，例如SmallPDF、I love PDF可以用于PDF的编辑，但是对于文档大小也有限制。 曾经，为了替换PDF中的一页，我几乎试遍了所有市面上主流的PDF工具，最终还是不得不选择使用付费工具来解决问题。 事后想了想，既然这些商业化软件不靠谱，为什么不考虑自己动手开发一款工具呢？明明几十行代码能够解决的问题，为什么要费那么多劲去下载、安装那些没有节操的软件呢？ 本文就来介绍一下利用Python轻松开发一款PDF编辑工具，可以用于PDF转TxT、分割、合并、剪切、转换。 PyPDF2 PyPDF2是一个第三方的python PDF库，它能够对PDF文件进行分割、合并、裁剪和转换页面。