url

使用了很久框架，突然不知道，原生访问网络请求方式，回过头去看，还好，对现在流行使用okhttp也有了更深体会。 HttpURLConnection介绍： HttpURLConnection是一种多用途、轻量极的HTTP客户端，使用它来进行HTTP操作可以适用于大多数的应用程序。对于之前为何一直使用HttpClient而不使用HttpURLConnection也是有原因的。具体分析如下 HttpClient是apache的开源框架，封装了访问http的请求头，参数，内容体，响应等等，使用起来比较方便，而HttpURLConnection是java的标准类，什么都没封装，用起来太原始，不方便，比如重访问的自定义，以及一些高级功能等。 从稳定性方面来说的话，HttpClient很稳定，功能强，BUG少，容易控制细节，而之前的HttpURLConnection一直存在着版本兼容的问题，不过在后续的版本中已经相继修复掉了。 从上面可以看出之前一直使用HttClient是由于HttpURLConnection不稳定导致，那么现在谷歌虽然修复了HttpURLConnection之前存在的一些问题之后，相比HttpClient有什么优势呢？为何要废除HttpClient呢？ HttpUrlConnection是Android SDK的标准实现，而HttpClient是apache的开源实现；

ItemLoader的简单使用：目的是解决在爬虫文件中代码结构杂乱，无序，可读性差的缺点 经过之前的基础，我们可以爬取一些不用登录，没有Ajax的，等等其他的简单的爬虫 回顾我们的代码，是不是有点冗长，将所需字段通过xpath或者css解析出来，再自定义语句(还不是函数中) 进行清洗;然后再装入Item中，有没有这样一种方法：从Item中可以直接清洗岂不是很简单 今天就学习 ItemLoader这样一种对戏，简单代码，可读增强 思路： 1,创建一个ItemLoad对象 2,通过该对象的add_css或者add_xpath或者add_value方法将解析语句装入ItemLoader 3,在Item.py中在Filder()中调用函数，用来清洗，处理数据 4,artical_item = item_loader.load_item() 调用这个对象的此方法，写入到Item中 具体代码： 在爬虫文件中： 1 #先引入 2 from ArticalSpider.items import JobboleArticalItem,ArticalItemLoader 3 #使用Itemloader来简化这个解析，装入Item这个过程，使得代码量减少 4 #先创建一个itemLoader()这样一个对象,不需解析list第一个等问题 5

一、easyexcel介绍 Java解析、生成Excel比较有名的框架有Apache poi、jxl。但他们都存在一个严重的问题就是非常的耗内存，poi有一套SAX模式的API可以一定程度的解决一些内存溢出的问题，但POI还是有一些缺陷，比如07版Excel解压缩以及解压后存储都是在内存中完成的，内存消耗依然很大。easyexcel重写了poi对07版Excel的解析，能够原本一个3M的excel用POI sax依然需要100M左右内存降低到几M，并且再大的excel不会出现内存溢出，03版依赖POI的sax模式。在上层做了模型转换的封装，让使用者更加简单方便。 easyexcel github地址 二、easyexcel使用 1、excel导出 通过注解设置字段属性 @Data public class Person { @ExcelProperty(value = {"人员信息", "姓名"}, index = 0, converter = AutoConverter.class) private String name; @ExcelProperty(value = {"人员信息","年龄"}, index = 1) private int age; @ExcelProperty(value = {"人员信息","性别"}, index = 2) private int

有兴趣关注一下我的个人公众号，专注dotNet开发，谢谢 这个问题几乎面试的时候都会问到，是一个老生常谈的话题，然而随着不断的学习，对于以前的认识有很多误区，所以还是需要不断地总结的，学而时习之，不亦说乎。 什么是http？ get、post常见的区别 get和post不同点的误区 附录常见的http状态码 1.什么是http 这里只是简单概述一下，更多详情可以参见： 基于tcp/ip、一种网络应用层协议、超文本传输协议HyperText Transfer Protocol 工作方式：客户端请求服务端应答的模式 快速：无状态连接，灵活：可以传输任意对象，对象类型由Content-Type标记 客户端请求request消息包括以下格式：请求行（request line）、请求头部（header）、空行、请求数据，如下图 服务端响应response也由四个部分组成，分别是：状态行、消息报头、空行、响应正文 请求方法，http请求可以使用多种请求方法。 HTTP1.0定义了三种请求方法： GET, POST 和 HEAD方法。 HTTP1.1新增了五种请求方法：OPTIONS, PUT, DELETE, TRACE 和 CONNECT 方法。 序号 方法 描述 1 GET 请求指定的页面信息，并返回实体主体。 2 HEAD 类似于get请求，只不过返回的响应中没有具体的内容，用于获取报头