response

同源策略 同源策略（Same origin policy）是一种约定，它是浏览器最核心也最基本的安全功能，如果缺少了同源策略，则浏览器的正常功能可能都会受到影响。可以说Web是构建在同源策略基础之上的，浏览器只是针对同源策略的一种实现 请求的url地址,必须与浏览器上的url地址处于同域上,也就是域名,端口,协议相同. 比如:我在本地上的域名是127.0.0.1:8000,请求另外一个域名：127.0.0.1:8001一段数据 浏览器上就会报错，个就是同源策略的保护,如果浏览器对javascript没有同源策略的保护,那么一些重要的机密网站将会很危险 已拦截跨源请求：同源策略禁止读取位于 http://127.0.0.1:8001/SendAjax/ 的远程资源。（原因：CORS 头缺少 'Access-Control-Allow-Origin'）。 但是注意，项目2中的访问已经发生了，说明是浏览器对非同源请求返回的结果做了拦截 CORS（跨域资源共享）简介 CORS需要浏览器和服务器同时支持。目前，所有浏览器都支持该功能，IE浏览器不能低于IE10。 整个CORS通信过程，都是浏览器自动完成，不需要用户参与。对于开发者来说，CORS通信与同源的AJAX通信没有差别，代码完全一样。浏览器一旦发现AJAX请求跨源，就会自动添加一些附加的头信息，有时还会多出一次附加的请求

一 同源策略 同源策略（Same origin policy）是一种约定，它是浏览器最核心也最基本的安全功能，如果缺少了同源策略，则浏览器的正常功能可能都会受到影响。可以说Web是构建在同源策略基础之上的，浏览器只是针对同源策略的一种实现 请求的url地址,必须与浏览器上的url地址处于同域上,也就是域名,端口,协议相同. 比如:我在本地上的域名是127.0.0.1:8000,请求另外一个域名：127.0.0.1:8001一段数据 浏览器上就会报错，个就是同源策略的保护,如果浏览器对javascript没有同源策略的保护,那么一些重要的机密网站将会很危险 已拦截跨源请求：同源策略禁止读取位于 http://127.0.0.1:8001/SendAjax/ 的远程资源。（原因：CORS 头缺少 'Access-Control-Allow-Origin'）。 但是注意，项目2中的访问已经发生了，说明是浏览器对非同源请求返回的结果做了拦截 二 CORS（跨域资源共享）简介 CORS需要浏览器和服务器同时支持。目前，所有浏览器都支持该功能，IE浏览器不能低于IE10。 整个CORS通信过程，都是浏览器自动完成，不需要用户参与。对于开发者来说，CORS通信与同源的AJAX通信没有差别，代码完全一样。浏览器一旦发现AJAX请求跨源，就会自动添加一些附加的头信息，有时还会多出一次附加的请求

一 同源策略 同源策略（Same origin policy）是一种约定，它是浏览器最核心也最基本的安全功能，如果缺少了同源策略，则浏览器的正常功能可能都会受到影响。可以说Web是构建在同源策略基础之上的，浏览器只是针对同源策略的一种实现 请求的url地址,必须与浏览器上的url地址处于同域上,也就是域名,端口,协议相同. 比如:我在本地上的域名是127.0.0.1:8000,请求另外一个域名：127.0.0.1:8001一段数据 浏览器上就会报错，个就是同源策略的保护,如果浏览器对javascript没有同源策略的保护,那么一些重要的机密网站将会很危险 已拦截跨源请求：同源策略禁止读取位于 http://127.0.0.1:8001/SendAjax/ 的远程资源。（原因：CORS 头缺少 'Access-Control-Allow-Origin'）。 但是注意，项目2中的访问已经发生了，说明是浏览器对非同源请求返回的结果做了拦截 二 CORS（跨域资源共享）简介 CORS需要浏览器和服务器同时支持。目前，所有浏览器都支持该功能，IE浏览器不能低于IE10。 整个CORS通信过程，都是浏览器自动完成，不需要用户参与。对于开发者来说，CORS通信与同源的AJAX通信没有差别，代码完全一样。浏览器一旦发现AJAX请求跨源，就会自动添加一些附加的头信息，有时还会多出一次附加的请求

import requests from lxml import etree url = 'http://www.xicidaili.com/' headers = { 'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Safari/537.36' } response = requests.get(url, headers=headers) # with open('xicidaili.html', 'wb') as f: # f.write(response.content) html_ele = etree.HTML(response.text) tr_list = html_ele.xpath('//table[@id="ip_list"]/tr') # print(tr_list) country_td = [] for tr_ele in tr_list: # print(tr_ele) country_list = tr_ele.xpath('./td[2]/text()') country_list1 = tr_ele.xpath('./td[3]/text()') # country

HttpServletResponse概述 我们在创建 Servlet时会覆盖service()方法，或doGet()/doPost(),这些方法都有两个参数，一个为代表请求的request和代表响应response。 service方法中的response的类型是ServletResponse，而doGet/doPost方法的response的类型是HttpServletResponse，HttpServletResponse是ServletResponse的子接口，功能和方法更加强大，今天我们学习HttpServletResponse。 response的运行流程 1． 通过抓包工具抓取 Http响应 通过抓包工具抓取 Http响应 因为 response代表响应，所以我们可以通过该对象分别设置Http响应的响应行，响 应头和响应体 通过 response设置响应行 其中比较关键的是SetHeader方法，但是如果你设置的头是Date类型的话就用SetDateHeader方法，如果是个int类型的话就用SetIntHeader方法 但是一般来说是string类型 重定向 就是服务器段想Servlet01要资源 Servlet01没有但是Servlet02有然后跳转到Servlet02，然后f12 网络里显示302+Location：/Servlet02

爬虫信息相关 这里我们通过请求网页例子来一步步理解爬虫性能 当我们有一个列表存放了一些url需要我们获取相关数据，我们首先想到的是循环 简单的循环串行 这一种方法相对来说是最慢的，因为一个一个循环，耗时是最长的，是所有的时间总和 代码如下： import requests url_list = [ 'http://www.baidu.com', 'http://www.pythonsite.com', 'http://www.cnblogs.com/' ] for url in url_list: result = requests.get(url) print(result.text) 通过线程池 通过线程池的方式访问，这样整体的耗时是所有连接里耗时最久的那个，相对循环来说快了很多 import requests from concurrent.futures import ThreadPoolExecutor def fetch_request(url): result = requests.get(url) print(result.text) url_list = [ 'http://www.baidu.com', 'http://www.bing.com', 'http://www.cnblogs.com/' ] pool = ThreadPoolExecutor(10)

课时1 过滤器的入门 JavaWeb三大组件 1、都需要在web.xml中进行配置 Servlet Filter Listener 2、过滤器 会在一组资源（jsp, servlet, css, html等等）的前面执行 可以让请求得到目标资源，也可以不让请求达到 过滤器有拦截请求的能力 3、编写过滤器 （1）实现Filter接口 （2）在web.xml中进行配置 （3）Filter是单例的 4、配置web.xml < web-app > < filter > < filter-name > FilerName </ filter-name > < filter-class > FilerClass </ filter-class > </ filter > < filter-mapping > < filter-name > FilerName </ filter-name > < url-pattern > /* </ url-pattern > </ filter-mapping > </ web-app > 继承示例 package com . pengshiyu . filtrer ; import javax . servlet . * ; import java . io . IOException ; public class Afilter implements

url必须返回一个json文本,由于网上没有找到返回json的url,我用Tomcat写了一个json文件, 在这个文件夹下见一个以json后缀的json文件,内容是json文本,然后输入浏览器输入http://192.148.83.135:9999/hello/myfile.json就会出现你写的文本 public class MainActivity extends AppCompatActivity { private RequestQueue queues ; @Override protected void onCreate(Bundle savedInstanceState) { super.onCreate(savedInstanceState); setContentView(R.layout.activity_main); queues = Volley.newRequestQueue(this); JsonObjectRequest jsonObjectRequest = new JsonObjectRequest("http://192.148.83.135:9999/hello/myfile.json", null, new Response.Listener<JSONObject>() { @Override public void onResponse

1.CrawlSpider介绍 Scrapy框架中分两类爬虫，Spider类和CrawlSpider类。 此案例采用的是CrawlSpider类实现爬虫。 它是Spider的派生类，Spider类的设计原则是只爬取start_url列表中的网页，而CrawlSpider类定义了一些规则(rule)来提供跟进link的方便的机制，从爬取的网页中获取link并继续爬取的工作更适合。 创建项目指令： scrapy startproject baidu 模版创建： scrapy genspider -t crawl baidu 'tieba.baidu.com' CrawlSpider继承于Spider类，除了继承过来的属性外（name、allow_domains），还提供了新的属性和方法: LinkExtractors class scrapy.linkextractors.LinkExtractor Link Extractors 的目的很简单: 提取链接｡ 每个LinkExtractor有唯一的公共方法是 extract_links()，它接收一个 Response 对象，并返回一个 scrapy.link.Link 对象。 Link Extractors要实例化一次，并且 extract_links 方法会根据不同的 response 调用多次提取链接｡ 主要参数： allow