代理模式

POST 多个分块编码的文件 你可以在一个请求中发送多个文件。例如，假设你要上传多个图像文件到一个 HTML 表单，使用一个多文件 field 叫做 “images”: 要实现，只要把文件设到一个元组的列表中，其中元组结构为 (form_field_name, file_info): url = ‘ http://httpbin.org/post ’ multiple_files = [ (‘images’, (‘foo.png’, open(‘foo.png’, ‘rb’), ‘image/png’)), (‘images’, (‘bar.png’, open(‘bar.png’, ‘rb’), ‘image/png’))] r = requests.post(url, files=multiple_files) r.text { … ‘files’: {‘images’: ‘data:image/png;base64,iVBORw …’} ‘Content-Type’: ‘multipart/form-data; boundary=3131623adb2043caaeb5538cc7aa0b3a’, … } 我们强烈建议你用二进制模式（binary mode）打开文件。这是因为 requests 可能会为你提供 header 中的 Content-Length

市面上现在有很多代理IP的产品，可以解决很多由于IP限制问题的工作。代理IP软件就是通过更换各地IP的方法，来隐藏真实IP，保证工作的正常进行，及用户的个人信息安全。 HTTP代理IP的两种代理模式 一种是动态代理模式，也是爬虫模式，当每次请求网页的时候，都会自动更换一个IP，这种模式适合数据资料采集。 另一种是经典代理模式，可以自主切换IP，每间隔一段时间，就会自动将IP变更，用户也可以通过命令请求自己切换IP。 以上是HTTP代理IP的两种模式，用户可以根据自己实际用途，来选择不同模式的代理。闪云代理以上两种模式都有，可以随意切换IP，稳定在线，操作简单，是不错的选择。

一、 Spring 中常见的设计模式 工厂模式 ： BeanFactory 装饰器模式： BeanWrapper 代理模式： AopProxy 单例模式： ApplicationContext 委派模式： DispatcherServlet 策略模式: HandlerMapping 适配器模式： HandlerApdapter 模板方法模式： JdbcTemplate 观察者模式： ContextLoaderListener 二、Spring 的四大模块及典型的 设计模式 　　4、Spring JDBC 模板方法模式

1. 代理模式（Proxy） 一种设计模式，提供了对对象的另一种访问方式，即通过代理对象访问目标对象。好处是：可以在目标对象实现的基础上，增强额外的功能操作，即扩展目标对象的功能。（不修改目标对象） 代理对象是对目标对象的扩展，并会调用目标对象。 1.1 静态代理 静态代理在使用时，需要定义接口或者父类，被代理的对象与代理对象一起实现相同的接口，或者继承相同的父类。 public interface IUserDao { void save(); } public class UserDaoImpl implements IUserDao { @Override public void save() { System.out.println("--------- save data ---------"); } } public class UserDaoProxy implements IUserDao { private IUserDao target; public UserDaoProxy (IUserDao target) { this.target = target; } @Override public void save() { System.out.println("--------- begin ---------"); target.save();

为了避免跨域问题，React的Package.json有个Api代理设置 "proxy": "http://localhost:36000/" 但这个命令只在本地运行npm start时有效，用npm run build打包发布到IIS上就无效，为什么会这样呢，我们分别看下两个命令的脚本 在start.js内有这样一段读取代理设置 // Load proxy config const proxySetting = require(paths.appPackageJson).proxy; const proxyConfig = prepareProxy(proxySetting, paths.appPublic); 但build.js内却没有任何地方读取代理设置 其实Package.json的Proxy只针对npm start使用的node服务器生效，所以发布到IIS需要在IIS上配置URL Rewrite。 IIS配置URL Rewrite步骤（在IIS配置URL Rewrite需要URL重写工具，若无则需要安装） 1.点击需要配置的网站，双击URL重写打开URL重写功能 2.点击右侧操作栏中“添加规则”，选择“入站规则”中的“空白规则”并确定 3.设置名称，匹配Url的规则和模式，以及需要的操作（如重写）。 4.设置完毕点击右侧操作栏中“应用”即可。 来源： https:/

本次分享从抓取、解析、存储、反爬、加速五个方面介绍了利用 Python 进行网络爬虫开发的相关知识点和技巧，介绍了不同场景下如何采取不同措施高效地进行数据抓取的方法，包括 Web 抓取、App 抓取、数据存储、代理选购、验证码破解、分布式抓取及管理、智能解析等多方面的内容，另外还结合了不同场景介绍了常用的一些工具包，全部内容是我在从事网络爬虫研究过程以来的经验精华总结。 爬取 对于爬取来说，我们需要学会使用不同的方法来应对不同情景下的数据抓取任务。 爬取的目标绝大多数情况下要么是网页，要么是 App，所以这里就分为这两个大类别来进行了介绍。 对于网页来说，我又将其划分为了两种类别，即服务端渲染和客户端渲染，对于 App 来说，我又针对接口的形式进行了四种类别的划分――普通接口、加密参数接口、加密内容接口、非常规协议接口。 所以整个大纲是这样子的： 网页爬取 服务端渲染 客户端渲染 App 爬取 普通接口 加密参数接口 加密内容接口 非常规协议接口 爬取 / 网页爬取 服务端渲染的意思就是页面的结果是由服务器渲染后返回的，有效信息包含在请求的 HTML 页面里面，比如猫眼电影这个站点。客户端渲染的意思就是页面的主要内容由 JavaScript 渲染而成，真实的数据是通过 Ajax 接口等形式获取的，比如淘宝、微博手机版等等站点。 服务端渲染的情况就比较简单了，用一些基本的 HTTP

结构模式最后一个，接着进入行为模式。 <?php /* The proxy design pattern functions as an interface to an original object behind the scenes. It can act as a simple forwarding wrapper or even provide additional functionality around the object it wraps. Examples of extra added functionality might be lazy loading or caching that might compensate for resource intense operations of an original object. */ interface ImageInterface { public function draw(); } class Image implements ImageInterface { private $file; public function __construct($file) { $this->file = $file; sleep(2); } public function draw() { echo 'image: '

代理一词往往并不陌生, 该服务我们常常用到如(代理理财、代理租房、代理收货等等)，如下图所示 在没有代理模式的情况下，客户端和Nginx服务端，都是客户端直接请求服务端，服务端直接响应客户端。 那么在互联网请求里面,客户端往往无法直接向服务端发起请求,那么就需要用到代理服务,来实现客户端和服务通信，如下图所示 Nginx作为代理服务,按照应用场景模式进行总结，代理分为正向代理、反向代理 正向代理，(内部上网)客户端<―>代理->服务端 反向代理，用于公司集群架构中，客户端->代理<―>服务端 1.区别在于形式上服务的”对象”不一样 2.正向代理代理的对象是客户端，为客户端服务 3.反向代理代理的对象是服务端，为服务端服务 Nginx作为代理服务，可支持的代理协议非常的多，具体如下图 如果将Nginx作为反向代理服务，常常会用到如下几种代理协议，如下图所示 反向代理模式与Nginx代理模块总结如表格所示 反向代理模式 Nginx配置模块 http、websocket、https ngx_http_proxy_module fastcgi ngx_http_fastcgi_module uwsgi ngx_http_uwsgi_module grpc ngx_http_v2_module Syntax: proxy_pass URL; Default: ― Context:

更多Java 面试笔试系列文章： 1.Java的HashMap是如何工作的？ HashMap是一个针对数据结构的键值，每个键都会有相应的值，关键是识别这样的值。 HashMap 基于 hashing 原理，我们通过 put ()和 get ()方法储存和获取对象。当我们将键值对传递给 put ()方法时，它调用键对象的 hashCode ()方法来计算 hashcode，让后找到 bucket 位置来储存值对象。当获取对象时，通过键对象的 equals ()方法找到正确的键值对，然后返回值对象。HashMap 使用 LinkedList 来解决碰撞问题，当发生碰撞了，对象将会储存在 LinkedList 的下一个节点中。 HashMap 在每个 LinkedList 节点中储存键值对对象。 参考： 浅谈Java中的hashcode方法 集合系列―HashMap源码分析 2.什么是快速失败的故障安全迭代器？ 快速失败的Java迭代器可能会引发ConcurrentModifcationException在底层集合迭代过程中被修改。故障安全作为发生在实例中的一个副本迭代是不会抛出任何异常的。快速失败的故障安全范例定义了当遭遇故障时系统是如何反应的。例如，用于失败的快速迭代器ArrayList和用于故障安全的迭代器ConcurrentHashMap。 3.Java

切面：使用切点表达式表示，指定了当前切面逻辑所要包裹的业务模块的范围大小； Advice：也即切面逻辑，指定了当前用于包裹切面指定的业务模块的逻辑。 @Before：该注解标注的方法在业务模块代码执行之前执行，其不能阻止业务模块的执行，除非抛出异常； @AfterReturning：该注解标注的方法在业务模块代码执行之后执行； @AfterThrowing：该注解标注的方法在业务模块抛出指定异常后执行； @After：该注解标注的方法在所有的Advice执行完成后执行，无论业务模块是否抛出异常，类似于finally的作用； @Around：该注解功能最为强大，其所标注的方法用于编写包裹业务模块执行的代码，其可以传入一个ProceedingJoinPoint用于调用业务模块的代码，无论是调用前逻辑还是调用后逻辑，都可以在该方法中编写，甚至其可以根据一定的条件而阻断业务模块的调用； @DeclareParents：其是一种Introduction类型的模型，在属性声明上使用，主要用于为指定的业务模块添加新的接口和相应的实现。 @Aspect：严格来说，其不属于一种Advice，该注解主要用在类声明上，指明当前类是一个组织了切面逻辑的类，并且该注解中可以指定当前类是何种实例化方式，主要有三种：singleton、perthis和pertarget，具体的使用方式后面会进行讲解。