大数据

你是否患有颈椎病，腰椎间盘突出症，骨质增生，腰肌劳损，关节炎，肩周炎……一种或者好几种……？ 当你每一天被这些病痛折磨……腰酸背痛，行动不便，疼痛难忍……彻夜难眠之时……你是否迫切需要一种方法摆脱这些烦人的折磨？ 今天我要给你介绍一种方法……它可以…… 三十分钟内缓解你的疼痛 我说的千真万确，你只要试试就知道……这个方法其实也很普通，那就是：使用真正有效的膏药。 膏药可能是对付颈椎病，腰椎间盘突出症，骨质增生，腰肌劳损，关节炎，肩周炎最简单也是比较有效的方法……只是存在两个问题： 其中一个问题是：大部分人总是渴望有另外一种更先进，更彻底的方法，以腰椎间盘突出为例，他们可能会选择费用高昂的理疗，却忽视了只需要一帖膏药就可以缓解疼痛。 另外一个问题是：传统的膏药……我说的是那种真正有效的，采用古法炼制出来的膏药……因为各种原因，逐渐失传了。 今天，你在药店，医院，中医馆都很难买到传统的膏药，那些膏药不过是具有发热或者发冷方面的作用，类似一种热敷贴或者冷敷贴……里面甚至连真正的中药材都没有。 现在，如果你认同传统的膏药可以缓解这些病痛，你要去哪里买到真正的膏药呢？ 事实上，这种传统的，手工的膏药只流传于民间一些传承人手里，这类人比例很小，一个省市可能就几个……只有从他们手里购买，你才能得到真的…… 我叫陆佰久，这是我的真名，我是无敌治骨疗法——无敌膏药的第八代传人

有人说，程序员的门槛正在逐渐消失，因为计算机相关专业毕业生一年比一年多； 培训出来的学生一年比一年多；网络上各种编程课程，也正在帮助无数人零基础转型软件开发…… 而程序员的工资，动辄两三万，三五万，远高于其他行业大部分技术岗位，似乎充满了泡沫。 未来程序员越来越多，供过于求，肯定会是白菜价，并说这是普遍的经济规律。 当我们讨论供需关系时，往往都需要一个基础条件：产品业务必须是标准的。我们这代人生活在『工业时代』往『信息智能时代』的转变阶段。所以我们常常用工业时代的经验来推测假定信息智能时代的趋势，这种推测本身就是落伍的。 下面，就从多个角度来看看，程序员的收入在未来十年后，可能会怎么样。 1、行业趋势 一到两年内，你工作有没有晋升、薪水能不能增加，个人努力起很大作用。而五年、八年、十年或者更久，趋势的作用会远远大于个人努力，甚至会将个人的努力淹没。 当你进入正确的河道，哪怕你毫不用力，湍急的水流也会推着你飞速前进。 这就是趋势的力量。 那么，现在的趋势是什么？哪些行业才是正确的河道？ 先看一张图： 上图，是美国 200 年来行业增速变迁图，描述了从1820年的蒸汽轮船到1995年的互联网在内的，几大行业的变化趋势。国内的行业发展趋势与美国类似，但稍稍滞后几年。每一个行业的增速，均经历了增长、见顶、缓慢下降的阶段。 中国互联网的加速发展，大概从1997年开始，最早是PC互联网

城市大数据是指在城市运行过程中产生或获取的数据，是其与信息收集、处理、利用和通信能力相关的活动要素组成的有机系统，是国民经济和社会发展的重要战略资源，简单易懂的公式可以表述为：城市大数据=城市数据+大数据技术+城市职能。 大数据如何应用在智慧城市中 城市大数据的数据资源来源丰富多样，广泛存在于经济、社会各个领域和部门，是政务、行业、企业等各类数据的总和。同时，城市大数据的异构特征显着，数据类型丰富、数量大、速度增长快、处理速度和实时性要求高，且具有跨部门、跨行业流动的特征。 按照数据源和数据权属不同，城市大数据可以分为政务大数据、产业大数据和社会公益大数据。政务大数据指的是政务部门在履行职责过程中制作或获取的，以一定形式记录、保存的文件、资料、图表和数据等各类信息资源。产业大数据指的是在经济发展中产生的相关数据，包括工业数据、服务业数据等。 此外，还有一些社会公益大数据。当前，城市大数据多数为政务大数据和产业大数据，所以城市大数据的主要推动者应为一个城市的政府和相关的具有一定数据规模的企业。 为保障城市运转的安全高效，智慧城市建设需要对海量的数据资源进行收集、整合、存储与分析，并使用智能感知、分布式存储、数据挖掘、实时动态可视化等大数据技术实现资源的合理配置。因此，城市大数据是实现城市智慧化的关键支撑，是推动“政通、惠民、兴业”的重要引擎。 新型智慧城市发展面临挑战

摘要： 通过这个系列，让大家对中台的价值、针对的问题痛点、中台规划的方法思路和技巧、一些中台业务实践有个基本的认识，让客户清楚的意识到企业中台的业务价值，进而通过企业中台规划牵引客户IT基础设施投资。 今年“中台”一词异常火爆，百度搜索指数已经远超“数字化转型”。中台的产生并非完全自上而下的战略设计，也并非是为了追风，而是随着企业业务的高速发展、组织架构不断膨胀的过程中暴露出的各种问题急需解决。此时，中台的概念恰有其声，大家在经过不断实践论证后欣然接受了中台。 企业中台作为现在的市场热点，几乎每一个客户都会在建设的过程中遇到一系列的问题。借此，希望通过这个系列，让大家对中台的价值、针对的业务问题痛点、中台规划设计的方法思路和技巧、一些中台业务模式实践有个基本的认识，让客户清楚的意识到企业中台的业务价值，尤其是通过中台帮助传统行业的各家企业构建差异化业务服务竞争优势，提升客户满意度，进而创造更多的经济效益，基于企业中台的实际业务价值有效引导IT投资。 点击标题，可查看往期1-17篇文章 （一）：前中后台基本定义 前台 ：由各类前台系统组成的前端平台。每个前台系统就是一个用户触点，即企业的最终用户直接使用或交互的系统，是企业与最终用户的交点。例如用户直接使用的网站，手机App，微信公众号等都属于前台范畴。 后台 ：由后台系统组成的后端平台。每个后台系统一般管理了企业的一类核心资源（数据

活动内容 每期99元大红包诚挚邀请小伙伴们监督或者加入我们的每周运动自律计划。作为监督回报，如果我第一周计划失败，参与活动的小伙伴私聊我发￥6.6红包。如果上一次失败小伙伴拿到我的红包，并且第二次我又失败私聊我发￥13.2的红包，依次递推，四期最高就是6.6X(1+2+4+8)=99元大红包 活动规则 以周为单位，每周至少跑步三次，每次不低于5公里 ； 本次活动为期四周； 每周会更新一篇日志，通过运动截图记录每次运动记录 活动报名 每周会更新一篇文章，凡是在当前文章右下方点亮“在看”的小伙伴都可以参加。也欢迎小伙伴们扩散出去邀请身边的朋友来薅我羊毛。也欢迎小伙伴们关注我的微信公众号：数据拾光者。 第五期第四周：20200908-0914 状态：圆满完成。 第五期第三周：20200901-0907 状态：圆满完成。 第五期第二周：20200825-0831 状态：圆满完成。 第五期第一周：20200818-0824 状态：圆满完成。 ************************************************************************** 第四期第四周：20200811-0817 状态：圆满完成。因为这周一直下雨，所以就在公司健身房跑步。 第四期第三周：20200803-0810 状态：圆满完成。参加了公司的21天卡路里大作战活动

MQ理论介绍 一、为什么需要消息队列(MQ) 主要原因是由于在高并发环境下，同步请求来不及处理，请求往往会发生阻塞。大量的请求到达访问数据库，导致行锁表锁，最后请求线程会堆积过多，从而触发 too many connection错误，引发雪崩效应。我们使用消息队列，通过异步处理请求，从而缓解系统的压力。核心：异步处理、流量削峰、应用解耦 二、应用场景 异步处理，流量削峰，应用解耦，消息通讯四个场景 2.1、异步处理 场景1：用户注册后，需要发送注册邮件和注册短信。 串行方式：将注册信息写入 数据库 成功后，发送注册邮件，再发送注册短信。以上三个任务全部完成后，返回给客户端 并行方式：将注册信息写入数据库成功后，发送注册邮件的同时，发送注册短信。以上三个任务完成后，返回给客户端。与串行的差别是，并行的方式可以提高处理的时间 假设三个业务节点每个使用50毫秒钟，不考虑网络等其他开销，则串行方式的时间是150毫秒，并行的时间可能是100毫秒。 因为CPU在单位时间内处理的请求数是一定的，假设CPU在1秒内吞吐量是100次。则串行方式1秒内CPU可处理的请求量是7次（1000/150）。 并行方式处理的请求量是10次（1000/100） 小结：如以上案例描述，传统的方式系统的性能（并发量，吞吐量，响应时间）会有瓶颈。如何解决这个问题？ 引入消息队列，将不是必须的业务逻辑，异步处理

跳表 前面的数据结构笔记中分析过链表，如图所示： 由于它的内存空间非连续，因此查找某个元素时只能从头到尾遍历，时间复杂度为 O(n)。 那么能不能提高链表的查找效率呢？ 我们可以对链表进行改造，在链表上建立一级“索引”，如图： 这样，在查找的时候就可以先在索引层查找，然后再根据索引去查数据（有点类似数据库的索引）。 为了进一步提高查找效率，还可以建立二级索引，如图： 以此类推，还可以建立更多层级的索引： 这种数据结构称为跳表（ Skip List ）。这样做查找速度更快了，但同时也会耗费更多的存储空间，它的思想其实就是空间换时间。 应用场景：Redis 的有序集合。 散列表 散列表（ Hash table ），又称“哈希表”或“ Hash 表”。利用的是数组支持按照下标访问数据（时间复杂度为 O(1) ）的特性，是数组的一种扩展。示意图： 其中的 key 为可理解为要存入的数据的键（键-值对形式）； hash() 是「散列函数」， 它根据 key 计算得到一个非负整数， 是哈希表实现的一个关键点 ； table 为存放数据的数组。 散列表存入数据的大概流程是：将 key 经过散列函数计算得到一个值（保证在数组长度范围内）作为数组的下标，然后将 key 的值保存在数组下标对应的位置。 散列函数 散列函数设计的基本要求： 1. 散列函数计算得到的散列值是一个非负整数（数组下标从 0

时隔一年，再度踏入NOIp的考场，内心感慨万分 ###Day0 在中巴上昏睡了3h++，终于到了长沙理工大学，国际学术交流中心......不太对，好像是国际交流中心与综合实验楼连线——理工大学的另一个大门外的......腾辉宾馆？？？ 告辞，我可能走错片场了。。。国际学术交流中心啊。。。 唉，也罢，不就住一下嘛。。。哪儿都一样（强颜欢笑.jpg） 晚上还是要保持充分的睡眠的，于是睡前快乐了一下（有助于睡眠，滑稽） ###Day1 清早起来去洛谷打卡，不错，好像是中吉 然后去买了罐红牛，随着大部队一路杀入考场 机位好像是5-1-111（MD，注定单身） 今年居然可以提前敲代码？！！赶紧把缺省源敲了，还敲了个A+B problem的对拍 然后看题。。。 T1。。。这TM不SB题吗？！！CCF这么良心？巴拉巴拉1min敲完 T2。。。好像也是个SB题，不过这个性质我好像不会啊。。。算了，先敲了再说。。。大样例，过了，很稳 T3。。。好像是个dp，55pts暴力？！敲了敲了，看起来巨稳啊。。。 T2性质是对的吗？不晓得，忽然开始慌了，然后花近1h打表证结论，好像没啥问题。。。 旁边的人怎么还在看T1啊？ T3想想dp，好像有点思路了，诶，怎么还剩30min了，What happened？完了完了，今天255滚了算了，检查暴力，好像没啥问题 然后交卷了。。

近日，由国云数据CEO马晓东所著的国内第一本从战略、技术、人才、管理四个维度全方位、立体化地阐述数字化转型方法论和落地路径的专业书籍《数字化转型方法论：落地路径与数据中台》上线当当、天猫、京东等各大电商平台。 ~重磅内容~ 这是一部从战略、技术、人才和管理4个维度全面阐述企业数字化转型方法论的著作，是国云数据服务7万余家企业的经验总结。 1.国云数据由原阿里数据团队共同创办，已经为7万余家企业提供数字化转型相关的服务，创始人兼CEO亲自执笔。 2.与现有的数字化转型相关图书只注重技术和实施不同，本书从战略、技术、人才、管理4个维度系统展开，覆盖数字化转型的各个环节和所有利益相关方。 3.独创MAX成熟度模型、数字化转型六图法等多个工具，真正能指导和帮助读者将数字化转型落地。 4.包含新零售、高校、银行等多个行业和机构的数字化转型综合案例，以及近10个行业的数字化转型解决方案架构图。 5.总结了大量数字化转型方面的误区和注意事项。 ~书籍概览~ 数字化转型是个系统工程，本书将整个工程分为了8个环节，全书围绕这8个环节循序渐进展开。 1第一部分 为何数字化转型（第1~2章） 介绍了数字化转型的5个推动因素、数字化颠覆传统行业的3种方式，以及数字化转型的意义。 2第二部分 何时数字化转型（第3~5章） 阐述了数字化转型加速的原因和切入的时间点，以及带来的新机遇。 3第三部分

今天，腾讯安全与奇安信正式达成战略合作伙伴关系。 双方在信息安全市场紧密合作，充分融合双方的优势资源、能力、技术，共同打造行业领先的安全解决方案，为产业互联网发展筑牢安全底座。 腾讯安全与奇安信的合作将聚焦安全技术创新和安全产品研发，针对政企、金融、医疗、教育、交通、能源及其他信息安全需求高增长行业，共同提升安全服务效率和质量。同时，腾讯安全将利用自身优势，为产业输送技术和能力，共建生态护航产业数字化转型。 此次强强合作被赋予更多期待。随着产业数字化的高速推进，“上云用数赋智”已成为数字经济强劲发展和产业互联网高质量发展的必然，而网络安全则是数字经济的“底座”，是新基建的基础工程。尤其是国家“十四五”开局之年， 此次合作，不仅为双方在市场业绩高速增长注入强劲动力，也势必通过双方技术优势互补和深度融合，为整个数字经济社会转型升级，打造出最安全的“数字化助手”。 腾讯安全作为互联网安全领先品牌，依托20多年业务安全运营及黑灰产对抗经验，凭借行业顶尖安全专家、最完备安全大数据及AI技术积累，为产业数字化升级保驾护航。目前，腾讯安全已经取得了1500多项云安全技术专利，位列行业第一；先后获得了Gartner、Forrester、IDC、Sullivan等国际权威机构的推荐，以及获得韩国、新加坡、美国、德国、欧盟五个国家及地区的最高安全资质认证。腾讯安全还建立了多个安全实验室和工作组