nosql

【推荐】2019 Java 开发者跳槽指南.pdf(吐血整理) >>> 这里是Z哥的个人公众号 每周五11：45 按时送达 当然了，也会时不时加个餐～ 我的第「124」篇原创敬上 大家好，我是Z哥。 好久没写技术文章了，最近正好有进行一些思考，顺手写出来分享给大家。 上了一定规模的系统，特别是To C的系统，性能优化或多或少都会被逼着去做一下。否则，系统便无法支撑业务的发展，技术成了拖后腿，不是引领业务了。 一旦线上出现了性能问题，就会很棘手。因为它和业务功能上的Bug不同，后者的分析和解决思路更清晰，只要日志记录到位，沿着一条已知的业务逻辑线，很容易就能找到问题根源。 而性能问题就会复杂的多，导致的因素有很多，甚至会是多种因素共同作用下的结果。比如，代码质量低下、业务发展太快、架构设计不合理等等。 而且一般情况下，性能问题处理起来比较耗时，涉及到的分析链路可能会很长，特别是自己小组之外的上下游系统，很多人不愿意干，或者说有心无力。最多采用一些临时性的补救手段，碰碰运气。比如，扩容增加机器、重启大招、……。 有些临时性的补救措施，有时候不但不能解决问题，还会埋下新的隐患。 比如，从表象上看到某个程序因为给的资源不足导致产生性能问题。临时增加更多资源给它，可能从表面上看，问题是解决了。但是实则可能是因为程序内部对资源的使用上存在不合理的地方，增加资源只是延缓问题发作的时间

【推荐】2019 Java 开发者跳槽指南.pdf(吐血整理) >>> 点击上方 " 程序员小乐 "关注, 星标或置顶一起成长 每天凌晨00点00分, 第一时间与你相约 每日英文 At any time, one should do their own emotional slaves. 任何时候，一个人都不应该做自己情绪的奴隶。 每日掏心 话 没有不会谢的花，没有不会退的浪，没有不会暗的光，没有不会好的伤，没有不会停下来的绝望。 来自：吴极心 | 责编：乐乐 链接：cloud.tencent.com/developer/article/1181751 程序员小乐(ID:study_tech)第 743 次推文 图片来自 Pexels 往日回顾： 比尔·盖茨、UNIX之父等全球14位IT大佬，总结的18句编程名言！ 正文 一、什么是分布式架构 分布式系统（distributed system） 是建立在网络之上的软件系统。 内聚性 ：是指每一个数据库分布节点高度自治，有本地的数据库管理系统。 透明性 ：是指每一个数据库分布节点对用户的应用来说都是透明的，看不出是本地还是远程。 在分布式数据系统中，用户感觉不数据是分布的，即用户不须知道关系是否分割，有无副本，数据存在于那个站点以及事物在哪个站点上执行。 简单来说：在一个分布式系统中，一组独立的计算机展现给用户的是一个统一的整体

NoSQL 数据库的四大分类如下： 键值(Key-Value)存储数据库 相关产品： TokyoCabinet/Tyrant 、 Redis 、 Voldemort 、 Berkeley DB 典型应用： 内容缓存，主要用于处理大量数据的高访问负载。 数据模型： 一系列键值对 优势： 快速查询 数据放在内存中 劣势： 存储的数据缺少结构化 不适合存储大量数据 列存储数据库 相关产品： Cassandra, HBase , Riak 典型应用：分布式的文件系统 数据模型：以列簇式存储，将同一列数据存在一起 优势：查找速度快，可扩展性强，更容易进行分布式扩展 劣势：功能相对局限 文档型数据库 相关产品： CouchDB 、 MongoDB 典型应用： Web 应用（与 Key-Value 类似， Value 是结构化的） 数据模型： 一系列键值对 优势：数据结构要求不严格 劣势： 查询性能不高，而且缺乏统一的查询语法 图形(Graph)数据库 相关数据库： Neo4J 、 InfoGrid 、 Infinite Graph 典型应用：社交网络 数据模型：图结构 优势：利用图结构相关算法。 劣势：需要对整个图做计算才能得出结果，不容易做分布式的集群方案。 来源： https://www.cnblogs.com/archimedes-euler/p/9975828.html

NoSQL简史及定义 NoSQL 这个术语最早是在 1998 年被 Carlo Strozzi 命名在他的轻量的，开源的关系型数据库上的，但是该数据库没有提供标准的 SQL 接口； 在 2009 年再次被 Eric Evans 提起，讨论分布式开源数据库的问题，这是的 NoSQL 主要指的非关系型，分布式的，不提供关系型的 atomicity(A) ， consistency(C) ， isolation(I) ， durability(D) 即 ACID 的特性； 紧接着 2009 年在亚特兰大举行的 no:sql 讨论会是一个里程碑，当时的口号是 select fun, profit from real_world where relational=false ，因此之后对于 NoSQL 最普遍的解释为 非关系型的 ，强调 Key-Value 和 Document(文档) 数据库的优点，并非单纯的反对关系型数据库； 下面给 NoSQL 下一个定义，如果你在网上查阅资料会得到很多种定义，大家的理解不尽相同，我这里引用 http://nosql-database.org/ 网站上的定义： 下一代，主要解决以下几点：非关系数据库、分布式数据库、开源数据库和水平扩展数据库 原文信息：Next Generation Databases mostly addressing some of

## redis数据库概述 1.redis:一款特殊的的数据库软件，他区别之前学的masql数据库 1.概念：redis是一款高性能的NOSQL系列的非关系型数据库 (首先，关系型数据库就是数据和数据之间有关系，那么在关系型数据库里边，比如有个emp表和dept表分别有自己的字段，那么对于emp表，他要关联dept部门表，也就是说一个部门可以有多个员工，一个员工只能属于一个部门，他们之间就是一个多对一的关系，他们对应的实体也有关系，数据也是有一些关系，也就是说，关系型数据库他们数据之间有关联关系，数据是存储在表中，而表其实上就是硬盘上的软件，那么就是数据存储在硬盘的文件上，而非关系型数据库没有表的概念，他存储的是一种key：value键值对形式，比如：name:zhangsan,他们每一个数据之间没什么关系的，而且这些数据是存储在内存里边的，那么数据存在硬盘和存在内存中有什么区别呢，比如说，存在硬盘上将来我们要去查询，增删改查这个表里边的数据，这个时候我们要对这个硬盘的文件进行一些IO的操作，而IO对于内存的一个操作，性能是非常低的，对于内存的数据，我们将来只需要字在内存里边操作就可以了，他的性能或者说速度就比较快一些，，那么这个非关系型怎么去使用。 首先思考我们现在的生活中，我们已经处于一个非常高速的互联网环境下，我们现在所追求的是速度快不快，数据量现在非常大

【推荐】2019 Java 开发者跳槽指南.pdf(吐血整理) >>> 起因 ledisdb 是一个参考ssdb，采用go实现，底层基于leveldb，类似redis的高性能nosql数据库，提供了kv，list，hash以及zset数据结构的支持。 我们现在的应用极大的依赖redis，但随着我们用户量越来越大，redis的内存越来越不够用，并且replication可能还会导致超时问题。虽然后续我们可以通过添加多台机器来解决，但是在现有机器配置下面，我们仍希望单台机器承载更多的用户。另外，因为业务的特性，我们其实并不需要将所有的数据放到内存，只需要存放当前活跃用户。 经过我们的调研，发现ssdb已经很好的帮我们解决了这个问题，它提供了跟redis一致的接口（当然有些地方还是稍微不同），但是底层采用leveldb进行存储。根据其官网的描述，性能已经接近甚至超越了redis。 本着 造轮子 的精神，我决定用go实现一个类似的db，取名为ledisdb，也就是 level-redis-db ，为啥不用现成的ssdb，我觉得有如下几个原因： go语言开发的快速，这点毋庸置疑，虽然性能上面铁定离c++的代码有差距，但是我能够快速的进行原型搭建并实验。实际上，我在很短的时间里面就开发出了ledisdb，让我后续继续开发有了信心。 leveldb的研究

NoSQL 学名（not only sql） 特点： 存储结构与mysql这一种关系型数据库完全不同，nosql存储的是KV形式 nosql有很多产品，都有自己的api和语法，以及业务场景 产品种类： Mongodb redis Hbase hadoop Nosql和sql的区别 应用场景不同，sql支持关系复杂的数据查询，nosql反之 sql支持事务性，nosql不支持 redis特性 Redis 是一个开源（BSD许可）的，内存中的数据结构存储系统，它可以用作数据库、缓存和消息中间件redis是c语言编写的，支持数据持久化，是key-value类型数据库。应用在缓存，队列系统中redis支持数据备份，也就是master-slave模式 redis优势 性能高，读取速度10万次每秒 写入速度8万次每秒 所有操作支持原子性用作缓存数据库，数据放在内存中替代某些场景下的mysql，如社交类app大型系统中，可以存储session信息，购物车订单 yum安装redis 1.yum安装 #前提得配置好阿里云yum源，epel源 #查看是否有redis包 yum list redis#安装redisyum install redis -y#安装好，启动redissystemctl start redis 2.检测redis是否工作 redis-cli #redis 客户端工具