info

HBase常用shell操作

无人久伴 提交于 2019-12-15 04:29:35
1、进入HBase客户端命令操作界面 bin/hbase shell 2、查看帮助命令 hbase(main):001:0> help 3、查看当前数据库中有哪些表 hbase(main):002:0> list 4、创建一张表 创建user表,包含info、data两个列族 hbase(main):010:0> create ‘user’, ‘info’, 'data’ 或者 hbase(main):010:0> create ‘user’, {NAME => ‘info’, VERSIONS => ‘3’},{NAME => ‘data’} 5、添加数据操作 向user表中插入信息,row key为rk0001,列族info中添加name列标示符,值为zhangsan hbase(main):011:0> put ‘user’, ‘rk0001’, ‘info:name’, 'zhangsan’ 向user表中插入信息,row key为rk0001,列族info中添加gender列标示符,值为female hbase(main):012:0> put ‘user’, ‘rk0001’, ‘info:gender’, 'female’ 向user表中插入信息,row key为rk0001,列族info中添加age列标示符,值为20 hbase(main):013:0> put

SpringBoot 定时任务

北城以北 提交于 2019-12-14 21:16:53
1.如何定时任务 1.1 开启定时任务 @EnableScheduling //开启定时任务 @SpringBootApplication public class ManagerApplication { private static Logger logger = LoggerFactory.getLogger(ManagerApplication.class); public static void main(String[] args) { SpringApplication.run(ManagerApplication.class, args); logger.info("------------------------------------------------------------------"); logger.info("application start success..."); logger.info("--" + "----------------------------------------------------------------"); try { System.in.read(); } catch (IOException e) { e.printStackTrace(); } } } 1.2 @Scheduled(预定的

HBase常用shell操作

99封情书 提交于 2019-12-14 18:39:32
1、进入HBase客户端命令操作界面 bin/hbase shell 2、查看帮助命令 help 3、查看当前数据库中有哪些表 list 4、创建一张表 创建user表,包含info、data两个列族 create 'user' , 'info' , 'data' 或者 create 'user' , { NAME = > 'info' , VERSIONS = > '3' } , { NAME = > 'data' } 5、添加数据操作 向user表中插入信息,row key为rk0001,列族info中添加name列标示符,值为zhangsan put 'user' , 'rk0001' , 'info:name' , 'zhangsan' 向user表中插入信息,row key为rk0001,列族info中添加gender列标示符,值为female put 'user' , 'rk0001' , 'info:gender' , 'female' 向user表中插入信息,row key为rk0001,列族info中添加age列标示符,值为20 put 'user' , 'rk0001' , 'info:age' , '20' 向user表中插入信息,row key为rk0001,列族data中添加pic列标示符,值为picture put 'user' , 'rk0001' ,

爬取微博游戏名人信息

匆匆过客 提交于 2019-12-14 07:37:21
爬取微博游戏名人信息 昨天写了关于静态网站爬取爬取的文章,以为自己无所不能了,想去微博上爬点数据,差点被微博吊起来打,遇到了太多的坑了,做下记录 常规步骤 我们爬取的网址是 爬取网址 我们需要爬取游戏名人的姓名,关注量,粉丝量,微博量,地址和简介 设置headers,get请求访问网站,BeautifulSoup解析 这个网站有下一页选项,我们可以通过下一页选项,查看网址的变化情况 第一页网址如下: 第二页网址为: 观察得到:第一页和第二页的网址只有一个地方发生了变化,就是page属性,第一页为1,第二页为2以此类推,我们有111页,做111次循环即可获取所有url信息 for i in range ( 1 , 112 ) : url = 'https://d.weibo.com/1087030002_2975_2019_0?page={0}#Pl_Core_F4RightUserList__4' . format ( i ) headers = { 'cookie' : 'SUB=_2AkMqsmVqf8NxqwJRmP4QxW_lZItxyQvEieKc7pSxJRMxHRl-yT9kqlUMtRB6ATJLhQPCOWG7wxuc5v0FC-d9AWBglQ_Y; SUBP=0033WrSXqPxfM72-Ws9jqgMF55529P9D9W5bZc-nbvDZeZk

docker查看容器日志

被刻印的时光 ゝ 提交于 2019-12-14 03:02:51
原文: docker查看容器日志 前言 $ sudo docker logs -f -t --tail 行数 容器名 12 1、命令查看 root@c68d4b5dd583c4f4ea30da298934b37f8-node3:~# docker logs -f -t --tail 20 7a20f9671dbd 2018-09-10T04:55:10.149702378Z 2018-09-10 12:55:10.149 [task-18] INFO c.d.y.a.s.coupon.CouponTaoKeWork - 定时器是否能够执行:false 2018-09-10T04:58:10.149705593Z 2018-09-10 12:58:10.149 [task-16] INFO c.d.y.a.s.coupon.CouponTaoKeWork - 定时器是否能够执行:false 2018-09-10T05:01:10.149687402Z 2018-09-10 13:01:10.149 [task-12] INFO c.d.y.a.s.coupon.CouponTaoKeWork - 定时器是否能够执行:false 2018-09-10T05:04:10.149689550Z 2018-09-10 13:04:10.149 [task-17] INFO c.d.y.a.s

HBase shell操作

不羁的心 提交于 2019-12-14 01:51:36
一、HBase常用shell操作 1、进入HBase客户端命令操作界面 $ bin/hbase shell 2、查看帮助命令 hbase(main):001:0> help 3、查看当前数据库中有哪些表 hbase(main):002:0> list 4、创建一张表 创建user表,包含info、data两个列族 hbase(main):010:0> create 'user', 'info', 'data' 或者 hbase(main):010:0> create 'user', {NAME => 'info', VERSIONS => '3'},{NAME => 'data'} 5、添加 数据 操作 向user表中插入信息,row key为rk0001,列族info中添加name列标示符,值为zhangsan hbase(main):011:0> put 'user', 'rk0001', 'info:name', 'zhangsan' 向user表中插入信息,row key为rk0001,列族info中添加gender列标示符,值为female hbase(main):012:0> put 'user', 'rk0001', 'info:gender', 'female' 向user表中插入信息,row key为rk0001,列族info中添加age列标示符,值为20

【Linux】十问 Linux 虚拟内存管理

自闭症网瘾萝莉.ら 提交于 2019-12-14 01:16:39
Linux 的虚拟内存管理有几个关键概念: 每个进程有独立的虚拟地址空间,进程访问的虚拟地址并不是真正的物理地址 虚拟地址可通过每个进程上页表与物理地址进行映射,获得真正物理地址 如果虚拟地址对应物理地址不在物理内存中,则产生缺页中断,真正分配物理地址,同时更新进程的页表;如果此时物理内存已耗尽,则根据内存替换算法淘汰部分页面至物理磁盘中。 基于以上认识,这篇文章通过本人以前对虚拟内存管理的疑惑由浅入深整理了以下十个问题,并通过例子和系统命令尝试进行解答。 Linux 虚拟地址空间如何分布? 32 位和 64 位有何不同? malloc 是如何分配内存的? malloc 分配多大的内存,就占用多大的物理内存空间吗? 如何查看进程虚拟地址空间的使用情况? free 的内存真的释放了吗(还给 OS ) ? 程序代码中 malloc 的内存都有相应的 free ,就不会出现内存泄露了吗? 既然堆内内存不能直接释放,为什么不全部使用 mmap 来分配? 如何查看进程的缺页中断信息? 如何查看堆内内存的碎片情况? 除了 glibc 的 malloc/free ,还有其他第三方实现吗? 一.Linux 虚拟地址空间如何分布? 32 位和 64 位有何不同? Linux 使用虚拟地址空间,大大增加了进程的寻址空间,由低地址到高地址分别为: 只读段:该部分空间只能读,不可写,包括代码段、

springboot整合logback

…衆ロ難τιáo~ 提交于 2019-12-14 01:04:35
因为是springboot2.0项目已经集成了logback,无需引包 < parent > < groupId > org . springframework . boot < / groupId > < artifactId > spring - boot - starter - parent < / artifactId > < version > 2.2 .1 . RELEASE < / version > < relativePath / > < ! -- lookup parent from repository -- > < / parent > < parent > < groupId > org . springframework . boot < / groupId > < artifactId > spring - boot - dependencies < / artifactId > < version > 2.2 .1 . RELEASE < / version > < relativePath > . . / . . /spring - boot - dependencies < / relativePath > < / parent > < dependency > < groupId > ch . qos . logback < / groupId

HBase常用shell操作

和自甴很熟 提交于 2019-12-14 00:11:01
HBase常用shell操作 1、进入HBase客户端命令操作界面 $ bin/hbase shell 2、查看帮助命令 hbase(main):001:0> help 3、查看当前数据库中有哪些表 hbase(main):002:0> list 4、创建一张表 创建user表,包含info、data两个列族 hbase(main):010:0> create ‘user’, ‘info’, ‘data’ 或者 hbase(main):010:0> create ‘user’, {NAME => ‘info’, VERSIONS => ‘3’},{NAME => ‘data’} 5、添加数据操作 向user表中插入信息,row key为rk0001,列族info中添加name列标示符,值为zhangsan hbase(main):011:0> put ‘user’, ‘rk0001’, ‘info:name’, ‘zhangsan’ 向user表中插入信息,row key为rk0001,列族info中添加gender列标示符,值为female hbase(main):012:0> put ‘user’, ‘rk0001’, ‘info:gender’, ‘female’ 向user表中插入信息,row key为rk0001,列族info中添加age列标示符,值为20 hbase

数据分析处理库pandas

怎甘沉沦 提交于 2019-12-13 18:51:32
# pandas_1 import pandas food_info = pandas.read_csv("food_info.csv") #print(type(food_info)) print (food_info.dtypes) ''' NDB_No int64 Shrt_Desc object Water_(g) float64 Energ_Kcal int64 Protein_(g) float64 Lipid_Tot_(g) float64 Ash_(g) float64 Carbohydrt_(g) float64 Fiber_TD_(g) float64 Sugar_Tot_(g) float64 Calcium_(mg) float64 Iron_(mg) float64 Magnesium_(mg) float64 Phosphorus_(mg) float64 Potassium_(mg) float64 Sodium_(mg) float64 Zinc_(mg) float64 Copper_(mg) float64 Manganese_(mg) float64 Selenium_(mcg) float64 Vit_C_(mg) float64 Thiamin_(mg) float64 Riboflavin_(mg) float64 Niacin_(mg)