大数据常用命令

linux：

1.清理内存

1.清理前查看内存使用情况 
free -m

2.释放前最好sync一下，防止丢数据.因为LINUX的内核机制，一般情况下不需要特意去释放已经使用的cache。这些cache起来的内容可以增加文件以及的读写速度。
#sync

2.开始清理 
#echo 1 > /proc/sys/vm/drop_caches

3.清理后内存使用情况 
#free -m

4.完成!

hadoop:

1jobhistory  服务

启动 history-server
mr-jobhistory-daemon.sh start historyserver
停止 history-server
mr-jobhistory-daemon.sh stop historyserver
通过浏览器访问 Hadoop Jobhistory 的 WEBUI
http://node-1:19888

 

hive:

nohup /export/servers/hive/bin/hive  --service metastore &

nohup /export/servers/hive/bin/hive  --service hiveserver2 &

/export/servers/hive/bin/beeline

 ! connect jdbc:hive2://node-1:10000

 

oozie  :

1启动关闭 oozie  服务 

启动关闭 oozie  服务 :

cd /export/servers/oozie-4.1.0-cdh5.14.0
bin/oozied.sh start

bin/oozied.sh stop

 

http://node-1:11000/oozie/

2Oozie  任务查看 、 杀死

查看所有普通任务
oozie jobs
查看定时任务
oozie jobs -jobtype coordinator
杀死某个任务 oozie 可以通过 jobid 来杀死某个定时任务
oozie job -kill [id]
oozie job -kill 0000001-190810214100080-oozie-root-W 

 

 

 

 

 

来源：https://blog.csdn.net/longyanchen/article/details/99228125