[综合] 黑猴子的家：auto-ssh-sshpass.sh

在/usr/local/bin目录下 #!/bin/bashuser=`whoami` passwd=000000#yuminstall-ysshpass echo"开始配置免密登录......"for((current=102;current<=104;current++));dofor((...

[综合] 黑猴子的家：docker_in.sh

在/usr/local/bin目录下 #!/bin/bash#Usensentertoaccessdocker docker_in(){NAME_ID=$1PID=$(dockerinspect-f"{ {.State.Pid}}"$NAME_ID)nsenter-t$PID-m-u-i-n-p/b...

[综合] 黑猴子的家：Cloudera Manager 之 集群关闭

1、关闭cloudera-scm-agent [root@hadoop102opt]#cdcm-5.14.1/etc/init.d/ [root@hadoop102init.d]#./cloudera-scm-agentstop[root@hadoop103opt]#cdcm-5.14.1/etc/...

[综合] 黑猴子的家：azkaban.sh

方式一 #!/bin/bash case$1in "start")forhostinhadoop102hadoop103hadoop104doecho"======start$hostazkaban-exec-server======"ssh$host"cd/opt/module/azkaban/a...

[综合] 黑猴子的家：Azkaban3.84.4之hello world

1、base.project [alex@hadoop102azkaban]$mkdirjobs [alex@hadoop102azkaban]$vimjobs/base.project azkaban-flow-version:2.0 2、base.flow [alex@hadoop102azka...

[综合] 黑猴子的家：Azkaban3.84.4之dependsOn

依赖关系 1、base.project [alex@hadoop102azkaban]$vimjobs/base.project azkaban-flow-version:2.0 2、base.flow [alex@hadoop102azkaban]$vimjobs/base.flow nodes:...

[综合] 黑猴子的家：Azkaban3.84.4之公共config

1、base.project [alex@hadoop102azkaban]$vimjobs/base.project azkaban-flow-version:2.0 2、base.flow [alex@hadoop102azkaban]$vimjobs/base.flow config:hh:"...

[综合] 黑猴子的家：Azkaban3.84.4之条件工作流一，预定义宏案例

条件工作流功能允许用户自定义执行条件来决定是否运行某些Job。条件可以由当前Job的父Job输出的运行时参数构成，也可以使用预定义宏。在这些条件下，用户可以在确定Job执行逻辑时获得更大的灵活性，例如，只要父Job之一成功，就可以运行当前Job。 Azkaban中预置了几个特殊的判断条件，称为预定义...

[综合] 黑猴子的家：Azkaban3.84.4之工作流二，运行时参数案例

1、基本原理 1)父Job将参数写入JOB_OUTPUT_PROP_FILE环境变量所指向的文件2)子Job使用${jobName:param}来获取父Job输出的参数并定义执行条件 2、支持的条件运算符 1)==等于2)!=不等于3)>大于4)>=大于等于5)<小于6)<=...

[综合] 黑猴子的家：zk-status.sh

在/usr/local/bin目录下 #!/bin/bashuser=`whoami`echo-e"================正在启动Zookeeper===========\n" for((host=102;host<=104;host++));doecho-e"\n---$user@...

[综合] 黑猴子的家：zk-stop.sh

在/usr/local/bin目录下 #!/bin/bashuser=`whoami`echo-e"================正在启动Zookeeper===========\n" for((host=102;host<=104;host++));doecho-e"\n---$user@...

[综合] 黑猴子的家：zk.sh

#!/bin/bashif[[-n$1]];thencmd=$* elsecmd=jps fiforhostinhadoop102hadoop103hadoop104;doecho"==========$host========="ssh$host"source/etc/profile;$cmd" ...

[综合] 黑猴子的家：consume.sh

#!/bin/bashkafka_home=/opt/module/kafka $kafka_home/bin/kafka-console-consumer.sh--zookeeperhadoop102:2181--topic$1

[综合] 黑猴子的家：producer.sh

#!/bin/bashkafka_home=/opt/module/kafka $kafka_home/bin/kafka-console-producer.sh--broker-listhadoop102:9092--topic$1

[综合] 黑猴子的家：topic_create.sh

#!/bin/bashkafka_home=/opt/module/kafka $kafka_home/bin/kafka-topics.sh--zookeeperhadoop102:2181--create--replication-factor2--partitions5--topic$1

[综合] 黑猴子的家：topic_list.sh

#!/bin/bashkafka_home=/opt/module/kafka $kafka_home/bin/kafka-topics.sh--zookeeperhadoop102:2181,hadoop103:2181,hadoop104:2181--list

[综合] 黑猴子的家：change_date.sh

#!/bin/bashuser=`whoami`for((host=102;host<=104;host++));doecho-e"---修改$user@hadoop$host时间---"ssh$user@hadoop$host"source/etc/profile;sudodate-s$1"...

[综合] 黑猴子的家：kafka.sh

在/usr/local/bin目录下 [alex@hadoop102~]$cd/usr/local/bin/ [alex@hadoop102bin]$sudotouchkafka.sh [alex@hadoop102bin]$sudochownalex:alexkafka.sh [alex@hado...

[综合] 黑猴子的家：shutdown.sh

#!/bin/bashuser=`whoami`echo-e"================正在关闭102103104集群===========\n" for((host=104;host>=102;host--));doecho-e"\n---$user@hadoop$host---"ss...

[综合] 黑猴子的家：hadoop-stop.sh

#!/bin/bashuser=`whoami`echo"======正在关闭YARN======" ssh$user@hadoop103'/opt/module/hadoop-2.7.2/sbin/stop-yarn.sh'#睡5秒钟 sleep5echo"======正在关闭HDFS======...