7 年前

Azkaban 分布式multiple-executor模式部署

azkaban   大数据  

一、简介 Azkaban是LinkedIn开源的任务调度框架,类似于JavaEE中的JBPM和Activiti工作流框架。 如ETL的过程,Sqoop在凌晨1点从RDBMS中抽取数据(E),在凌晨2点用Hadoop或Spark转换数据(T),在凌晨3点用Sqoop再把结果数据加载(L)进RDBMS或NOSQL,假设没有Azkaban这样的调度框架,一般用crontab+shell,…

7 年前

docker 下网络不通的解决办法

docker网络不通   docker  

进入容器测试网络和解析是否正常 docker exec -i -t adee2653e44f /bin/bash # ping www.qq.com 测试解析正常的情况下,如果不通就单独ping IP测试一下 # ping 8.8.8.8 PING 8.8.8.8 (8.8.8.8) 56(84) bytes of data. 修改主机sysctl参数 vim /etc/sysctl.c…

7 年前

ansible setup 内置jinjia变量

ansible  

ansible_nodename 节点名字 ansible_form_factor 服务器类型 ansible_virtualization_role 虚拟机角色(宿主机或者虚拟机) ansible_virtualization_type 虚拟机类型(k…

7 年前

命令获取进程CPU占用和内存占用

bash   内存占用   CPU占用  

一、首先如何快速取得进程PID 通过netstat获得pid netstat -anp | grep ":$port " | grep LISTEN| awk '{print $7}' | awk -F"/" '{ print $1 }'|uniq 通过ps 获得pid ps -ef|grep $cmd|grep -v docker-containerd|grep -v grep|awk '{…

7 年前

2018 炎陵黄桃 炎陵黄桃熟了,喊你来品尝!

炎陵黄桃   高山黄桃   锦秀黄桃     水果  

炎陵黄桃 种植在海拔300-1200米的湖南省炎陵县山区,早晚温差大 山泉水灌溉,农家肥栽培,不一样的甘甜、香脆、多汁 只售自家果园,当天采摘发货,保证新鲜、营养 相关文章 炎陵黄桃种值环境和营养价值 为什么要找我买桃? 正宗炎陵黄桃,请认准红心! 吃桃尝桃花,看一下桃花盛开的季节! 扫码进店 微店H5 https://weidian.com/?userid=163279346&ifr=s…