功能
两者均可以调度mapreduce,pig,java,脚本工作流任务
两者均可以定时执行工作流任务
工作流定义
Azkaban使用Properties文件定义工作流
Oozie使用XML文件定义工作流
工作流传参
Azkaban支持直接传参,例如${input}
Oozie支持参数和EL表达式,例如${fs:dirSize(myInputDir)}
定时……继续阅读 »
itzoo
8年前 (2017-02-24) 3062浏览 0评论
0个赞
最近项目迁移到新集群,试试同事推荐的开源任务调度程序-azkaban(阿兹卡班),没看错,就是哈利波特里的阿兹卡班,azikaban主要用来解决hadoop依赖任务的执行,但是它本身支持linux和java程序,因此适合做小项目的任务调度管理程序。
Azkaban官网 : https://azkaban.github.io/
Azkaban组件
关系数据库……继续阅读 »
itzoo
8年前 (2017-02-23) 4351浏览 0评论
0个赞
这里主要介绍百度对url的收录,我们可以通过百度站长的站长平台发现,百度为我们提供了四种对新增url收录的提交方式:主动推送,自动推送,sitemap和手动提交。这里主要讲解最快,也是最为直接的主动推送方式,快速提交新增url给百度,方便其快速收录。
操作
1.先进入百度站长平台后台管理 点击这里 ,如果没有账号,则直接注册,验证网站,绑定站长身份。
2.进……继续阅读 »
itzoo
8年前 (2017-02-21) 3833浏览 0评论
1个赞
操作信息和口令
1.查询数据库
# show databases;
2.查询表列表
# show tables;
3.模糊查询表
# show tables like ‘*name*’;
4.查看表的结构
# desc formatted 数据库.表名;
# desc 数据库名.表名;
5.查看表分区信息
# show partiti……继续阅读 »
itzoo
8年前 (2017-02-15) 8239浏览 0评论
0个赞
VMware12虚拟机,直接安装,内有CentOS-6.5-64位iso映像,并附带有安装和使用的图解文档,方便大家使用。
软件
下载地址
百度云盘下载地址(提取密码:s79n):
链接:http://pan.baidu.com/s/1c1FLygS
该资源收集于网络,只做学习和交流使用,如果内容侵犯了您的权利,请联系我们,我们会第一时间删除。
……继续阅读 »
itzoo
8年前 (2017-02-14) 5394浏览 0评论
0个赞
Linux口令大全,并附带有口令的使用说明,和安装介绍。
PDF文档
下载地址
百度云盘下载地址(提取密码:zk6j):
链接:http://pan.baidu.com/s/1b6wa6q
……继续阅读 »
itzoo
8年前 (2017-02-14) 3561浏览 0评论
0个赞
下载地址
百度云盘下载地址:
http://pan.baidu.com/s/1eScbJY6
更多下载
1
2
3
4
5
……继续阅读 »
itzoo
8年前 (2017-02-10) 3040浏览 0评论
0个赞
Linux/Unix 的档案调用权限分为三级 : 档案拥有者、群组、其他。利用 chmod和chown 可以藉以控制档案如何被他人所调用。chmod和chown对使用者和使用的作用域是不同的。如下图,chmod就是修改 第一列内容的 ,即用来修改某个目录或文件的访问权限。而chown是修改 第3,4列内容的,即用来更改某个目录或文件的用户名和用户组的。
……继续阅读 »
itzoo
8年前 (2017-02-09) 3517浏览 0评论
0个赞
一、uniq干什么用的
文本中的重复行,基本上不是我们所要的,所以就要去除掉。linux下有其他命令可以去除重复行,但是我觉得uniq还是比较方便的一个。使用uniq的时候要注意以下二点
1,对文本操作时,它一般会和sort命令进行组合使用,因为uniq 不会检查重复的行,除非它们是相邻的行。如果您想先对输入排序,使用sort -u。
2,对文本操作时,若域……继续阅读 »
itzoo
8年前 (2017-02-06) 2455浏览 0评论
2个赞