date口令可以用来显示和设置系统日期和时间,平时多用在我们的脚本文件中,获取当前的系统时间。
命令参数
-d<字符串>:显示字符串所指的日期与时间。字符串前后必须加上双引号;
-s<字符串>:根据字符串来设置日期与时间。字符串前后必须加上双引号;
-u:显示GMT;
--help:在线帮助;
--version:显示……继续阅读 »
7年前 (2018-01-30) 2323浏览 0评论
2个赞
Hbase常用API操作,主要包括表的创建,数据的添加,获取,预分区的使用和Filter使用。
环境: Hadoop 2.5, Hbase版本0.98
代码
package net.itzoo;
import java.io.IOException;
import java.math.BigInteger;
import java.text.……继续阅读 »
8年前 (2017-08-29) 4170浏览 0评论
0个赞
WordPress错误之A TimThumb error has occured . GD Library Error: imagecreatetruecolor does not exist – please contact your webhost and ask them to install the GD library
环境:Linux……继续阅读 »
8年前 (2017-08-24) 2941浏览 0评论
2个赞
整体架构优化
现在hive的整体框架如下,计算引擎不仅仅支持Map/Reduce,并且还支持Tez、Spark等。根据不同的计算引擎又可以使用不同的资源调度和存储系统。
整体架构优化点:
根据不同业务需求进行日期分区,并执行类型动态分区。
相关参数设置:
0.14中默认hive.exec.dynamic.partition=ture
为了减少磁盘存……继续阅读 »
8年前 (2017-05-25) 4437浏览 0评论
1个赞
准备编译环境(环境如果不对的话,可能遇到各种问题,比如wget无法下载https链接的文件)
yum groupinstall 'Development Tools'
yum install zlib-devel bzip2-devel openssl-devel ncurses-devel
下载 Python3.5代码包
……继续阅读 »
8年前 (2017-05-24) 2805浏览 0评论
0个赞
awk是一个强大的文本分析工具,相对于grep的查找,sed的编辑,awk在其对数据分析并生成报告时,显得尤为强大。简单来说awk就是把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行各种分析处理。
awk有3个不同版本: awk、nawk和gawk,未作特别说明,一般指gawk,gawk 是 AWK 的 GNU 版本。
awk其名称得自于它的……继续阅读 »
8年前 (2017-05-22) 2567浏览 0评论
0个赞
Hadoop RPC是Hadoop的一个重要部分,提供分布式环境下的对象调用功能,源码在org.apache.hadoop.ipc中。而HBase也几乎完全copy了这部分的源码,只是在配置项上面有所改动。关于Hadoop RPC的机制分析和源码解读,网上已经有许多资料,一搜一大把,这里就不在描述了。本文通过一个小例子,介绍如何调用Hadoop RPC。
1……继续阅读 »
8年前 (2017-05-16) 4356浏览 0评论
0个赞
条件函数
if函数:if
语法: if(boolean testCondition, T valueTrue, T valueFalseOrNull)
返回值: T
说明: 当条件testCondition为TRUE时,返回valueTrue;否则返回valueFalseOrNull
举例:
hive> select if(1=2,100,200)……继续阅读 »
8年前 (2017-03-28) 4200浏览 0评论
0个赞
HBase是Hadoop生态圈中的一员,Nosql数据库,能够对大数据提供随机、实时读写访问。他是开源的,分布式的,多版本的,面向列的,存储模型。
Hbase架构
Hbase体系架构
HBase Master是服务器负责管理所有的HRegion服务器,HBase Master并不存储HBase服务器的任何数据,HBase逻辑上的表可能会划分为多个HRe……继续阅读 »
8年前 (2017-03-22) 5298浏览 0评论
0个赞
最近做项目,因为比较轻松,所以想着一边做项目,一边学习一下IDEA的使用,边顺手将使用过程中的问题整理一下,加深一下记忆同时,也让其他朋友在使用时有一个参考,工具而已,熟能生巧,多操作就ok了,内容都比较基础。适合像我这样的新手使用。
工具版本:IntelliJ IDEA 15.0.2
拉取远程仓库项目
File – New – P……继续阅读 »
8年前 (2017-03-07) 3462浏览 0评论
0个赞
之前有搭建过几次wordpress,但一直没有整理,搭建的时候遇到什么问题就直接找度娘了,今天闲着没事,就创建一个虚拟机,重新搭建一遍,测试一下新下载到的主题效果,同时也把搭建的步骤记录下来,分享给其他朋友使用。因为直接都是yum安装的,所以也没什么难度。欢迎吐槽。
系统环境:CentOS 5.6
环境安装步骤
安装PHP之前,我们先把服务器和数据库装上,……继续阅读 »
8年前 (2017-03-06) 2854浏览 0评论
0个赞
《Java程序员修炼之道》是每个Java工程师都必看,也是必须掌握里面知识的图书,他从Java 7 的新特性到,到Java编程技术,再到JVM,最后跨平台和跨语言做了详细的剖析。适合有一定Java基础并决定提高自身能力的Java工程师学习。
下载地址
百度云盘下载地址(提取密码:lne2):
链接:http://pan.baidu.com/s/1o8wL5U……继续阅读 »
8年前 (2017-03-06) 5223浏览 0评论
3个赞