天下事有难易乎?为之,则难者亦易矣;不为,则易者亦难矣。

itzoo的文章

Linux

每天学习一个Linux口令-date日期口令

date口令可以用来显示和设置系统日期和时间,平时多用在我们的脚本文件中,获取当前的系统时间。 命令参数 -d<字符串>:显示字符串所指的日期与时间。字符串前后必须加上双引号; -s<字符串>:根据字符串来设置日期与时间。字符串前后必须加上双引号; -u:显示GMT; --help:在线帮助; --version:显示……继续阅读 »

7年前 (2018-01-30) 2323浏览 0评论 2个赞

Hbase

Hbase 常用API操作

Hbase常用API操作,主要包括表的创建,数据的添加,获取,预分区的使用和Filter使用。 环境: Hadoop 2.5, Hbase版本0.98 代码  package net.itzoo; import java.io.IOException; import java.math.BigInteger; import java.text.……继续阅读 »

8年前 (2017-08-29) 4170浏览 0评论 0个赞

Hive

Hive优化方案

整体架构优化 现在hive的整体框架如下,计算引擎不仅仅支持Map/Reduce,并且还支持Tez、Spark等。根据不同的计算引擎又可以使用不同的资源调度和存储系统。 整体架构优化点: 根据不同业务需求进行日期分区,并执行类型动态分区。 相关参数设置: 0.14中默认hive.exec.dynamic.partition=ture  为了减少磁盘存……继续阅读 »

8年前 (2017-05-25) 4437浏览 0评论 1个赞

Python

Linux下安装Python环境

准备编译环境(环境如果不对的话,可能遇到各种问题,比如wget无法下载https链接的文件) yum groupinstall 'Development Tools' yum install zlib-devel bzip2-devel  openssl-devel ncurses-devel 下载 Python3.5代码包 ……继续阅读 »

8年前 (2017-05-24) 2805浏览 0评论 0个赞

Linux

awk的简单使用总结

awk是一个强大的文本分析工具,相对于grep的查找,sed的编辑,awk在其对数据分析并生成报告时,显得尤为强大。简单来说awk就是把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行各种分析处理。 awk有3个不同版本: awk、nawk和gawk,未作特别说明,一般指gawk,gawk 是 AWK 的 GNU 版本。 awk其名称得自于它的……继续阅读 »

8年前 (2017-05-22) 2567浏览 0评论 0个赞

Hadoop

Hadoop RPC简单示例

Hadoop RPC是Hadoop的一个重要部分,提供分布式环境下的对象调用功能,源码在org.apache.hadoop.ipc中。而HBase也几乎完全copy了这部分的源码,只是在配置项上面有所改动。关于Hadoop RPC的机制分析和源码解读,网上已经有许多资料,一搜一大把,这里就不在描述了。本文通过一个小例子,介绍如何调用Hadoop RPC。 1……继续阅读 »

8年前 (2017-05-16) 4356浏览 0评论 0个赞

Hive

Hive函数–条件函数

条件函数 if函数:if 语法: if(boolean testCondition, T valueTrue, T valueFalseOrNull) 返回值: T 说明: 当条件testCondition为TRUE时,返回valueTrue;否则返回valueFalseOrNull 举例: hive> select if(1=2,100,200)……继续阅读 »

8年前 (2017-03-28) 4200浏览 0评论 0个赞

Hbase

简议Hbase架构设计和分析

HBase是Hadoop生态圈中的一员,Nosql数据库,能够对大数据提供随机、实时读写访问。他是开源的,分布式的,多版本的,面向列的,存储模型。 Hbase架构 Hbase体系架构 HBase Master是服务器负责管理所有的HRegion服务器,HBase Master并不存储HBase服务器的任何数据,HBase逻辑上的表可能会划分为多个HRe……继续阅读 »

8年前 (2017-03-22) 5298浏览 0评论 0个赞

IntelliJ IDEA

IDEA学习 – 从远程仓库Git项目到本地

最近做项目,因为比较轻松,所以想着一边做项目,一边学习一下IDEA的使用,边顺手将使用过程中的问题整理一下,加深一下记忆同时,也让其他朋友在使用时有一个参考,工具而已,熟能生巧,多操作就ok了,内容都比较基础。适合像我这样的新手使用。 工具版本:IntelliJ IDEA 15.0.2 拉取远程仓库项目 File – New – P……继续阅读 »

8年前 (2017-03-07) 3462浏览 0评论 0个赞

wp常见问题

Linux系统下搭建wordpress 从PHP环境到主题部署

之前有搭建过几次wordpress,但一直没有整理,搭建的时候遇到什么问题就直接找度娘了,今天闲着没事,就创建一个虚拟机,重新搭建一遍,测试一下新下载到的主题效果,同时也把搭建的步骤记录下来,分享给其他朋友使用。因为直接都是yum安装的,所以也没什么难度。欢迎吐槽。 系统环境:CentOS 5.6 环境安装步骤 安装PHP之前,我们先把服务器和数据库装上,……继续阅读 »

8年前 (2017-03-06) 2854浏览 0评论 0个赞

电子书

《图灵程序设计丛书:Java程序员修炼之道》Java经典图书 PDF下载

《Java程序员修炼之道》是每个Java工程师都必看,也是必须掌握里面知识的图书,他从Java 7 的新特性到,到Java编程技术,再到JVM,最后跨平台和跨语言做了详细的剖析。适合有一定Java基础并决定提高自身能力的Java工程师学习。 下载地址 百度云盘下载地址(提取密码:lne2): 链接:http://pan.baidu.com/s/1o8wL5U……继续阅读 »

8年前 (2017-03-06) 5223浏览 0评论 3个赞