选择和配置数据压缩 发表于 2017-05-24 | 更新于 2018-05-29 | 分类于 CDH , CM 选择和配置数据压缩选择压缩类型的指导 GZIP压缩比Snappy或LZO使用更多的CPU资源,但提供了更高的压缩比。GZip通常是冷数据的不错选择,不经常访问。 Snappy或LZO是热门数据的更好选择,频繁访问。 对于某些类型的文件,BZip2还可以产生比GZip更多的压缩,压缩和解压缩时需要一定 ... 阅读全文 »
Cloudera Manager和CDH快速入门指南 发表于 2017-05-24 | 更新于 2018-05-29 | 分类于 CDH , CM Cloudera Manager和CDH快速入门指南本快速入门指南介绍如何在四台主机的集群上快速创建Cloudera Manager 5,CDH 5和托管服务的新安装。生成的部署可用于演示和概念验证应用程序,但不推荐用于生产。 继续阅读: 快速启动群集主机要求 下载并运行Cloudera Mana ... 阅读全文 »
readme 发表于 2017-05-24 | 更新于 2017-09-24 | 分类于 python Python 标识符在python里,标识符有字母、数字、下划线组成。在python中,所有标识符可以包括英文、数字以及下划线(_),但不能以数字开头。python中的标识符是区分大小写的。以下划线开头的标识符是有特殊意义的。以单下划线开头(_foo)的代表不能直接访问的类属性,需通过类提供的接口进 ... 阅读全文 »
Python 学习笔记 发表于 2017-05-24 | 更新于 2017-09-24 | 分类于 python LEGB : L>E>G>B L:local 函数内部作用域 E:enclosing 函数内部与内嵌函数之间 G:global 全局作用域 B:buil-in 内置作用域 函数体内部的语句在执行时,一旦执行到return时,函数就执行完毕,并将结果返回。因此,函数内部通过条件判 ... 阅读全文 »
磁盘inode满导致数据无法写入 发表于 2017-05-24 | 更新于 2018-05-29 | 分类于 CDH , Error 磁盘inode满导致数据无法写入BDI的一个工作节点,报错数据没有空间写入,但是通过命令df查看磁盘空间还有剩余,当前目录文件数目也没有超过最大限制,最后发现是分区inode满了导致 同时bdi的调度,虽然服务停止了之前的调度任务被分配到该节点的话就不会自动选择其他正常工作的节点了参考文档 阅读全文 »
java笔记 发表于 2017-05-24 | 更新于 2017-09-24 | 分类于 java java 是区分单双引号的new 数组是要定义数组个数的 个数值 等于数组最后一个值-1 如果方法的返回类型为 void ,则方法中不能使用 return 返回值! 方法的返回值最多只能有一个,不能返回多个值; return 需要带参数! 方法返回值的类型必须兼容,例如,如果返回值类型为 int ... 阅读全文 »
java加密解密 发表于 2017-05-24 | 更新于 2018-05-29 | 分类于 java java加密解密 安全和密码 常用安全体系介绍 密码分类及java的安全组成 JDK相关包及第三方扩展 Base64算法 密码常用术语 明文:待加密信息 密文:经过加密后的明文 加密:明文转为密文的过程 加密算法:明文转为密文的转换算法 解密:将密文转为明文的过程 解密算法:密文转为明文的算法 ... 阅读全文 »
Ruby入门 发表于 2017-05-24 | 更新于 2017-09-24 | 分类于 Ruby 方法调用的最外层括号可以省略 函数最后一行默认有return hash处于一个函数最后一个参数的时候大括号可以省略Apple.create :name => ‘apple’,:color =>’red’Apple.create({:name => ‘aplle’,:color = ... 阅读全文 »
SQL基础 发表于 2017-05-24 | 更新于 2017-09-24 | 分类于 MySQL SQL基础 DDL (Data Definition Languages):数据定义语音,这些语句定义了不同的数据段,数据库,表,列,索引等数据库对象.常用的语句关键字主要包括create,drop,alter等; DML (Data Manipulation Languages): 数据操纵语句, ... 阅读全文 »