qi20088
- 浏览: 83816 次
- 性别:
- 来自: 广州
-
最新评论
文章列表
摘自;http://www.open-open.com/lib/view/open1417612091323.html
1 概述
HBase是一个分布式的、面向列的数据库，它和一般关系型数据库的最大区别是：HBase很适合于存储非结构化的数据，还有就是它基于列的而不是基于行的模式。
既然HBase是采 ...
摘自：http://blog.csdn.net/pirateleo/article/details/7957109
Author：Pirate Leo
myBlog: http://blog.csdn.net/pirateleo/
myEmail: codeevoship@gmail.com
转载请注明出处，谢谢。
文中可能涉及到的API：
Hadoop/HDFS:http://hadoop.apache.org/common/docs/current/api/
HBase: http://hbase.apache.org/apidocs/index.html?overview-sum ...
摘自：
http://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.0.9.1/bk_installing_manually_book/content/rpm-chap1-11.html
摘自：
http://dongxicheng.org/mapreduce-nextgen/hadoop-yarn-problems-vs-solutions/
Windows下使用Hadoop2.6.0-eclipse-plugin插件
摘自：http://my.oschina.net/muou/blog/408543
摘自：http://www.infoq.com/cn/articles/hbase-casestudy-facebook-messages/
import java.io.IOException;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.HBaseConfiguration;
import org.apache.hadoop.hbase.HColumnDescriptor;
import org.apache.hadoop.hbase.HTableDescriptor;
import org.apache.hadoop.hbase.KeyValue;
import org.apache.hadoop.hbase.clien ...
摘自：http://www.thebigdata.cn/JieJueFangAn/6476.html
Hbase课程大纲
学习内容：
Hbase系统搭建与部署，Hbase shell操作；
客户端API操作，包括put、get、delete方法以及批量处理操作与客户端缓存，HTable类与Bytes类的使用；
比较过滤器、专用过滤器、附加过滤器、自定义过滤器的使用
计数器的使用，协处理器（coprocessor类、regionobserver类、masterobserver类、endpoint）的使用
HTablePool类的使用
实战：搭建Hbase集群；使用Hbase shell进行表的操作；利用Hbase API编写客户端工具操作Hbase集群
收获内容：
熟练掌握Hbase集群的搭建，能 ...
基于HBase的海量微博数据高效存储解析
- 博客分类：
- hadoop
通过分析HBase的特点，提出了一种基于HBase的海量微博数据高效存储方案。该方案通过建立合适的数据存储模型、预建Region，提出行关键字生成规则和跳过坏记录的方法，使得数据能够利用MapReduce模型高效且不间断地导入HBase数据 ...
start-all.sh脚本现在已经废弃，推荐使用start-dfs.sh和start-yarn.sh分别启动HDFS和YARN。
在新一代的Hadoop里面HDFS称为了统一存储的平台，而YARN成为了统一计算的平台。
（1）调用start-dfs.sh启动HDFS。之后JPS会出现NameNode,DataNode,SecondaryNameNode
（2）调用start-yarn.sh启动YARN。之后JPS会出现ResourceManager,NodeManager
对于每个start脚本首先甚至启动过程中用到的所有脚本，首先都是调用libexec/hadoop-config.sh配置 ...
ubuntu 搜索文件方法（find命令）
- 博客分类：
- linux
通用格式:find pathname -options [-print -exec -ok]
例子:
find / -name filename 再根目录里面搜索文件名为filename的文件
find /etc -name *s*在目录里面搜索带有s的文件
find /etc -name *S 在目录里面搜索以s结尾的文件
find /etc -name s*在目录里面搜索以s ...
问： 请问ubuntu下面，当前目录中，查找包含相应内容的文件的命令，如在open目录中查找带有“hello”的文件
答：
find ./ | xargs grep -Hn 'hello'
详细例如：
制造对应的目录的几个文件并写些内容：
mkdir open
cd open/
ls
echo 123567 > file1
echo 123567 > file2
echo 123567 > file3
echo helloworld > file4
查找内容：
find ./ | xargs grep -Hn 'hello'
查找结果：
./file4: ...