qi20088
- 浏览: 83488 次
- 性别:
- 来自: 广州
-
文章分类
- 全部博客 (110)
- myeclipse JVM 虚拟机内存设置 (1)
- 查询含有clob字段表的sql语句 (1)
- 项目个人价值体现 (1)
- Java多线程并发编程 (1)
- spring (4)
- 启悟 (1)
- hadoop (27)
- mysql数据库乱码问题 (1)
- linux (6)
- 架构与设计 (1)
- java (6)
- mysql (2)
- 分页编程 (1)
- 励志 (2)
- 技术要求 (0)
- guava (1)
- 分布式开发(SOA) (4)
- 微服务架构 + API 网关 (5)
- 消息中间件 (4)
- Dubbo (8)
- 面谈 (0)
- 高并发架构 (1)
- maven (1)
- MongoDB (1)
- hbase (2)
最新评论
http://www.tuicool.com/articles/eIBB3a
分享到：
发表评论
-
MapReduce程序开发(good)
2016-09-06 18:25 242http://blog.csdn.net/qq10108856 ... -
ZooKeeper典型应用场景一览
2016-07-08 16:17 383ZooKeeper典型应用场景一览 摘自：http://www ... -
Apache HBase 2015年发展回顾与未来展望
2016-02-05 10:00 392摘自: http://mp.weixin.qq.com/s? ... -
搜索技术博客－淘宝
2015-12-10 18:33 449搜索技术博客－淘宝: http://www.searcht ... -
大数据性能调优之HBase的RowKey设计
2015-11-12 13:47 350摘自;http://www.open-open.com ... -
HBase处理中文字符串
2015-11-12 13:44 692摘自：http://blog.csdn.net/piratel ... -
详细的讲解yarn和mapreduce的内存配置
2015-11-03 17:00 354摘自： http://docs.hortonworks.co ... -
Hadoop YARN常见问题以及解决方案 任务合理调度分配
2015-11-03 14:46 1130摘自： http://dongxicheng.org/map ... -
Windows下使用Hadoop2.6.0-eclipse-plugin插件
2015-10-29 15:43 342Windows下使用Hadoop2.6.0-eclipse-p ... -
HBase优化案例分析：Facebook Messages系统问题与解决方案
2015-10-21 18:58 417摘自：http://www.infoq.com/cn/arti ... -
HBase总结（十二）Java API 与HBase交互实例
2015-10-21 18:57 394import java.io.IOException; im ... -
NoSQL选型及HBase案例详解（hbase结合情景案例分析）
2015-10-21 18:55 497摘自：http://www.thebigdata.cn/Jie ... -
Hbase课程大纲学习路线
2015-10-21 18:49 970Hbase课程大纲 学习内容： Hbase系统搭建与部署，Hb ... -
基于HBase的海量微博数据高效存储解析
2015-10-20 17:15 761通过分析HBase的特点， ... -
Hadoop 2.0+YARN启动脚本分析与实战经验
2015-10-16 23:38 570start-all.sh脚本现在已经废弃，推荐使用start- ... -
windows7+eclipse+hadoop2.5.2环境配置
2015-10-11 23:45 330http://www.dataguru.cn/thread-4 ... -
YARN ResourceManager调度器的分析
2015-10-11 23:39 318摘自：http://blogread.cn/it/articl ... -
Hadoop 新 MapReduce 框架 Yarn 详解
2015-10-11 23:08 494摘自：http://www.open-open.c ... -
yarn 启动时，nodemanager 成功，但是resourcemanager失败解决
2015-10-11 22:19 10418问题的描述; yarn 启动时，nodemanager 成功， ... -
hbase常识及habse适合什么场景
2015-09-18 14:15 339http://blog.csdn.net/lifuxiangc ...
相关推荐
本节将对 HDFS 的整体架构和基本实现机制进行简单介绍。 HDFS 整体架构 HDFS 是一个主从 Master/Slave 架构。一个 HDFS 集群包含一个 NameNode，这是一个 Master Server，用来管理文件系统的命名空间，以及调节...
HDFS读写流程&NameNode;工作机制流程图原件，用于修改和调整
Hadoop 是一个由Java 语言实现的软件框架，在一个计算机集群中对海量数据进行分布式计算，这个集群可 以支持上千个节点和PB 级别的数据... 在研究HDFS 的架构的基础上，设计实现了基于WEB 的HDFS 可视化文件访问系统．
3 HDFS 多安全级数据销毁机制 针对HDFS 不能彻底删除用户存储的数据的缺陷，文中设计了HDFS 的多安全级数据销毁机制，以达到数据的安全销毁。 3. 1 数据销毁技术 目前的数据销毁技术大致可以分两类：硬销毁...
第1章 HDFS 1 1．1 HDFS概述 1 1．1．1 HDFS体系结构 1 1．1．2 HDFS基本概念 2 1．2 HDFS通信协议 4 1．2．1 Hadoop RPC接口 4 1．2．2 流式接口 20 1．3 HDFS主要流程 22 1．3．1 HDFS客户端读流程 22 1．3．2 ...
HDFS概述，HDFS客户端操作，HDFS数据流，namenode工作机制，datanode工作机制，HDFS 高可用集群配置
Hadoop2.2.0中HDFS的高可用性实现原理讲述的是hadoop2.2的HDFS的高可用行原理，
HDFS多租户实现方案—北京蓝汛通信技术有限责任公司 刘刚
基于springboot+netty+redis+hdfs实现的一个线上分布式网盘系统，毕业设计项目，个人学习，课设等均可，项目经过测试，可完美运行！ 项目结构 项目主要分为一下几个模块 web-service 主要功能是页面展示，交互 ...
hdfs源码分析整理，分布式文件系统详细讲解。
一、Shell命令实现 第一步，启动Hadoop： start-dfs.sh 第二步，检测文件或目录是否存在： hdfs dfs -test -e 文件或目录名 第三步，查看检测结果： echo $? 若输出结果为0，则说明文件或目录存在，若为1，则说明...
大数据技术基础实验报告-调用Java API实现HDFS操作
06.HDFS版wordcount程序的开发实现--框架式开发.mp4
HDFS是Hadoop分布式计算的存储基础。HDFS具有高容错性，可以部署在通用硬件设备上，适合数据密集型应用，并且提供对数据读写的高吞 吐量。HDFS能 够提供对数据的可扩展访问，通过简单地往集群里添加节点就可以解决...
1. 分布式文件系统与HDFS 2. HDFS 的shell 操作 3. HDFS 体系结构与基本概念 ...6. HDFS 的RPC 机制 7. NameNode 的接口分析 8. DataNode 的接口分析 9. HDFS 的写数据过程分析 10. HDFS 的读数据过程分析
上传文件到HDFS的java代码实现。已经测试了，可以直接运行。
此主要为hdfs的入门总结，从认识到实战配置hdfs。以下为内容标题：分布式文件系统、HDFS简介、HDFS的存储原理、HDFS工作机制、HDFS文件读写操作、HDFS HA、HDFS联邦.....
从源代码角度深入分析Common和HDFS的架构设计与实现原理，为Hadoop的优化、定制和扩展提供原理性指导。从源代码中参透分布式技术精髓与分布式系统设计的优秀思想和方法。 由于cdsn上传文件大小的限制，只好将文件...
本实例依托于springmvc框架，采用maven作为jar包管理仓库，通过引用hadoop相关jar包，编写了hdfs操作工具类，能够在web端实现文件远程上传至hdfs。