HBase的JavaAPI操作 HBase是一个分布式的NoSql数据库，在实际工作当中，我们一般都可以通过JavaAPI来进行各种数据的操作，包括创建表，以及数据的增删改查等等 创建maven工程 讲如下内容作为maven工程中pom.xml的repositories的内容 自动导包 创建myuser表 创建myuser表，此表有两个列族f1和f2 向表中添加数据 查询数据 初始化一批数据到HBase表当中，用于查询 Get查询 按照rowkey进行查询... ... [查看更多]
HBase的JavaAPI操作 HBase是一个分布式的NoSql数据库，在实际工作当中，我们一般都可以通过JavaAPI来进行各种数据的操作，包括创建表，以及数据的增删改查等等 创建maven工程 讲如下内容作为maven工程中pom.xml的repositories的内容 自动导包 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http:/... ... [查看更多]
Views: 11
进入HBase客户端命令操作界面 hadoop100执行以下命令，进入HBase的shell客户端 help 帮助命令 list 查看有哪些表 查看当前数据库中有哪些表 create 创建表 创建user表，包含info、data两个列族 使用create命令 put 插入数据操作 向表中插入数据 使用put命令 查询数据操作 通过rowkey进行查询 获取user表中row key为rk0001的所有信息（即所有cell的数据） 使用get命令 ... ... [查看更多]
进入HBase客户端命令操作界面 hadoop100执行以下命令，进入HBase的shell客户端 cd /opt/pkg/hbase-2.2.6/ bin/hbase shell help 帮助命令 help # 查看具体命令的帮助信息 help 'create' list 查看有哪些表 查看当前数据库中有哪些表 list create 创建表 创建user表，包含info、data两个列族 使用create命令 create 'user&... ... [查看更多]
Views: 8
HBase表的数据模型 hbase表 模型.xlsx rowkey行键 table的主键，table中的记录按照rowkey 的字典序进行排序 Row key行键可以是任意字符串(最大长度是 64KB，实际应用中长度一般为 10-100bytes) Column Family列族 列族或列簇 HBase表中的每个列，都归属与某个列族 列族是表的schema的一部分(而列不是)，即建表时至少指定一个列族 比如创建一张表，名为user，有两个列族，分别是info和data，建... ... [查看更多]
HBase表的数据模型 hbase表 模型.xlsx rowkey行键 table的主键，table中的记录按照rowkey 的字典序进行排序 Row key行键可以是任意字符串(最大长度是 64KB，实际应用中长度一般为 10-100bytes) Column Family列族 列族或列簇 HBase表中的每个列，都归属与某个列族 列族是表的schema的一部分(而列不是)，即建表时至少指定一个列族 比如创建一张表，名为user，有两个列族，分别是info和data，建... ... [查看更多]
Views: 4
HBase介绍 HBase基于Google的BigTable论文，是建立的HDFS之上，提供高可靠性、高性能、列存储、可伸缩、实时读写的分布式数据库系统。 在需要实时读、写随机访问、超大规模数据集时，可以使用HBase。 HBase的特点 极易扩展，海量存储 底层依赖HDFS，当磁盘空间不足的时候，只需要动态增加datanode节点就可以了 可以通过增加服务器来对集群的存储进行扩容 列式存储 HBase表的数据是基于列族进行存储的，列族是在列的方向上的划分。 高并发 支持高并发的读... ... [查看更多]
HBase介绍 HBase基于Google的BigTable论文，是建立的HDFS之上，提供高可靠性、高性能、列存储、可伸缩、实时读写的分布式数据库系统。 在需要实时读、写随机访问、超大规模数据集时，可以使用HBase。 HBase的特点 极易扩展，海量存储 底层依赖HDFS，当磁盘空间不足的时候，只需要动态增加datanode节点就可以了 可以通过增加服务器来对集群的存储进行扩容 列式存储 HBase表的数据是基于列族进行存储的，列族是在列的方向上的划分。 高并发 支持高并发的读... ... [查看更多]
Views: 25
Sqoop 安装 参考SQOOP安装配置 编写Sqoop脚本 点击UI界面Sqoop导出时需要输入导出的源路径，存储位置： 然后编写Sqoop脚本如下： 等待一段时间执行完成，查看mysql数据是否发生更新 ... ... [查看更多]
Sqoop 安装 参考SQOOP安装配置 编写Sqoop脚本 点击UI界面Sqoop导出时需要输入导出的源路径，存储位置： /tmp/project-mapred-result.txt 然后编写Sqoop脚本如下： #!/bin/bash /opt/pkg/sqoop/bin/sqoop export \ --connect jdbc:mysql://192.168.186.100:3306/shop \ --username root \ --password niit1234 \... ... [查看更多]
Views: 75
