HBase 使用阿里云 OSS-HDFS 服务（JindoFS 服务）作为底层存储§

HBase 是 Hadoop 生态中的实时数据库，有很高的写入性能。 OSS-HDFS 服务是阿里云推出新的存储空间类型，兼容 HDFS 接口, JindoSDK 支持 HBase 使用 OSS-HDFS 服务作为底层存储及 WAL 文件的存储实现存算分离，相对于本地HDFS存储，使用更加灵活，减少运维成本。

1. 下载 JindoSDK 包§

下载最新的 tar.gz 包 jindosdk-x.x.x.tar.gz (下载页面)。

2. 安装 jar 包§

解压下载的安装包，将安装包内的以下 jar 文件安装到 hadoop 的 classpath 下： * jindo-core-x.x.x.jar * jindo-sdk-x.x.x.jar

jindosdk-6.6.3 为例:

cp jindosdk-6.6.3/lib/jindo-core-6.6.3.jar <HADOOP_HOME>/share/hadoop/hdfs/lib/
cp jindosdk-6.6.3/lib/jindo-sdk-6.6.3.jar <HADOOP_HOME>/share/hadoop/hdfs/lib/

3. 配置 OSS-HDFS 服务实现类及 Access Key§

将 JindoSDK OSS 实现类配置到 Hadoop 的core-site.xml中。

<configuration>
    <property>
        <name>fs.AbstractFileSystem.oss.impl</name>
        <value>com.aliyun.jindodata.oss.OSS</value>
    </property>

    <property>
        <name>fs.oss.impl</name>
        <value>com.aliyun.jindodata.oss.JindoOssFileSystem</value>
    </property>
</configuration>

将已开启 OSS-HDFS 服务的 Bucket 对应的Access Key ID、Access Key Secret等预先配置在 Hadoop 的core-site.xml中。

<configuration>
    <property>
        <name>fs.oss.accessKeyId</name>
        <value>xxx</value>
    </property>

    <property>
        <name>fs.oss.accessKeySecret</name>
        <value>xxx</value>
    </property>
</configuration>

JindoSDK 还支持更多的 AccessKey 的配置方式，详情参考 JindoSDK OSS-HDFS 服务 Credential Provider 配置。

4. 配置 OSS-HDFS 服务 Endpoint§

访问 OSS/OSS-HDFS Bucket时需要配置 Endpoint。推荐访问路径格式为 oss://<Bucket>.<Endpoint>/<Object>，例如 oss://examplebucket.cn-hangzhou.oss-dls.aliyuncs.com/exampleobject.txt。配置完成后，JindoSDK会根据访问路径中的 Endpoint 访问对应的 OSS/OSS-HDFS 服务接口。

此外，您也可以通过以下方式配置默认 Endpoint，以简化访问路径格式为 oss://<Bucket>/<Object>，例如 oss://examplebucket/exampleobject.txt

<configuration>
    <property>
        <name>fs.oss.endpoint</name>
        <value>xxx</value>
    </property>
</configuration>

这种方式在访问路径中包含 OSS-HDFS 服务的 Endpoint，JindoSDK 会根据路径中的 Endpoint 访问对应的 OSS-HDFS 服务接口。 JindoSDK 还支持更多的 Endpoint 配置方式，详情参考 OSS-HDFS 服务 Endpoint 配置。

5. 指定 HBase 的存储路径§

需要修改hbase-site配置文件中的参数hbase.rootdir和hbase.wal.dir的值为 OSS-HDFS 服务地址，指定 HBase 的存储路径和 WAL 文件的存储路径。如果要释放集群，需要先 Disable table，确保 WAL 文件已经完全更新到 HFile。

参数	描述
hbase.rootdir	指定 HBase 的 ROOT 存储目录到 OSS-HDFS 服务。参数值为oss://bucket.endpoint/hbase-root-dir
hbase.wal.dir	指定 HBase 的 WAL 存储目录到 OSS-HDFS 服务。 参数值为oss://bucket.endpoint/hbase