HBase

映像构建

Node 角色映像构建

基于青云 trustysrvx64i (Ubuntu Server 14.04.5 LTS 64bit) 映像创建主机。

主机内执行以下命令：

wget https://raw.githubusercontent.com/QingCloudAppcenter/HBase/master/src/scripts/install.sh; sh install.sh node

修改 ubuntu 用户密码。
关闭主机，制作成新映像。

Client 角色映像构建

基于青云 trustysrvx64i (Ubuntu Server 14.04.5 LTS 64bit) 映像创建主机。

主机内执行以下命令：

wget https://raw.githubusercontent.com/QingCloudAppcenter/HBase/master/src/scripts/install.sh; sh install.sh client

修改 ubuntu 用户密码。
关闭主机，制作成新映像。

编译

Hadoop 2.7.7

mvn clean package -Pnative,dist -Drequire.snappy -Dsnappy.lib=/usr/local/lib -Dbundle.snappy -Drequire.openssl -Dopenssl.lib=/usr/lib/x86_64-linux-gnu -Dbundle.openssl -Dtar -DskipTests

HBase 2.0.6

mvn -DskipTests package assembly:single install

Phoenix 5.0.0

修改 pom.xml，将 hadoop 和 hbase 改为对应版本：

<!-- Hadoop Versions -->
<hbase.version>2.0.6</hbase.version>
<hadoop.version>2.7.7</hadoop.version>

不编译测试文件：
```
mvn install -Dmaven.test.skip=true
```
因 Phoenix 5.0.0 是根据 HBase 2.0 早期版本的实现，针对 2.0.6 版本需要进行部分代码修改：

Base64 问题

import org.apache.hadoop.hbase.util.Base64;
替换为：
import java.util.Base64;

Base64.decode(${param})
替换为：
Base64.getDecoder().decode(${param})

Base64.encodeBytes(${param})
替换为：
Bytes.toString(Base64.getEncoder().encode(${param}))
因引入了 Bytes，需要增加：
import org.apache.hadoop.hbase.util.Bytes;

SubsetConfiguration 问题

import org.apache.commons.configuration2.SubsetConfiguration;
替换为：
import org.apache.commons.configuration.SubsetConfiguration;

重载 getMetaPriorityQueueLength 函数问题

phoenix-core/src/main/java/org/apache/hadoop/hbase/ipc/PhoenixRpcScheduler.java 中增加：
@Override
public int getMetaPriorityQueueLength() {
    return delegate.getMetaPriorityQueueLength();
}

getRegionsFromMergeQualifier 无法找到的问题 HBase 2.0.6 版本中删除了该方法

IndexHalfStoreFileReaderGenerator.java 中做如下修改：

            if (result == null || result.isEmpty()) {
                List<RegionInfo> parents = MetaTableAccessor.getMergeRegions(ctx.getEnvironment().getConnection(),
                        region.getRegionInfo().getRegionName());
                if (parents == null || parents.isEmpty()) return reader;
                byte[] splitRow =
                        CellUtil.cloneRow(KeyValueUtil.createKeyValueFromKey(r.getSplitKey()));
                // We need not change any thing in first region data because first region start key
                // is equal to merged region start key. So returning same reader.
                if (Bytes.compareTo(parents.get(0).getStartKey(), splitRow) == 0) {
                    if (parents.get(0).getStartKey().length == 0
                            && region.getRegionInfo().getEndKey().length != parents.get(0).getEndKey().length) {
                        childRegion = parents.get(0);
                        regionStartKeyInHFile =
                                parents.get(0).getStartKey().length == 0 ? new byte[parents.get(0)
                                        .getEndKey().length] : parents.get(0).getStartKey();
                    } else {
                        return reader;
                    }
                } else {
                    childRegion = parents.get(1);
                    regionStartKeyInHFile = parents.get(1).getStartKey();
                }
                splitKey = KeyValueUtil.createFirstOnRow(region.getRegionInfo().getStartKey().length == 0 ?
                    new byte[region.getRegionInfo().getEndKey().length] :
                        region.getRegionInfo().getStartKey()).getKey();
            } else {
                RegionInfo parentRegion = MetaTableAccessor.getRegionInfo(result);
                regionStartKeyInHFile =
                        parentRegion.getStartKey().length == 0 ? new byte[parentRegion
                                .getEndKey().length] : parentRegion.getStartKey();
            }

CellComparatorImpl 构造方法参数问题两参数，增加为三参数：

public IndexMemStore() {
  this(new CellComparatorImpl(){
      @Override
      public int compare(Cell a, Cell b, boolean ignoreSequenceid) {
          return super.compare(a, b, true);
      }
  });
}

QingCloudAppcenter / HBase