华为云用户手册

安装迁移工具并检查迁移条件 从华为云开源镜像站下载最新版本的迁移工具安装包centos2hce2-*.rpm。 *表示迁移工具版本，本节以centos2hce2-1.0.0-0.0.30.hce2.x86_64.rpm安装包示例。由于迁移工具不断更新，版本号也随之不断更新，操作过程中请适配为实际的安装包名称。 [root@localhost test]# wget https://repo.huaweicloud.com/hce/2.0/updates/x86_64/Packages/centos2hce2-1.0.0-0.0.30.hce2.x86_64.rpm //下载centos2hce2-*.rpm [root@localhost test]# ls //检查是否下载成功 centos2hce2-1.0.0-0.0.30.hce2.x86_64.rpm 安装迁移工具。 [root@localhost test]# rpm -ivh centos2hce2-1.0.0-0.0.30.hce2.x86_64.rpm --nodeps warning: centos2hce2-1.0.0-0.0.30.hce2.x86_64.rpm: Header V4 RSA/SHA256 Signature, key ID a8def926: NOKEY Verifying... ################################# [100%] Preparing... ################################# [100%] Updating / installing... 1:centos2hce2-1.0.0-0.0.6.hce2 ################################# [100%] 配置待迁移系统的系统软件数据的备份路径。 在系统切换前，迁移工具将自动备份系统软件的所有数据至备份路径。 执行vim /etc/centos2hce2.conf命令，在centos2hce2.conf配置文件中配置backup_dir字段，配置备份路径。backup_dir默认为/mnt/sdb/.osbak。 # backup dir backup_dir = "/mnt/sdb/.osbak" #配置原系统软件数据的备份路径 为避免迁移过程中系统数据的丢失，建议配置备份目录。 在系统迁移时，迁移工具会自动检查备份目录的空间。建议配置单独的数据盘（如/dev/sdb/，并将该分区挂载到/mnt/sdb/），避免因为空间不足导致的检查失败。 请勿将tmpfs类型的文件系统（如/dev、/run等）作为备份目录，系统重启后tmpfs类型文件系统内的文件会丢失。 设置系统迁移参数。 设置web迁移方式。 web迁移方式通过下载RPM包集合对系统迁移，因此要求在下载RPM包的过程中不能断网。 在centos2hce2.conf配置文件中，进行如下设置： [repo_relation] ..... # default yum source, val: web or iso default_yum_source = 'web' ..... # if web as source, web link config as follow web_link_dir = "https://repo.huaweicloud.com/hce/2.0/os/x86_64/;https://repo.huaweicloud.com/hce/2.0/updates/x86_64/" 表1 参数说明 参数 说明 default_yum_source 迁移方式，设置为'web'。 web_link_dir HCE OS的base repo源和updates repo源地址，多个repo源之间需用英文分号隔开。设置为https://repo.huaweicloud.com/hce/2.0/os/x86_64/;https://repo.huaweicloud.com/hce/2.0/updates/x86_64/ 配置isclose_modules参数，仅CentOS 8系列需要配置。 CentOS 8系列支持将RPM包集成为module的方式批量安装RPM包。HCE OS不支持此种安装方式。因此系统迁移前，须关闭module功能。 “yes”表示系统迁移前会自动关闭系统上的modules，默认为“yes”。 “no”表示系统迁移前不会自动关闭系统上的modules，且若检测到有modules开启时，迁移操作中断。 [system] # whether close modules, if value is no, system may be not migrate isclose_modules = "yes" 执行命令dnf module list可查看待迁移系统中所有运行的module。 执行命令dnf module list | grep '\[e\]'可查看待迁移系统开启的module。 执行centos2hce2.py --check all命令，检查当前系统配置是否满足迁移条件。 提示“Enviroment check passed!”时，表示满足迁移条件，可直接执行迁移操作。 提示“call migration failed”时，表示不满足迁移条件，请根据步骤6自动处理相关异常信息。 安装迁移工具依赖的软件。 执行centos2hce2.py --install all命令，迁移工具会先进行备份，接着系统自动安装迁移工具依赖的软件包，并进行迁移前相关预处理操作。 以下提示表明，已安装依赖的软件包及相关预处理操作，需再次执行步骤5进行环境检查。 2022-08-19 03:12:58,373-INFO-centos2hce2.py-[line:832]: Dependency packages already exist! 2022-08-19 03:12:58,373-INFO-centos2hce2.py-[line:891]: migrate install depend options finished

约束限制 仅HCE OS 2.0 x86架构支持使用毕昇编译器。 HCE OS原生的clang编译语言和毕昇编译器提供的clang编译语言不能同时使用。如果您已经安装原生的clang编译语言并需要使用它，就不能安装毕昇编译器。 在安装了毕昇编译器之后，如果需要使用原生的clang编译语言，可执行rpm -e bisheng-compiler命令删除毕昇编译器，然后打开新终端。在新终端中，就可以使用原生的clang编译语言。

安装毕昇编译器 确认repo源配置正常。 请检查默认的/etc/yum.repos.d/hce.repo配置文件中参数是否正确，正确的配置如下。 [base] name=HCE $releasever base baseurl=https://repo.huaweicloud.com/hce/$releasever/os/$basearch/ enabled=1 gpgcheck=1 gpgkey=https://repo.huaweicloud.com/hce/$releasever/os/RPM-GPG-KEY-HCE-2 [updates] name=HCE $releasever updates baseurl=https://repo.huaweicloud.com/hce/$releasever/updates/$basearch/ ...... 执行yum install bisheng-compiler命令安装工具。 执行source /usr/local/bisheng-compiler/env.sh命令，导入环境变量。 如果打开了新的终端，需要在新的终端重新导入环境变量才能正常使用毕昇编译器。 检查工具是否安装成功。 执行clang -v查看工具的版本号。若返回结果包含毕昇编译器版本信息，表示工具安装成功。

使用毕昇编译器 编译运行C/C++程序。 clang [command line flags] hello.c -o hello.o ./hello.o clang++ [command line flags] hello.cpp -o hello.o ./hello.o 编译运行Fortran程序。 flang [command line flags] hello.f90 -o hello.o ./hello.o 指定链接器。 毕昇编译器指定的链接器是LLVM的lld，若不指定它则使用默认的ld。 clang [command line flags] -fuse-ld=lld hello.c -o hello.o ./hello.o

约束限制 由于x2hce-ca工具安装会有额外资源包引入，不建议在业务环境中运行。x2hce-ca工具仅支持在HCE OS 2.0的操作系统进行安装使用。 x2hce-ca工具支持扫描的文件格式为jar、py、pyc、bin、sh、rpm、ko。其中，只支持扫描源码为C、C++、Java和Python语言的rpm格式文件。 x2hce-ca工具不支持回滚，任务异常中断后会在/opt/x2hce-ca/目录下产生残留文件，并不影响工具再次使用。异常中断的任务请重新执行。 安装和运行x2hce-ca工具的系统参数要求如下所述。 表1 运行x2hce-ca工具的操作系统参数要求 硬件类型 说明 架构 x86_64 CPU 双核及以上 内存 系统空闲内存要求8GB及以上 硬盘 20GB及以上 父主题： x2hce-ca应用兼容性评估

通过wget命令下载RPM包 本节以下载hadoop-3.1-common-3.1.4-4.oe2203.noarch.rpm为例，介绍使用wget命令下载并安装RPM包。 点击这里登录openEuler社区。 在OS/everything目录下，选择aarch64/或者x86_64/系统架构目录，并打开“Packages/”目录。 查找所需要的RPM包，例如hadoop-3.1-common-3.1.4-4.oe2203.noarch.rpm。 选择此包后右击复制下载链接，执行wget命令下载RPM包。 检查是否下载成功。如下所示表示下载成功。 使用rpm -ivh hadoop-3.1-common-3.1.4-4.oe2203.noarch.rpm命令安装RPM包，如下所示表示安装成功。 如果安装过程中提示需要依赖其他的安装包，请根据同样的操作步骤先安装所依赖的安装包。

通过repo文件批量下载RPM包 本节以openEuler-22.03-LTS/everything/x86_64为例，介绍下载openEuler-22.03-LTS/everything/x86_64目录下的RPM包并使用yum命令安装。 首先确保虚拟机能访问https://repo.openeuler.org/openEuler-22.03-LTS/网址。 配置yum源。 进入/etc/yum.repos.d目录，新建一个openEuler.repo文件，并将以下内容复制到该文件里面。 由于openEuler.repo文件和HCE OS系统repo文件有冲突，请先将/etc/yum.repos.d目录下HCE OS原有的repo文件进行备份，并删除HCE OS原有的repo文件，再创建openEuler.repo文件。 [openeuler] name=openeuler baseurl=https://repo.openeuler.org/openEuler-22.03-LTS/OS/x86_64/ gpgcheck=1 enabled=1 priority=3 gpgkey=https://repo.openeuler.org/openEuler-22.03-LTS/OS/x86_64/RPM-GPG-KEY-openEuler [everything] name=everything baseurl=https://repo.openeuler.org/openEuler-22.03-LTS/everything/x86_64 gpgcheck=1 enabled=1 priority=3 gpgkey=https://repo.openeuler.org/openEuler-22.03-LTS/everything/x86_64/RPM-GPG-KEY-openEuler 执行yum clean all清除原来yum源的缓存信息。 执行yum makecache连接新配置的源 ，如下图所示表示repo源连接成功。 安装RPM包，以hadoop-3.1-common包为例。 执行yum list命令查看是否存在该包。 执行yum -y install hadoop-3.1-common命令来安装此包，如下所示表示该包已经安装成功。 恢复repo文件。 安装所需的openEuler包后，删除openEuler.repo文件，并将步骤2中删除的repo文件通过备份恢复。

memcg OOM优先级接口功能说明 接口 说明 取值 memcg_qos_enable memcg OOM优先级策略开关。 0：不开启优先级配置。当OOM时，按照系统原有的OOM操作结束进程，结束内存消耗最大的进程，回收内存。 1：开启优先级配置并以cgroup为粒度。当OOM时，结束优先级低的cgroup所有进程，并回收内存。 2：开启优先级配置并以单个进程个为粒度。当OOM时，结束优先级低的cgroup中的最大的一个进程，并回收内存。 整数形式，取值范围为0~2，默认值为0。 memory.qos_level 配置cgroup组优先级。值越小cgroup组优先级越低。 当memcg OOM时，会以当前cgroup组为父节点，查找子节点优先级最低的cgroup组中内存使用最大的进程，结束该进程，回收内存。 当OOM时，对于优先级相等的cgroup组，会根据组的内存使用量进行二次排序，选择内存使用最大的进行OOM操作。 说明： 使用memory.qos_level的前提条件为memcg_qos_enable取值须为1或2。 新创建的cgroup组的memory.qos_level值默认会继承父节点的memory.qos_level的值，但是子节点的优先级不受父节点的限制。 如果修改cgroup组父节点的优先级，子节点的优先级会自动调整，和父节点保持一致。 整数形式，取值范围为-1024~1023，默认值为0。

背景信息 现有操作系统中，支持配置离线业务和在线业务。当内存发生OOM时，会优先选择离线业务控制组中的消耗内存最多的进程，结束进程回收内存，但是对于某些离线业务也有核心业务，因此会造成很大的影响。 针对这个问题，HCE OS调整了OOM时回收内存的策略，增加了配置cgroup优先级的功能。 内存紧张情况下内核会遍历cgroup，对低优先级的cgroup结束进程，并回收内存，使离线业务中重要的业务可以存活下来。

需求背景 在业务混部场景中，Linux内核调度器需要为高优先级任务赋予更多的调度机会，并需要把低优先级任务对内核调度带来的影响降到最低。原有的在线、离线两级混部调度无法满足业务需求。 为解决此问题，HCE OS 2.0内核cpu cgroup支持多级混部调度，提供cgroup接口/sys/fs/cgroup/cpu/cpu.qos_level将任务调度级别扩展到5个级别，支持用户对每个cgroup组单独设置优先级。

使用镜像归档文件启动容器 确认HCE OS的repo源配置正常。 请检查默认的/etc/yum.repos.d/hce.repo配置文件中的repo源地址是否正确，正确的配置如下。 [base] name=HCE $releasever base baseurl=https://repo.huaweicloud.com/hce/$releasever/os/$basearch/ enabled=1 gpgcheck=1 gpgkey=https://repo.huaweicloud.com/hce/$releasever/os/RPM-GPG-KEY-HCE-2 [updates] name=HCE $releasever updates baseurl=https://repo.huaweicloud.com/hce/$releasever/updates/$basearch/ ...... 安装docker软件包。 yum install docker -y 使用镜像归档文件创建容器镜像。 mv /tmp/docker_rootfs/hce-docker.x86_64.tar.xz . docker import hce-docker.x86_64.tar.xz 执行docker images命令可查看到容器镜像ID为6cfefae3a541。 创建镜像可使用如下命令指定镜像的REPOSITORY和TAG参数。 docker import [OPTIONS] file|URL|- [REPOSITORY[:TAG]] 在容器中运行镜像bash文件。 运行如下命令后，如果shell视图改变，表示成功进入容器bash。 docker run -it 6cfefae3a541 bash

前提条件 HCE OS中已安装dnf组件，dnf命令可用。 [root@localhost bin]# dnf usage: dnf [options] COMMAND List of Main Commands: alias List or create command aliases autoremove remove all unneeded packages that were originally installed as dependencies check check for problems in the packagedb check-update check for available package upgrades clean remove cached data deplist [deprecated, use repoquery --deplist] List package's dependencies and what packages provide them distro-sync synchronize installed packages to the latest available versions downgrade Downgrade a package ......

升级步骤 检查待更新的RPM包。 执行dnf list updates命令查看所有待更新的RPM包列表。 [root@localhost bin]# dnf list updates Last metadata expiration check: 6:49:11 ago on Tue 28 Jun 2022 01:55:35 PM CST. hce-config.x86_64 3.0-66.hce2 hce-latest-release.x86_64 2.0-1656179342.2.0.2206.B032.hce2 irqbalance.x86_64 3:1.8.0-7.h9.hce2 kernel.x86_64 5.10.0-60.18.0.50.h316_1.hce2 kernel-tools.x86_64 5.10.0-60.18.0.50.h316_1.hce2 kernel-tools-libs.x86_64 5.10.0-60.18.0.50.h316_1.hce2 kexec-tools.x86_64 2.0.23-4.h8.hce2 libcurl.x86_64 7.79.1-2.h4.hce2 libssh.x86_64 0.9.6-2.h3.hce2 libstdc++.x86_64 10.3.1-10.h10.hce2 libxml2.x86_64 2.9.12-5.h5.hce2 openssh.x86_64 8.8p1-2.h12.hce2 openssh-clients.x86_64 8.8p1-2.h12.hce2 openssh-server.x86_64 8.8p1-2.h12.hce2 Obsoleting Packages dnf-data.noarch 4.10.0-3.h6.hce2 dnf.noarch 4.10.0-3.h5.hce2 dnf-data.noarch 4.10.0-3.h6.hce2 dnf-data.noarch 4.10.0-3.h5.hce2 执行dnf list updates --security命令，仅查看安全更新涉及的RPM包。 [root@localhost bin]# dnf list updates --security Last metadata expiration check: 0:00:03 ago on Fri 08 Jul 2022 04:45:56 PM CST. No security updates needed, but 2 updates available 升级待更新的RPM包。 执行dnf update命令升级所有待更新的RPM包，包括安全更新涉及的RPM包和漏洞修复。执行命令输出信息中会显示组件的目标版本信息(Version列）。 [root@localhost bin]# dnf update Last metadata expiration check: 7:12:18 ago on Tue 28 Jun 2022 01:55:35 PM CST. Dependencies resolved. ================================================================================================ Package Arch Version Repo Size ================================================================================================ Installing: kernel x86_64 5.10.0-60.18.0.50.h316_1.hce2 hce2 47 M Upgrading: hce-config x86_64 3.0-66.hce2 hce2 13 k hce-latest-release x86_64 2.0-1656179342.2.0.2206.B032.hce2 hce2 5.2 k kernel-tools x86_64 5.10.0-60.18.0.50.h316_1.hce2 hce2 230 k kernel-tools-libs x86_64 5.10.0-60.18.0.50.h316_1.hce2 hce2 62 k kexec-tools x86_64 2.0.23-4.h8.hce2 hce2 400 k libcurl x86_64 7.79.1-2.h4.hce2 hce2 284 k libssh x86_64 0.9.6-2.h3.hce2 hce2 194 k libstdc++ x86_64 10.3.1-10.h10.hce2 hce2 535 k libxml2 x86_64 2.9.12-5.h5.hce2 hce2 659 k logrotate x86_64 3.18.1-1.h2.hce2 hce2 60 k mdadm x86_64 4.1-5.h2.hce2 hce2 331 k nftables x86_64 1:1.0.0-1.h3.hce2 hce2 303 k perl x86_64 4:5.34.0-3.h5.hce2 hce2 3.2 M perl-libs x86_64 4:5.34.0-3.h5.hce2 hce2 1.8 M Installing dependencies: grub2-tools-efi x86_64 1:2.06-3.h5.hce2 hce2 472 k Transaction Summary ================================================================================================ Install 2 Packages Upgrade 72 Packages Total download size: 105 M Is this ok [y/N]: 执行dnf update --security命令，仅升级安全更新涉及的RPM包。 [root@localhost bin]# dnf update --security Last metadata expiration check: 7:15:16 ago on Tue 28 Jun 2022 01:55:35 PM CST. No security updates needed, but 73 updates available Dependencies resolved. Nothing to do. Complete! 升级成功后，请及时确认业务运行情况。 升级过程中遇到的常见问题： 安全规范要求chronyd服务在安装/升级后默认处于disabled状态，所以从HCE-2.0.2206版本升级至新版本后，chronyd服务会处于disabled状态。如有需要，您可通过systemctl enable chronyd使能该服务，并通过systemctl start chronyd启动该服务。

关于通用漏洞披露（CVE） CVE（Common Vulnerabilities and Exposures）是已公开披露的各种计算机安全漏洞，所发现的每个漏洞都有一个专属的CVE编号。Huawei Cloud EulerOS为保障系统安全性，紧密关注业界发布的CVE信息，并会及时修复系统内各类软件漏洞，增强系统的安全性。您可在Huawei Cloud EulerOS的安全公告中查看安全更新记录。 Huawei Cloud EulerOS 1.1安全公告 Huawei Cloud EulerOS 2.0安全公告 根据CVSS（Common Vulnerability Scoring System）评分，Huawei Cloud EulerOS将安全更新分为四个等级： Critical（高风险，必须安装） Important（较高风险，强烈建议安装） Moderate（中等风险，推荐安装） Low（低风险，可选安装） 若您目前已安装Huawei Cloud EulerOS 1.1及以上版本，您可以根据以下操作查询并安装安全更新，修复系统漏洞。本章节以Huawei Cloud EulerOS 2.0为例举例说明。 Huawei Cloud EulerOS系统版本不同，部分显示可能与本文档存在差异，以实际显示为准。 父主题： 对HCE OS进行安全更新

约束与限制 IAM用户组被删除后，LakeFormation云服务数据权限中的相关权限策略，需要用户手动清理删除。 建库时路径不能为所在Catalog父路径或相同路径，不能为同一Catalog下其他数据库（除default外）路径的父路径、子路径或相同路径。 创建数据库的存储位置必须在所属Catalog的存储位置之下。 用户自定义创建的Catalog对象及其子元数据对象，暂不支持授权和细粒度权限控制。 LakeFormation数据权限单次授权，授权主体不能超过20个，元数据对象不能超过10个。 LakeFormation中，总分区数量不超过1,000,000,000。 LakeFormation不支持跨Region的元数据和权限统一管理。 LakeFormation不支持跨实例的元数据和权限统一管理。 一个数据表中，每个分区所对应的Partition Value组合必须在全表唯一。 由Partition Keys和Partition Values组合构成的Partition Name，总长度不能超过1000字符。 元数据的参数描述中，1个中文字符对应3个字节。 LakeFormation依赖OBS服务的并行文件系统，OBS需要基于大数据存算分离场景进行分离部署；LakeFormation元数据的存储位置对应OBS路径，与存算分离架构的MRS等大数据集群对接。OBS并行文件系统需要支持AccessLabel特性。 LakeFormation中，不同实例的同名角色在授权时对应的OBS AccessLabel相同，不建议在同一个区域中的不同实例创建同名角色。

GSL权限 默认情况下，管理员创建的IAM用户没有任何权限，需要将其加入用户组，并给用户组授予策略或角色，才能使得用户组中的用户获得对应的权限，这一过程称为授权。授权后，用户就可以基于被授予的权限对云服务进行操作。 由于缓存的影响，对用户、用户组授予全球SIM联接系统策略后，需要等待10-15分钟策略才能生效。 若通过控制台使用全球SIM联接服务，请在授予系统策略后退出登录，之后重新登录继续使用。 若使用全球SIM联接的应用侧API，请在授予系统策略后，重新获取IAM用户token。

约束与限制 暂不支持跨VPC。 CloudTable的ELB功能仅支持独享型ELB规格，不支持共享型ELB绑定操作。 绑定ELB时，需创建和集群相同的区域、VPC以及企业项目的ELB进行绑定。 解绑ELB时，CloudTable侧会清除ELB中集群相关信息，但并不会删除用户ELB，请注意ELB本身的计费影响，防止不必要的成本支出。 如需要公网IP或者域名访问ELB集群时，请通过ELB服务管理页面进行EIP绑定或者域名操作。 elb绑定后只对接FE节点的9030端口。 集群绑定elb后，需要把elb权限委托给CloudTable云服务，CloudTable云服务才有权限操作elb资源。

绑定弹性负载均衡（ELB） 登录CloudTable管理控制台。 单击“集群管理”。默认显示用户所有的集群列表。 在集群列表中，单击指定集群名称进入集群“详情页面”。 在网络配置模块单击“绑定弹性负载均衡”，选择需要绑定到此集群的ELB，如果不存在ELB，可在ELB服务页面创建完成后，在CloudTable侧刷新进行重新绑定即可。 图1 绑定ELB 单击“确定”按钮，绑定需要一定时间，请耐心等待。 绑定成功后。进去“详情页面”中的网络配置区域，可以查看ELB对外服务提供的IP地址。 进入负载均衡服务控制台，单击绑定的ELB名称，切换到“后端服务器组”页签，检查集群节点是否被正确绑定到ELB中。 图2 查看后端服务器组 水平扩容时，自动将新增节点绑定。 如果没有弹性负载均衡器，请弹性负载均衡页面创建，详情参见创建ELB。

解绑弹性负载均衡（ELB） 登录CloudTable管理控制台。 单击“集群管理”。默认显示用户所有的集群列表。 在集群列表中，单击指定集群名称进入集群“详情页面”。 单击“解绑弹性负载均衡”，进行ELB解绑操作。 图3 解绑ELB 单击“确定”按钮，解绑需要一定时间，请耐心等待。 进入负载均衡服务控制台，单击解绑的ELB名称，切换到“后端服务器”页签，检查集群节点是否已被删除。 删除集群时，可以解绑弹性负载均衡器（ELB）。

使用CopyTable工具导入数据 准备Linux弹性云服务器作为客户端主机，并在客户端主机上部署CloudTable客户端工具。 具体操作请参见使用HBase Shell访问集群。 在部署客户端工具时，ZK链接地址请配置为源表所在的CloudTable集群的“ZK链接地址（内网）”。 （可选）如果要将表复制到另一个集群，请获取CloudTable目标集群的“ZK链接地址（内网）”。 登录表格存储服务管理控制台，在左侧导航树单击集群管理，然后在集群列表中找到所需要的集群，并获取相应的“ZK链接地址（内网）”。 在使用CopyTable复制表数据前，需要先确保在CloudTable目标集群中目标表已经存在。如果目标表不存在，请先创建目标表。 创建表的具体步骤，请参考创建HBase集群。 在客户端主机，打开命令行终端窗口，进入客户端工具安装目录的hbase目录下，然后执行CopyTable命令导入数据到CloudTable集群。 命令示例如下，该示例是将“TestTable”表指定1小时范围内的数据复制到目标集群： cd ${客户端工具的安装目录}/hbase ./bin/hbase org.apache.hadoop.hbase.mapreduce.CopyTable --starttime=1265875194289 --endtime=1265878794289 --peer.adr=${CloudTable目标集群的“ZK链接地址”}:/hbase --families=myOldCf:myNewCf,cf2,cf3 TestTable

环境准备 要将表复制到另一个集群，请先获取CloudTable目标集群的“ZK链接地址（内网）”。 登录表格存储服务管理控制台，在左侧导航树单击集群管理，然后在集群列表中找到所需要的集群，并获取相应的“ZK链接地址（内网）”。 在复制表数据前，需要先确保在CloudTable目标集群中目标表已经存在。如果目标表不存在，请先创建目标表。 创建表的具体步骤，请参考创建HBase集群。 下载样例代码，然后参考准备开发环境章节准备开发环境。 如果您不准备使用样例代码的工程，需要将下载的样例代码中“cloudtable-example\lib”目录下的jar包拷贝到您的项目中，并在项目工程中将这些Jar包添加到依赖路径中。

修订记录 发布日期 修订说明 2024-04-15 第二十六次发布。 修改章节如下： 创建HBase集群 创建ClickHouse集群 创建Doris集群 2024-03-04 第二十五次发布。 新增章节如下： HBase监控页面 ClickHouse数据迁移 修改章节如下： 创建HBase集群 HBase集群水平扩容 2024-01-11 第二十四次发布。 修改章节如下： 创建Doris集群 2023-10-16 第二十三次发布。 新增章节如下： HBase热点自愈 使用全局二级索引 Doris用户管理 Doris角色管理 Doris慢查询管理 Doris连接管理 ClickHouse集群水平扩容 ClickHouse监控集群 Doris参数配置 Doris安全通道 ClickHouse包周期计费操作 修改章节如下： 创建HBase集群 HBase集群管理列表简介 查看Doris集群基本信息 ClickHouse集群管理列表简介 2023-08-03 第二十二次发布。 新增章节如下： HBase冷热分离 ClickHouse集群管理 2023-7-11 第二十一次发布。 新增加章节如下： 扩容集群 2023-04-30 第二十次发布。 新增如下章节： Doris集群管理 Doris监控集群 2019-11-07 第十九次发布。 修改如下章节： HBase集群支持的监控指标 2019-08-16 第十八次发布。 修改如下章节： 使用HBase Shell访问集群 2019-05-25 第十七次发布。 新增如下章节： 创建用户并授权使用CloudTable 2019-05-08 第十六次发布。 修改如下章节： 准备弹性云服务器 2019-04-04 第十五次发布。 新增如下章节： HBase集群管理列表简介 HBase集群水平扩容 2019-01-15 第十三次发布。 新增如下章节： 使用CopyTable工具导入数据 数据表复制样例代码 修改如下章节： 创建HBase集群 查看HBase集群基本信息 准备弹性云服务器 2019-01-04 第十二次发布。 修改如下章节： 创建HBase集群 2018-12-07 第十一次发布。 新增如下章节： HBase集群管理简介 修改如下章节 创建HBase集群 使用HBase Shell访问集群 删除如下章节： 总览 2018-09-25 第十次发布。 修改如下章节： 使用HBase Shell访问集群 2018-09-10 第九次发布。 修改如下章节： 使用HBase Shell访问集群 2018-08-03 第八次发布。 修改如下章节： 创建HBase集群 使用HBase Shell访问集群 2018-06-30 第七次发布。 修改如下章节： 创建HBase集群 使用HBase Shell访问集群 删除如下章节： 应用开发指导：将该章节拆分为开发指南单独发布。 2018-05-31 第六次发布。 修改如下章节： 使用CDM迁移数据到CloudTable 使用Import工具导入数据 支持的关键操作审计日志 查看审计日志 2018-02-12 第四次发布。 新增如下章节： HBase集群支持的监控指标 设置告警规则 查看集群的监控信息 修改如下章节： 创建HBase集群 准备弹性云服务器 使用HBase Shell访问集群 2018-01-03 第三次发布。 新增如下章节： HBase参数配置 修改如下章节： 总览 创建HBase集群 查看HBase集群基本信息 2017-11-29 第二次发布。 修改如下章节： 创建HBase集群 使用HBase Shell访问集群 2017-09-30 第一次正式发布。

集群节点授权 登录MRS管理控制台。 在左侧导航栏中选择“现有集群”，选中一个运行中的集群并单击集群名称，进入集群信息页面。 在页面右上角单击“运维”，选择“集群节点授权”，选择授权给华为云支持人员访问本机的权限的“截止时间”。在截止时间之前支持人员有临时访问本机的权限。 配置完成后，勾选确认信息，单击“确定”，并进行二次确认。 问题解决后，在页面右上角单击“运维”，选择“取消集群节点授权”为华为云支持人员取消访问权限。

使用限制 请在低业务负载时间段进行滚动重启操作。 例如：在滚动重启kafka服务时候， 如果kafka服务业务吞吐量很高（100M/s以上的情况下），会出现kafka服务滚动重启失败的情况。 例如：在滚动重启HBase服务时候，如果原生界面上每个RegionServer上每秒的请求数超过1W，需要增大handle数来预防重启过程中负载过大导致的RegionServer重启失败。 重启前需要观察当前hbase的负载请求数（原生界面上每个rs的请求数如果超过1W，需要增大handle数来预防到时候负载不过来） 在集群Core节点个数小于6个的情况下，可能会出现业务短时间受影响的情况。 请优先使用滚动重启操作来重启实例或服务，并勾选“仅重启配置过期的实例”。

典型场景操作步骤 选择“现有集群”，单击集群名称进入集群详情页面。 单击“组件管理”，选择HBase，进入HBase服务页面。 单击“服务配置”页签，修改HBase某个参数并保存配置，根据界面提示进行保存。 MRS 3.x之前版本存在“重新启动受影响的服务或实例”参数，请勿勾选，该处重启是普通重启方式，会并发重启所有服务或实例，引起业务断服。 保存配置完成后，单击“完成”。 选择“服务状态”页签。 在“服务状态”页签单击“更多”，选择“滚动重启服务”。 图6 服务状态-滚动重启（以MRS 1.9.2版本为例） 弹出“滚动重启服务”页面，勾选“仅重启配置过期的实例”，单击确定，开始滚动重启。 图7 配置滚动重启服务 滚动重启任务完成后，单击“完成”。 图8 滚动重启任务完成

操作步骤 登录MRS管理控制台。 选择“现有集群”，选中一个运行中的集群并单击集群名，进入集群基本信息页面。 选择“作业管理”。 在需要克隆作业的对应的“操作”列中，单击“克隆”，弹出“克隆作业”对话框。 配置克隆参数。 若无参数修改，无需执行本步骤。 若有参数修改，根据实际情况填写参数，单击“确定”下发克隆作业。 命令参考（由添加作业时的“运行程序参数”与“执行程序参数”组成）：在原有的命令后，按“, {新参数}”的格式继续新增参数。 增加新的运行程序参数：新的命令参考是“运行程序参数, {新的运行程序参数}, 执行程序参数”。 增加新的执行程序参数：新的命令参考是“运行程序参数, 执行程序参数, {新的执行程序参数}”。 比如原有的命令参考为： -D, 10, -F, 12, abc ，增加新的运行程序参数时，则新的命令参考为：-D, 10, -F, 12, -G, 18, abc；增加新的执行程序参数时，则新的命令参考为：-D, 10, -F, 12, abc, efg。用户根据实际需求按照该规则（, 新参数）追加新的参数。 服务配置参数：在原有的参数后，按“, {key}={value}”的格式添加新的服务配置参数。比如原有参数为appender.out.strategy.max=10，则新的服务参数为：appender.out.strategy.max=10, appender.err.strategy.max=15。用户根据实际需求按照该规则（, {key}={value}）追加新的参数。 克隆作业时，逗号+空格的格式只能在两个参数间存在；若存在于参数中，作业可能执行失败。 在原有参数后继续添加参数，逗号后需要有空格，否则作业可能执行失败。 克隆的作业返回参数不含有fs.obs.access.key、fs.obs.secret.key，若需要fs.obs.access.key、fs.obs.secret.key，需在“服务配置参数”中添加。 单击“确定”下发克隆作业。 作业克隆成功后，作业状态为“已完成”状态。

告警解释 系统以用户配置的告警周期（metrics.reporter.alarm.job.alarm.rocksdb.metrics.duration，默认180s）检查作业RocksDB监控数据，如果作业RocksDB的Pending Flush请求数持续达到flush/compaction线程数的n倍，则发送告警。当作业RocksDB的Pending Flush请求数小于或等于阈值，则告警恢复。 flush/compaction线程数：参数“state.backend.rocksdb.thread.num”的值，默认值2，开启SPINNING_DISK_OPTIMIZED_HIGH_MEM的默认值为4。 n倍：参数“metrics.reporter.alarm.job.alarm.rocksdb.background.jobs.multiplier”的值，默认值2。

MRS集群节点简介 MRS集群由多个弹性云服务器节点组成，根据节点的不同规格，系统以节点组的方式进行管理，不同的节点组一般选用不同的云服务器规格。根据节点上部署的组件角色的不同，集群内的节点类型可分为Master节点、Core节点、Task节点，具体功能说明如表1所示。 表1 集群节点分类 节点类型 功能 Master节点 MRS集群管理节点，负责管理和监控集群。在MRS管理控制台选择“现有集群”，选中一个运行中的集群并单击集群名，进入集群信息页面。在“节点管理”中查看节点名称，名称中包含“master1”的节点为Master1节点，名称中包含“master2”的节点为Master2节点。 Master节点可以通过弹性云服务器界面的VNC方式登录，也可以通过SSH方式登录，并且Master节点可以免密码登录到Core节点。 系统自动将Master节点标记为主备管理节点，并支持MRS集群管理的高可用特性。如果主管理节点无法提供服务，则备管理节点会自动切换为主管理节点并继续提供服务。 查看Master1节点是否为主管理节点，请参见如何确认主备管理节点。 Core节点 MRS集群工作节点，负责处理和分析数据，并存储过程数据。 在MRS集群详情的“节点管理”页面，节点类型包含“Core”的节点组所包含的节点为Core节点。 Task节点 计算节点，集群计算资源不足时通过配置弹性伸缩策略实现自动扩缩容。 在MRS集群详情的“节点管理”页面，节点类型为“Task”的节点组所包含的节点为Task节点。 如果数据节点组内除基础必选角色外仅部署了NodeManager（Yarn）角色或Supervisor（Storm）角色，则该节点组为Task类型节点组。 MRS集群节点支持用户远程登录，远程登录包含界面登录和SSH登录两种方式： 界面登录：直接通过弹性云服务器管理控制台提供的远程登录功能，登录到集群Master节点的Linux界面。 SSH登录：仅适用于Linux弹性云服务器。您可以使用远程登录工具（例如PuTTY），登录弹性云服务器。此时，需要该弹性云服务器绑定弹性IP地址。 Master节点申请和绑定弹性IP，请参见为弹性云服务器申请和绑定弹性公网IP。 可以使用密钥方式也可以使用密码方式登录Linux弹性云服务器。 当您使用密钥方式访问集群节点，需要以root用户登录，详细步骤请参见登录弹性云服务器（SSH密钥方式）。 当您使用密码方式访问集群节点，详细步骤请参见登录弹性云服务器（SSH密码方式）。 父主题： 登录集群

告警解释 系统每30秒周期性检测主机中omm用户D状态和Z状态进程数，并把实际进程数和阈值相比较。主机D状态和Z状态进程数默认提供一个阈值范围。当检测到进程数超出阈值范围时产生该告警。 平滑次数为1，主机中omm用户D状态和Z状态进程总数小于或等于阈值时，告警恢复；平滑次数大于1，主机中omm用户D状态和Z状态进程总数小于或等于阈值的90%时，告警恢复。 主机Z状态进程数检测功能适用于MRS 3.2.0及之后版本。

为集群增加标签 创建集群时为集群增加标签 登录MRS管理控制台。 单击“购买集群”，进入购买集群页面。 在购买集群页面，选择“自定义购买”。 参考购买自定义集群配置集群软件配置和硬件配置信息。 勾选“高级配置”右侧的“现在配置”，在标签栏输入新添加标签的键和值。 图1 添加标签 为已有集群增加集群标签 登录MRS管理控制台。 在左侧导航栏中选择“现有集群”。选中一个运行中的集群并单击集群名称，进入集群基本信息页面。 选择“标签管理”页签，进入标签管理界面。 单击“添加/编辑标签”（若首次添加标签则为单击“添加标签”），在弹出的对话框输入新添加标签的键和值，单击“添加”。 用户也可以通过启用默认标签为集群增加集群标签。默认标签会为集群和每个节点添加默认标签，并占用2个标签配额。 单击“确定”添加标签。