阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过DataWorks将HBase数据同步到Elasticsearch
步骤一:环境准备创建阿里云Elasticsearch实例,并开启实例的自动创建索引功能。
具体操作,请参见创建阿里云Elasticsearch实例和配置YML参数。本文以通用商业版实例为例。
创建DataWorks工作空间。
创建工作空间时,所选地域需要与阿里云Elasticsearch一致。具体操作,请参见创建工作空间。
创建HBase集群并准备测试数据。
创建HBase集群时,所选地域、专有网络和虚拟交换机要与阿里云Elasticsearch保持一致。本文以创建标准版HBase集群为例,具体操作,请参见购买集群。
测试数据
使用put命令向数据表中插入数据,例如:put "student", "row1", "name:a", "xiaoming"。
使用scan命令查看表中的数据,例如:scan "student"。
步骤二:购买并创建DataWorks独享资源组
区间
登录DataWorks控制台。
选择相应地域后,在左侧导航栏,单击资源组列表。
购买独享数据集成资源。
创建一个独享数据集成资源。
具体操作,请参见新增和使用独享数据集成资源组。本文使用的配置如下,其中资源组类型选择独享数据集成资源组
单击已创建的独享资源组右侧的网络设置,参见绑定专有网络,为该独享资源组绑定专有网络。
独享资源部署在DataWorks托管的专有网络中。DataWorks需要与HBase集群和Elasticsearch实例的专有网络连通才能同步数据。而HBase集群和Elasticsearch实例在同一专有网络下,因此在绑定专有网络时,选择Elasticsearch实例所在专有网络和交换机即可。
单击已创建的独享资源组右侧的修改归属工作空间,为该独享资源组绑定目标工作空间。
具体操作,请参见新增和使用独享数据集成资源组。
步骤三:配置HBase白名单
无论是公网访问,还是VPC内网访问,均需要先将访问HBase的客户端IP地址加入到白名单中,才能连接到HBase集群。本文需要使用步骤一中创建的独享资源组,通过VPC内网访问HBase集群,因此在添加数据源前,需要将独享资源组绑定的交换机网段添加至HBase的访问白名单中,具体操作请参见设置白名单和安全组。
步骤四:在DataWorks中添加HBase和Elasticsearch数据源
进入DataWorks的数据集成页面。
在DataWorks控制台的左侧导航栏,单击工作空间列表。
找到目标工作空间,单击其右侧操作列下的数据集成。
在左侧导航栏,单击数据源。
在数据源管理页面,单击新增数据源。
在新增数据源对话框的大数据存储区域中,单击HBase。
在新增HBase数据源对话框中,填写数据源名称和配置信息。
使用的HBase版本不同,您需要填写不同的配置信息:
标准版及以下的版本:使用默认的配置信息,即ZK链接地址,同时需要手动增加hbaseVersion属性。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云服务器购买,阿里云国际账号免费注册]站点信息,可以排到首页最前端的位置,让更多人看到您的网站信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
“卡萨帝:你并不需要洗衣机,你需要洗护方案” -
网上兼职赚钱app哪个好 中国正在进行市场转型。 随着高净值人群的扩大和90、95后支出集团的兴起,高端支出市场不断扩大。 一个明显的信号是,投入更多的企业品牌开始重视高端企业
-
“雷军接受“灵魂拷问”:不上班的时候特别乐趣” -
直埋预制蒸汽保温管 【科技在线】 文/雷军 我和王源讨论了三个小时,孤独、谎言、梦想等20个灵魂拷问的王源负责认真解答,我也负责认真解答,但回答后,看来我负责搞笑 第1部分
-
浸水|智能防触电保护器|开关-安全智慧配电设备-华云智电技术(深圳)有限公 -
华云智电技术(深圳)有限公司主营浸水防触电保护器,智能防触电保护器,智能保护开关,安全智慧配电设备,浸水防触电,智电保护器,多年致力于浸水防触电保护器等电力行业高效节能
-
“工信部长苗圩:5G通信牌照发放将很快” -
唐山APP开发 【科技在线】 原标题:苗圩: 5g通信许可证马上就要发放了 作者:本报两会报道组 中证网信(本报两会新闻组)工信部长苗圩3月5日在人民大会堂接受5g通信牌照发放时间时,向中
-
最新阿里云国际版支付方式以及注册教程和方法 -
最新阿里云国际版支付方式以及注册教程和方法 专业为全球企业客户提供阿里云国际版开户注册、认证、充值等服务,通过开通阿里云国际版只需要一个邮箱,不需要PayPal信用卡就可以
-
护士资格证与护士执业证的区别!题王网tiw.cn -
很多护士分不清护士资格证和护士执业证的区别,甚至有的地区的护士就认为这两个是一体的,实际上并非这样。 经国家统一护士考试合格后发两证:执业证和资格证。 先发资格证,