Solr数据迁移ES

2022-08-26 16:12:37 浏览数 (2)

作者介绍

yinanwu(吴沂楠),腾讯云 Elasticsearch 高级开发工程师

本文介绍通过开源社区提供的solr-to-es迁移工具,将Solr节点中的文档迁移到腾讯云ES中的方法。

使用限制

solr-to-es迁移工具仅支持迁移到腾讯云ES 6.4.3、6.8.2版本,迁移完成后可以在控

制台通过升级ES集群大版本升级到更高版本。

操作步骤

  1. 准备腾讯云ES 6.4.3或6.8.2版本集群。
  2. 准备一台Centos 7.2版本的CVM,网络和solr及ES集群通畅。
  3. 在CVM上安装Python 3版本(如3.7.3),通过pip安装elasticsearch 6.8.2版本、 pysolr 3.9.0版本:

    pip3 install elasticsearch==6.8.2pip3 install pysolr==3.9.0

  4. 在CVM上拉取solr-to-es源码,并安装:
代码语言:javascript复制
git clone https://github.com/o19s/solr-to-es.gitcd solr-to-espython3 setup.py install

使用solr-to-es迁移数据,下面的语句把solr里的collections中通过*:*查询到的文档分页导入到腾讯云ES的指定的索引和doc type中。更多使用方式,可以参考社区中详细的介绍:https://github.com/o19s/solr-to-es#readme

代码语言:javascript复制
solr-to-es --solr-query "*:*" --es-user "elastic" --es-password "腾讯云ES密码" http://{solr地址}:{solr端口}/solr/{collections名} http://{腾讯云ES地址}:9200 {ES索引名} {ES doc type}

例如:

代码语言:javascript复制
solr-to-es --solr-query "*:*" --es-user "elastic" --es-password "mypassword" http://127.0.0.1:8983/solr/node http://10.2.2.23:9200 my_index my_type

上面语句迁移完成后可以在ES中查询:

代码语言:javascript复制
curl -XGET -u 'elastic:mypassword' http://10.2.2.23:9200/my_index/my_type/_search

免费体验活动专区

Elasticsearch 新用户可享 2核4G,0元 体验 30 天!顺畅体验云上集群

推荐阅读

关注腾讯云大数据公众号

邀您探索数据的无限可能

点击“阅读原文”,了解相关产品最新动态

↓↓↓

0 人点赞