异构数据导入腾讯云Elasticsearch集群实践

2022-01-18 00:00:00 集群 镜像 腾讯 数据源 配置文件

腾讯云Elasticsearch服务提供在用户VPC内通过私有网vip访问集群的方式，用户可以通过Elasticsearch REST client编写代码访问集群并将自己的数据导入到集群中，当然也可以通过官方提供的组件如logstash和beats接入自己的数据。下面以官方的logstash和beats为例，介绍不同类型的数据源接入ES的方式。

前期准备

因为访问ES集群需要在用户VPC内进行，因此用户需要创建一台和ES集群相同VPC下的CVM实例或者Docker集群。

1. 使用logstash接入ES集群

CVM中访问ES集群

  • 安装部署logstash与java8

    wget https://artifacts.elastic.co/downloads/logstash/logstash-5.6.4.tar.gz
    tar xvf logstash-5.6.4.tar.gz
    yum install java-1.8.0-openjdk  java-1.8.0-openjdk-devel -y

    相关文章