ES配置

ES分词器安装 由于elasticsearch默认的分词器是全文分词,需要安装ik分词器。
进入到bin目录中
山东大学创新实训2020/6/15
./bin/elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.7.1/elasticsearch-analysis-ik-7.7.1.zip
山东大学创新实训2020/6/15

安装成功

这里就看最后怎么做了,如果确定是分布式的。
山东大学创新实训2020/6/15
就把es 这玩意copy几个,看你准备几个节点了
一般三个节点都行,但是我估摸着用一个就够了,

如果做成分布式的。
山东大学创新实训2020/6/15

我还是讲下吧
打开yml配置文件
山东大学创新实训2020/6/15
这里确定集群的名称,节点必须确保一样
山东大学创新实训2020/6/15
这个es服务叫啥,node-1
山东大学创新实训2020/6/15
打开服务
Host就是节点的ip地址 如果本地改成127.0.0.1
端口自己设默认9200
多节点jian3数据传输
加上
Transport.tcp.port: 9300
http.cors.enabled: true
http.cors.allow-orgin: “*”
开头小写,中间有空格
山东大学创新实训2020/6/15
Seed 就是发现节点找到节点 host1写成 “ip(单机127.0.0.1):9300”

Master 设置节点哪几个主节点 node-? 写ip(单机127.0.0.1):9300

上面每个都要设置啊才能确保运行的一致性。

先看看es状态
http://127.0.0.1:9200/_cat/health
山东大学创新实训2020/6/15
Green就好

KIBANA配置

先改成中文吧,好看
山东大学创新实训2020/6/15
山东大学创新实训2020/6/15

变ui了好看????
山东大学创新实训2020/6/15

点开下面的展开
山东大学创新实训2020/6/15
这里是可视化的结果,可以看到确实做了一部分的统计,但是太少了。
山东大学创新实训2020/6/15
山东大学创新实训2020/6/15
主要在这里创建mapping
山东大学创新实训2020/6/15
PUT /intrain
{
“settings”: {
“number_of_shards”: 1,
“number_of_replicas”: 0
},
“mappings”: {
“properties”: {
“id”:{“type”: “integer”} ,
“content”:{“type”:“text”,“analyzer”: “standard”},
“comment_time”:{“type”: “date”,“format”: “yyyy-MM-dd HH:mm:ss”},
“comment”:{“type”:“text”,“analyzer”: “standard”}
}
}
}
创建完后就可以再索引管理看到了
山东大学创新实训2020/6/15

先调到logstash配置做完后
山东大学创新实训2020/6/15
创建索引
山东大学创新实训2020/6/15
搜索特朗普
山东大学创新实训2020/6/15
配置完毕直接调python接口就行了

Logstash配置

山东大学创新实训2020/6/15
创建配置文件
山东大学创新实训2020/6/15
在这里我说一下我为什么用到了7.6.2
因为7.7存放路径有迅雷下载中文报错了又不方便移动用7.6.2处理
Conf文件
山东大学创新实训2020/6/15
山东大学创新实训2020/6/15

用下面命令运行

山东大学创新实训2020/6/15
山东大学创新实训2020/6/15
Csv和mogodb导入文件另说,在这里不再讨论

相关文章: