elk

ELK (三)

前两篇笔记里面写了ELK的安装和ES的scroll查询与分片查询,关于查询的一些其他知识点以及我刚接触ELK的时候遇到的一些问题,准备在下面稍稍带过一下。 查询相关的内容 ES里面存储的可以认为是文档,它搜索的时候其实是“模糊查询”。 GET parsed-nginx-access-log/_search { "query": { "match_all": {} } } ES默认返回了10条记过,选择其中一条拿出来看 { "_index": "parsed-nginx-access-log", "_type": "doc", "_id&

  • Nemo
    Nemo
4 min read
elk

ELK(二)

上一篇文章里面讲到了elk的安装,这次来说一下如何进行查询。 进入kibana之后,是没有任何东西可以查的。首先要设置index。 在kibana的management里面,进入index object,在里面创建index。 创建完成之后,就可以在Discover里面进行查询了。Discover里面,左侧列出来的就是一些字段以及字段的类型。 我还是喜欢在Dev tools里面,使用json形式进行查询,如下图所示: 看上面这张图,hits字段里面的total表示命中了4229条记录,但实际返回的只有10个具体的记录,这是因为ES默认返回10条记录。 如果想要更多的记录,或者是某个分片的记录,可以用scroll查询或者是分片查询。 scroll查询 vs 分片查询 scroll查询 scroll查询分成两个部分 初始化scroll查询。 之后的滚动查询 先来看如何初始化scroll查询,看下面这张示例图:

  • Nemo
    Nemo
6 min read
elk

ELK (一)

ELK (一) 关于ELK ELK 而是一整套解决方案,是三个软件产品的首字母缩写,Elasticsearch,Logstash 和 Kibana。这三款软件都是开源软件,通常是配合使用。 Elasticsearch 是一个实时的分布式搜索和分析引擎,它可以用于全文搜索,结构化搜索以及分析。它是一个建立在全文搜索引擎 Apache Lucene 基础上的搜索引擎,分步式实时文件存储,所有对象都是文档。 Logstash 是一个具有实时渠道能力的数据收集引擎。几乎可以访问任何数据,支持多种外部应用。主要分为三部分: Shipper-发送日志数据;Broker-收集数据;Indexer-数据写入。

  • Nemo
    Nemo
5 min read