Kibana（一张图片胜过千万行日志）

布满荆棘的人生 2022-04-11 08:08 390阅读 0赞

转自：[https://www.cnblogs.com/cjsblog/p/9476813.html][https_www.cnblogs.com_cjsblog_p_9476813.html]

[https://www.cnblogs.com/cjsblog/p/9476813.html][https_www.cnblogs.com_cjsblog_p_9476813.html]

Kibana是一个开源的分析和可视化平台，设计用于和Elasticsearch一起工作。

你用Kibana来搜索，查看，并和存储在Elasticsearch索引中的数据进行交互。

你可以轻松地执行高级数据分析，并且以各种图标、表格和地图的形式可视化数据。

Kibana使得理解大量数据变得很容易。它简单的、基于浏览器的界面使你能够快速创建和共享动态仪表板，实时显示Elasticsearch查询的变化。

**1.  安装Kibana**

--------------------

![874963-20180814191248737-811570641.png][]

![874963-20180814191520367-184155487.png][]

**2.  Kibana配置**

--------------------

[https://www.elastic.co/guide/en/kibana/current/settings.html][https_www.elastic.co_guide_en_kibana_current_settings.html]

**3.  访问Kibana**

--------------------

Kibana是一个Web应用程序，你可以通过5601来访问它。例如：localhost:5601 或者 http://YOURDOMAIN.com:5601

当访问Kibana时，默认情况下，Discover页面加载时选择了默认索引模式。时间过滤器设置为最近15分钟，搜索查询设置为match-all(\\\*)

**3.1.  检查Kibana状态**

http://localhost:5601/status

![874963-20180814193042396-1698058646.png][]

或者 http://192.168.101.5:5601/api/status 返回JSON格式状态信息

**4.  用Elasticsearch连接到Kibana**

--------------------

在你开始用Kibana之前，你需要告诉Kibana你想探索哪个Elasticsearch索引。第一次访问Kibana是，系统会提示你定义一个索引模式以匹配一个或多个索引的名字。

（提示：默认情况下，Kibana连接允许在localhost上的Elasticsearch实例。为了连接到一个不同的Elasticsearch实例，修改kabana.yml中Elasticsearch的URL，然后重启Kibana。）

为了配置你想要用Kibana访问的Elasticsearch索引：

1、访问Kibana UI。例如，localhost:56011 或者 http://YOURDOMAIN.com:5601

2、指定一个索引模式来匹配一个或多个你的Elasticsearch索引。当你指定了你的索引模式以后，任何匹配到的索引都将被展示出来。

（画外音：\*匹配0个或多个字符；  指定索引默认是为了匹配索引，确切的说是匹配索引名字）

3、点击“**Next Step**”以选择你想要用来执行基于时间比较的包含timestamp字段的索引。如果你的索引没有基于时间的数据，那么选择“**I don’t want to use the Time Filter**”选项。

4、点击“**Create index pattern**”按钮来添加索引模式。第一个索引模式自动配置为默认的索引默认，以后当你有多个索引模式的时候，你就可以选择将哪一个设为默认。（提示：Management > Index Patterns）

![874963-20180814200208889-480093301.png][]

![874963-20180814200220481-132250130.png][]

![874963-20180814200232910-1800632871.png][]

现在，Kibana已经连接到你的Elasticsearch数据。Kibana展示了一个只读的字段列表，这些字段是匹配到的这个索引配置的字段。

**5.  Discover**

--------------------

你可以从Discover页面交互式的探索你的数据。你可以访问与所选择的索引默认匹配的每个索引中的每个文档。你可以提交查询请求，过滤搜索结构，并查看文档数据。你也可以看到匹配查询请求的文档数量，以及字段值统计信息。如果你选择的索引模式配置了time字段，则文档随时间的分布将显示在页面顶部的直方图中。

![874963-20180814201551940-917551371.png][]

![874963-20180814202140065-1741268963.png][]

**5.1.  设置时间过滤**

![874963-20180814202528095-388522899.png][]

![874963-20180814202537854-228504795.png][]

![874963-20180814202546400-1628872682.png][]

**5.2.  搜索数据**

你可以在搜索框中输入查询条件来查询当前索引模式匹配的索引。在查询的时候，你可以使用Kibana标准的查询语言（基于Lucene的查询语法）或者完全基于JSON的Elasticsearch查询语言DSL。Kibana查询语言可以使用自动完成和简化的查询语法作为实验特性，您可以在查询栏的“选项”菜单下进行选择。

当你提交一个查询请求时，直方图、文档表和字段列表都会更新，以反映搜索结果。命中（匹配到的文档）总数会显示在工具栏中。文档表格中显示了前500个命中。默认情况下，按时间倒序排列，首先显示最新的文档。你可以通过点击“Time”列来逆转排序顺序。

![874963-20180814204558449-1716141956.png][]

![874963-20180814204613529-1033417049.png][]

**5.2.1.  Lucene查询语法**

Kibana查询语言基于Lucene查询语法。下面是一些提示，可能会帮到你：

*  为了执行一个文本搜索，可以简单的输入一个文本字符串。例如，如果你想搜索web服务器的日志，你可以输入关键字"**safari**"，这样你就可以搜索到所有有关"safari"的字段
 *  为了搜索一个特定字段的特定值，可以用字段的名称作为前缀。例如，你输入"**status:200**"，将会找到所有status字段的值是200的文档
 *  为了搜索一个范围值，你可以用括号范围语法，**\[START\_VALUE TO END\_VALUE\]**。例如，为了找到状态码是4xx的文档，你可以输入**status:\[400 TO 499\]**
 *  为了指定更改复杂的查询条件，你可以用布尔操作符 **AND** , **OR** , 和 **NOT**。例如，为了找到状态码是4xx并且extension字段是php或者html的文档，你可以输入**status:\[400 TO 499\] AND (extension:php OR extension:html)**

![874963-20180814210025045-321466232.png][]

![874963-20180814210037141-1350750433.png][]

![874963-20180814210045905-317397752.png][]

**5.2.2.  Kibana查询语法增强**

**新的更简单的语法**

如果你熟悉Kibana的旧Lucene查询语法，那么你应该对这种新的语法也不会陌生。基本原理保持不变，我们只是简单地改进了一些东西，使查询语言更易于使用。

response:200 将匹配response字段的值是200的文档

用引号引起来的一段字符串叫短语搜索。例如，message:"Quick brown fox"  将在message字段中搜索"quick brown fox"这个短语。如果没有引号，将会匹配到包含这些词的所有文档，而不管它们的顺序如何。这就意味着，会匹配到"Quick brown fox"，而不会匹配"quick fox brown"。（画外音：引号引起来作为一个整体）

查询解析器将不再基于空格进行分割。多个搜索项必须由明确的布尔运算符分隔。注意，布尔运算符不区分大小写。

在Lucene中，response:200 extension:php 等价于 response:200 and extension:php。这将匹配response字段值匹配200并且extenion字段值匹配php的文档。

如果我们把中间换成or，那么response:200 or extension:php将匹配response字段匹配200 或者 extension字段匹配php的文档。

默认情况下，and 比 or 具有更高优先级。

response:200 and extension:php or extension:css 将匹配response是200并且extension是php，或者匹配extension是css而response任意

括号可以改变这种优先级

response:200 and (extension:php or extension:css) 将匹配response是200并且extension是php或者css的文档

还有一种简写的方式：

response:(200 or 404) 将匹配response字段是200或404的文档。字符值也可以是多个，比如：tags:(success and info and security)

还可以用not

not response:200 将匹配response不是200的文档

response:200 and not (extension:php or extension:css) 将匹配response是200并且extension不是php也不是css的文档

范围检索和Lucene有一点点不同

代替 byte:>1000，我们用byte > 1000

>, >=, <, <= 都是有效的操作符

response:\*  将匹配所有存在response字段的文档

通配符查询也是可以的。machine.os:win\* 将匹配machine.os字段以win开头的文档，像"windows 7"和"windows 10"这样的值都会被匹配到。

通配符也允许我们一次搜索多个字段，例如，假设我们有machine.os和machine.os.keyword两个字段，我们想要搜索这两个字段都有"windows 10"，那么我们可以这样写"machine.os\*:windows 10"

**5.2.3.  刷新搜索结果**

![874963-20180814214254188-293227620.png][]

** 5.3.  按字段过滤**

![874963-20180815121322148-157573776.png][]

![874963-20180815121332626-1053895090.png][]

以上是控制列表显示哪些字段，还有一种方式是在查看文档数据的时候点那个像书一样的小图标

![874963-20180815133824582-1195635014.png][]

删除也是可以的

![874963-20180815134015059-1343338379.png][]

我们还可以编辑一个DSL查询语句，用于过滤筛选，例如

![874963-20180815121716160-2000146352.png][]

**5.4.  查看文档数据**

![874963-20180815131712346-1865507022.png][]

![874963-20180815131808342-285963630.png][]

**5.5.  查看文档上下文**

![874963-20180815134349647-866081044.png][]

![874963-20180815134358034-807747437.png][]

**5.6.  查看字段数据统计**

![874963-20180815134630606-139801031.png][]![874963-20180815134637921-1936955305.png][]

**6.  Visualize**

--------------------

Visualize使得你可以创建在你的Elasticsearch索引中的数据的可视化效果。然后，你可以构建dashboard来展示相关可视化。

Kibana可视化是基于Elasticsearch查询的。通过用一系列的Elasticsearch聚集来提取并处理你的数据，你可以创建图片来线上你需要了解的趋势、峰值和低点。

**6.1.  创建一个可视化**

为了创建一个可视化的视图：

第1步：点击左侧导航条中的“**Visualize**”按钮

第2步：点击“Create new visualization”按钮或者**加号(+)**按钮

第3步：选择一个可视化类型

第4步：指定一个搜索查询来检索可视化数据

第5步：在可视化的构建器中选择Y轴的聚合操作。例如，sum，average，count等等

第6步：设置X轴

例如：

![874963-20180815142051383-1539845797.png][]

![874963-20180815142101389-1765706122.png][]

![874963-20180815142116982-1931645008.png][]

![874963-20180815142134893-603647500.png][]

更多请看这里

[https://www.elastic.co/guide/en/kibana/current/createvis.html][https_www.elastic.co_guide_en_kibana_current_createvis.html]

[https://www.elastic.co/guide/en/kibana/current/xy-chart.html][https_www.elastic.co_guide_en_kibana_current_xy-chart.html]

[https://www.elastic.co/guide/en/kibana/current/visualize.html][https_www.elastic.co_guide_en_kibana_current_visualize.html]

**7.  Dashboard**

--------------------

Kibana仪表板显示可视化和搜索的集合。你可以安排、调整和编辑仪表板内容，然后保存仪表板以便共享它。

**7.1.  构建一个Dashboard**

第1步：在导航条上点击“**Dashboard**”

第2步：点击“Create new dashboard”或者“加号(+)”按钮

第3步：点击“Add”按钮

第4步：为了添加一个可视化，从可视化列表中选择一个，或者点击“Add new visualization”按钮新创建一个

第5步：为了添加一个已保存的查询，点击“Saved Search”选项卡，然后从列表中选择一个

第6步：当你完成添加并且调整了dashboard的内容后，去顶部菜单栏，点击“Save”，然后输入一个名字。

默认情况下，Kibana仪表板使用浅色主题。要使用深色主题，单击“选项”并选择“使用深色主题”。要将dark主题设置为默认，请转到管理>Management > Advanced ，并将dashboard:defaultDarkTheme设置为On。

![874963-20180815144328057-886948163.png][]

![874963-20180815144337309-990057504.png][]

![874963-20180815144346857-1932587218.png][]

**8.  Monitoring**

--------------------

Elasticsearch控制台打印日志
    [2018-08-15T14:48:26,874][INFO ][o.e.c.m.MetaDataCreateIndexService] [Px524Ts] [.monitoring-kibana-6-2018.08.15] creating index, cause [auto(bulk api)], templates [.monitoring-kibana], shards [1]/[0], mappings [doc]
    
    Kibana控制台打印日志
    log   [03:26:53.605] [info][license][xpack] Imported license information from Elasticsearch for the [monitoring] cluster: mode: basic | status: active

![874963-20180815145420812-1817184513.png][]

![874963-20180815145431388-1721016029.png][]

![874963-20180815145449472-1969113550.png][]

![874963-20180815145458683-691543790.png][]

![874963-20180815145507959-542848475.png][]

[https://www.elastic.co/guide/en/kibana/current/elasticsearch-metrics.html][https_www.elastic.co_guide_en_kibana_current_elasticsearch-metrics.html]

**9.  其它相关**

--------------------

《[Logstash][]》

《[Elasticsearch][]》

--------------------

感谢您的阅读，如果您觉得阅读本文对您有帮助，请点一下“推荐”按钮。欢迎各位转载，但必须在文章页面中给出作者和原文连接。

分类: [Elasticsearch][Elasticsearch 1]

[https://www.cnblogs.com/moonlightL/p/7764919.html][https_www.cnblogs.com_moonlightL_p_7764919.html]

[https://www.elastic.co/guide/cn/kibana/current/index.html][https_www.elastic.co_guide_cn_kibana_current_index.html]

[https://elasticsearch.cn/?/explore/category-4][https_elasticsearch.cn_explore_category-4]

[https://www.elastic.co/cn/webinars/getting-started-kibana?elektra=home&storm=sub2][https_www.elastic.co_cn_webinars_getting-started-kibana_elektra_home_storm_sub2]

[https://blog.csdn.net/zmx729618/article/details/80360619][https_blog.csdn.net_zmx729618_article_details_80360619]

[https://segmentfault.com/a/1190000015107023][https_segmentfault.com_a_1190000015107023]

[http://www.cnblogs.com/springboot/p/9278668.html][http_www.cnblogs.com_springboot_p_9278668.html]

[https_www.cnblogs.com_cjsblog_p_9476813.html]: https://www.cnblogs.com/cjsblog/p/9476813.html
[874963-20180814191248737-811570641.png]: /images/20220411/d6dec286bdec4d6fa6e9dc9913e76fd3.png
[874963-20180814191520367-184155487.png]: /images/20220411/24f7058043664502b45c49a6118445ad.png
[https_www.elastic.co_guide_en_kibana_current_settings.html]: https://www.elastic.co/guide/en/kibana/current/settings.html
[874963-20180814193042396-1698058646.png]: /images/20220411/e4e60dfe32214b2eaacf52e372a16edb.png
[874963-20180814200208889-480093301.png]: /images/20220411/a617214923d246d7ad326f5eb80d5fac.png
[874963-20180814200220481-132250130.png]: /images/20220411/a8c6e513d85244a898ccccb62774cdf1.png
[874963-20180814200232910-1800632871.png]: /images/20220411/b4bd3f89c71141bdb4ef05180e7ad337.png
[874963-20180814201551940-917551371.png]: /images/20220411/5927049a483d4ec89c1c66b1c17de7e8.png
[874963-20180814202140065-1741268963.png]: /images/20220411/63961ac0c74241838ae56f3d8735657a.png
[874963-20180814202528095-388522899.png]: /images/20220411/2083647e49374ae5a4bb0fbf296da331.png
[874963-20180814202537854-228504795.png]: /images/20220411/bf8541e540704ce9b00610b3de521da4.png
[874963-20180814202546400-1628872682.png]: /images/20220411/de27af5b2518475ab6d9767d43dc3317.png
[874963-20180814204558449-1716141956.png]: /images/20220411/92a78d86fb36488388954ab0af2ee5b7.png
[874963-20180814204613529-1033417049.png]: /images/20220411/a4532669b19743c69ecc51297c620bf4.png
[874963-20180814210025045-321466232.png]: /images/20220411/e06805fca5194e87ab53c8f738613fad.png
[874963-20180814210037141-1350750433.png]: /images/20220411/a0204df5a1e549bb90964f5484b4fe48.png
[874963-20180814210045905-317397752.png]: /images/20220411/ef30ea4736fd4afba1945181f6fda748.png
[874963-20180814214254188-293227620.png]: /images/20220411/479ef18ab69d4e9a9402fbb5d911bff2.png
[874963-20180815121322148-157573776.png]: /images/20220411/ba08f717310d48a99e40b067869c8a9c.png
[874963-20180815121332626-1053895090.png]: /images/20220411/ee3854fd5cb14c099564628c6bc66bd7.png
[874963-20180815133824582-1195635014.png]: /images/20220411/f2957cc0682a45d2b677d15bdb57ddc6.png
[874963-20180815134015059-1343338379.png]: /images/20220411/9c6a80ad080144c9a7f444a79d9a3e7e.png
[874963-20180815121716160-2000146352.png]: /images/20220411/e35b144aca9b4738bbe60678dc918354.png
[874963-20180815131712346-1865507022.png]: /images/20220411/f91b56a91fcb41d1934f9782e86bd1f9.png
[874963-20180815131808342-285963630.png]: /images/20220411/3b7383d8cfd74e39b895cbbfdef15208.png
[874963-20180815134349647-866081044.png]: /images/20220411/77c9026983e144f0baab62695cd8c8d6.png
[874963-20180815134358034-807747437.png]: /images/20220411/317a6bf17b52493a95929344b9fd6dde.png
[874963-20180815134630606-139801031.png]: https://images2018.cnblogs.com/blog/874963/201808/874963-20180815134630606-139801031.png
[874963-20180815134637921-1936955305.png]: /images/20220411/ca0ade672a424f98947b5616fd771462.png
[874963-20180815142051383-1539845797.png]: /images/20220411/7e7988733fc04d5a9fec17bbe75f30f8.png
[874963-20180815142101389-1765706122.png]: /images/20220411/fff9d5b843354eb684a2dba0674003f8.png
[874963-20180815142116982-1931645008.png]: /images/20220411/6d32118e5e1f4f989acb3438c2a90431.png
[874963-20180815142134893-603647500.png]: /images/20220411/a83ee6f71e804746a418f446c2680caa.png
[https_www.elastic.co_guide_en_kibana_current_createvis.html]: https://www.elastic.co/guide/en/kibana/current/createvis.html
[https_www.elastic.co_guide_en_kibana_current_xy-chart.html]: https://www.elastic.co/guide/en/kibana/current/xy-chart.html
[https_www.elastic.co_guide_en_kibana_current_visualize.html]: https://www.elastic.co/guide/en/kibana/current/visualize.html
[874963-20180815144328057-886948163.png]: /images/20220411/664f34efd05c42a7aa80eb1aa3acb017.png
[874963-20180815144337309-990057504.png]: /images/20220411/67ec06280a6b484b80dbcc8b245f1833.png
[874963-20180815144346857-1932587218.png]: /images/20220411/0888806f79e34ae5b354ddfaa2864095.png
[874963-20180815145420812-1817184513.png]: /images/20220411/e8af92c31764491787cc3656e197f042.png
[874963-20180815145431388-1721016029.png]: /images/20220411/ffc54083c4754453a255e443a7208200.png
[874963-20180815145449472-1969113550.png]: /images/20220411/5950c5ccb5cf4a4cab768eb578cba891.png
[874963-20180815145458683-691543790.png]: /images/20220411/bfa296ba8c964c47b08b322fbc9cc0e1.png
[874963-20180815145507959-542848475.png]: /images/20220411/387afd5ab05e4abd8ada224ee4b46b81.png
[https_www.elastic.co_guide_en_kibana_current_elasticsearch-metrics.html]: https://www.elastic.co/guide/en/kibana/current/elasticsearch-metrics.html
[Logstash]: https://www.cnblogs.com/cjsblog/p/9459781.html
[Elasticsearch]: https://www.cnblogs.com/cjsblog/p/9439331.html
[Elasticsearch 1]: https://www.cnblogs.com/cjsblog/category/1272702.html
[https_www.cnblogs.com_moonlightL_p_7764919.html]: https://www.cnblogs.com/moonlightL/p/7764919.html
[https_www.elastic.co_guide_cn_kibana_current_index.html]: https://www.elastic.co/guide/cn/kibana/current/index.html
[https_elasticsearch.cn_explore_category-4]: https://elasticsearch.cn/?/explore/category-4
[https_www.elastic.co_cn_webinars_getting-started-kibana_elektra_home_storm_sub2]: https://www.elastic.co/cn/webinars/getting-started-kibana?elektra=home&storm=sub2
[https_blog.csdn.net_zmx729618_article_details_80360619]: https://blog.csdn.net/zmx729618/article/details/80360619
[https_segmentfault.com_a_1190000015107023]: https://segmentfault.com/a/1190000015107023
[http_www.cnblogs.com_springboot_p_9278668.html]: http://www.cnblogs.com/springboot/p/9278668.html