2020年04月_Elastic_Elastic 中国社区官方博客

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 Elastic：在Kubernetes里运行Metricbeat
原力计划

在今天的文章中，我们来讲述如何在Kubernetes里安装Metricbeat，并收集Kubernetes里的pod信息。如果大家还没有开始安装自己的Kubernetes的话，建议大家阅读我之前的文章： Elastic：在Kubernetes多节点集群部署Elastic Stack Elastic：Elastic Cloud Kubernetes (ECK) 部署为了方便，在...

2020-04-30 12:06:49 737

原创 Elastic：为Kubernetes添加LoadBalancer

在之前的文章“在Kubernetes多节点集群部署Elastic Stack”，我们详细地介绍了如何部署Kubernetes及在它的上面部署Elastic Stack。在今天的文章中，我来讲述一下如何为自己的本地Kubernetes部署一个LoadBalancer，虽然这个在很多的云服务上已经是一个标配。在今天的展示中，我们将使用一个开源的LoadBalance Metallb。安装...

2020-04-29 10:26:23 650

原创 Elastic：使用Filebeat监视Kubernetes上的Elastic Stack
原力计划

在今天的文章中，我们将会在Kubernetes上部署Filebeat，并使用Filebeat来监视Kubernetes中的Elastic Stack的运行情况。如果你还没有部署自己的Kubernetes的话，请参阅我之前的文章“在Kubernetes多节点集群部署Elastic Stack”。我们之前的部署情况是这样的：准备工作在我们的Kubernete启动起来过后，我们其实...

2020-04-28 17:23:10 595

原创 Elasticsearch：Elastic可观测性 - 运用 pipeline 使数据结构化
原力计划

在今天的文章中，我们将讲述如何运用Elasticsearch的 ingest 节点来对数据进行结构化并对数据进行处理。Datasets在我们的实际数据采集中，数据可能来自不同的来源，并且以不同的形式展展现：这些数据可以是一种很结构化的数据被摄，比如数据库中的数据，或者就是一直最原始的非结构化的数据，比如日志。结构化数据就如上面的数据展示的那样。在很多的情况下，...

2020-04-28 08:46:17 5166 7

原创 Elastic：在Kubernetes多节点集群部署Elastic Stack
原力计划

创建master 及 node VM首先我们在我们的vms里创建两个目录：kmaster 及 knode:$ pwd/Users/liuxg/vmsliuxg:vms liuxg$ lskmaster knode ubuntu-18.04在kmaster及knode子目录中，我们分别创建如下内容的Vagrantfile文件。kmaster：V...

2020-04-26 11:08:37 766

原创 Elastic：为Elastic Docker部署设置安全
原力计划

在之前的教程“Elastic：用Docker部署Elastic栈”里，我有详细讲述如何使用docker来部署我们的Elastic Stack。细心的读者可能已经看出来了它里面没有配置安全。那么针对Docker的部署，我们如何为我们的Elastic Stach设置安全呢？在今天的教程中，我们分几步走。我将详细地来描述如何为docker创建安全的配置。创建docker-compose.y...

2020-04-23 19:36:20 1374 1

原创 Elasticsearch：Elasticsearch SQL介绍及实例（二）
原力计划

在之前的文章“Elasticsearch：Elasticsearch SQL介绍及实例”里，我们简要介绍了新的Elasticsearch SQL功能以及_translate API。这篇特定的文章通过探索更复杂的功能来继续该系列。如果你还没准备好自己的数据，请先阅读我前面指出来的文章。复杂的例子和Elasticsearch的优点GroupingElasticsearch的聚合框...

2020-04-23 14:24:56 895 4

原创 Elasticsearch：Elasticsearch SQL介绍及实例（一）
原力计划

Elasticsearch是一个全文搜索引擎，具有您期望的所有优点，例如相关性评分，词干，同义词等。而且，由于它是具有水平可扩展的分布式文档存储，因此它可以处理数十亿行数据，而不会费劲。针对Elasticsearch专业人员来说，大多数人喜欢使用DSL来进行搜索，但是对于一些不是那么专业的人员来说，他们更为熟悉的是SQL语句。如何让他们对Elasticsearch的数据进行查询是一个问题。借助E...

2020-04-22 16:48:41 1378

原创 Elastic：创建 Elasticsearch 集群并为它们配置 TLS 安全通信
原力计划

在之前的文章中“如何在一个机器上同时模拟多个node”，我们介绍了如何在同一个机器中运行同一个Elasticsearch的安装，并创建一个多node的Elasticsearch集群。我们也在“Elastic：用Docker部署Elastic栈”文章中介绍了如何使用docker技术来创建多个node的Elasticsearch集群。在实际的应用中，我们可能需要在不同的机器中部署Elasticsear...

2020-04-20 17:35:11 883 3

原创 Kibana：Kibana Lens 入门
原力计划

Elastic 在7.5的发行版中加入了一个重量级的发布，也就是Len。在我之前的文章“Elastic Stack 7.5.0 重磅发布”有一些介绍。在今天的练习中，我将简单地介绍一下如何使用Elastic Lens来简化我们创建可视化。Kibana Lens 的特点：Lens 的设计十分直观，即使您之前没有任何技术经验，对 Elasticsearch 毫无了解，也能够基于原始数据，快速地制作...

2020-04-20 10:23:52 1039

原创 Elasticsearch：使用 _update_by_query 更新文档

在很多的情况下，我们我们想更新我们所有的文档：添加一个新的field或者是一个字段变成一个multi-fied 用一个值更新所有的文档在今天的文章中，我们来讲一下_update_by_query的这个用法。准备数据我们来创建一个叫做twitter的索引：PUT twitter{ "mappings": { "properties": { "DO...

2020-04-16 19:37:40 1626 2

原创 Solutions：安全的APM服务器访问
原力计划

我们知道在APM架构图中：APM Agents 访问APM server如果不做安全的设置，那么任何一个应用都有可能把数据传输到APM server中。如果是恶意的软件，那么我们可能得到的数据是错误的。那么怎么保证我们的安全传输呢？答案是在传输的时候使用secret token。Secret token 是什么？您可以配置一个Secret token来授权对APM服务器的...

2020-04-15 11:06:15 534

原创 Solutions：为Nodejs微服务提供APM功能

在今天的这篇文章中，我来简单地介绍如何为Nodejs应用实现APM。关于如何安装Elasticsearch, Kibana及APM server，请参阅我之前的文章“应用程序性能监控/管理(APM)实践”。在这篇文章中，我们来简单介绍一下需注意的一些地方。我们在进行下面的工作之前，先启动Elasticsearch， Kibana及APM server。如何配置我们打开Kibana...

2020-04-14 13:57:46 394

原创 Solutions：如何为Python Django应用进行APM

在今天的这篇文章中，我来简单地介绍如何在Python Django应用框架中实现APM。关于如何安装Elasticsearch, Kibana及APM server，请参阅我之前的文章“应用程序性能监控/管理(APM)实践”。在这篇文章中，我们来简单介绍一下需注意的一些地方。如何配置我们可以打开Kibaba：点击上面的Add APM 按钮：在APM agents里找到...

2020-04-13 20:36:18 562

原创 Solutions：如何为Python Flask应用进行APM
原力计划

如果大家之前看过我写的文章“应用程序性能监控/管理(APM)实践”，那么你就会对Elastic APM有个比较清楚的认识。在今天的蚊帐中，我就再累述了。在那篇文章中，我着重介绍了APM到底是什么东东。在今天的练习中，我来展示如何对Python Flask来进行监控。测试应用我们的Flash测试应用非常简单，就是一个简单的查询天气的微服务。这个API的接口如下：http://api.o...

2020-04-13 14:01:48 725

原创 Elastic：使用ElastAlert发送邮件通知
原力计划

ElastAlert是一个简单的框架，用于从Elasticsearch中的数据中发出异常，尖峰或其他感兴趣模式的警报。我们可以在地址https://elastalert.readthedocs.io/en/latest/elastalert.html找到它的使用说明。在今天的教程中，我将一步一步地介绍如何搭配环境，并从Elasticsearch发送通知给电子邮件。在我之前的教程“Elastic：使...

2020-04-12 19:27:19 1192 6

原创 Kibana：运用Kibana TSVB来定制我们的Visualization

TSVB （Time Series Visual Builder）是时间序列数据可视化工具，可让您充分利用Elasticsearch聚合框架的功能。使用TSVB，您可以组合无数个聚合来显示复杂数据。在今天的文章中，我们来讲述一下如何使用TSVB来定制我们的可视化。我们首先来看下一如下的两个可视化：首先，我们看一下上面的两个可视化。在左边的一个是我们选用Horitzontal Bar...

2020-04-12 11:45:07 1447

原创 Elastic：我应该使用Logstash或是Elasticsearch ingest 节点?
原力计划

在写这篇文章之前，我也是不是很清楚，感觉Elasticsearch的ingest node的功能越来越强大。在一次聚会上，我的一个同事也告诉我现在使用ingest node在社区里越来越普及。他们感觉到Elasticsearch ingest node的便利，同时也可以不需额外的安装和部署，并且还可以做其它的用途。的确随着Elasticsearch新的ingest node的功能越来越强大，它和L...

2020-04-09 10:27:03 758

原创 Solutions：Elastic App Search 入门
原力计划

高级搜索变得简单。Elastic App Search的精心策划的经验将Elasticsearch的专注能力带入了一组完善的API和直观的仪表板。利用无缝的可伸缩性，可调的相关性控件，详尽的文档，维护良好的客户端以及强大的分析功能，可以轻松构建领先的搜索体验。在今天的文章中，我们将详细地一步一步地介绍如何构建一个完整的Elastic App Search应用。安装安装Ela...

2020-04-08 20:34:43 1219 5

原创 Elastic：如何创建一个动态的阈值警报
原力计划

在我之前的文章“X-Pack：创建阈值检查警报”，我介绍了如何在Kibana中创建一个阈值的警报。这个在很多的情况下是非常有用的，比如我们监控的一个指标，当它超过或低过一个阈值时，那么它就会发生一个警报。但是在实际的生活中，我们也有很多的情况下，我们想动态地设置一个阈值，而不是一个固定的阈值。比如，我们炒股的时候，我们想我们的股票5分钟之内涨幅超过10%，或者跌过10%，这个时候我们想得到一个警报...

2020-04-08 13:31:46 748 14

翻译 Elasticsearch：在 Elasticsearch 中的 Composite Aggregation

复合聚合（Composite aggregation）是自Elasticsearch 6.1中的强大新功能。为了展示该功能的全部功能，我们将逐步为虚构的披萨外卖公司Sliceline创建分析服务。复合聚合使我们能够：通过aggregation结果快速分页根据aggregation结果建立新索引开发由Elasticsearch aggregation支持的API，对大型结果集具有一...

2020-04-07 18:20:26 1805 3

原创 Elastic：创建你的第一个Elastic alert - 邮件通知
原力计划

这是我之前的文章 “Elastic：创建你的第一个Elastic alert” 的续篇。在那篇文章中，我们讲述了如何运用Watcher API来创建一个警报。我们只用了一个logging的简单的展示。可能大家觉得并不过瘾，比较我们很少坐在自己的位子上一直盯着自己的屏幕看log。另外我们可能有些情况，我们希望的情况是有一个错误的信息我们并不紧张，但是如果在规定的时间里，我们的错误或者异常到底规定的一...

2020-04-07 14:02:29 1078

翻译 Elastic App Search：免费的产品，可提供出色的搜索体验

无论人们在何处遇到搜索栏（无论是在Google，手机应用程序上还是在在线购物时），他们都有条件期望能带来快速且相关结果的搜索体验。考虑到这一不断发展的期望，多年来，数百万开发人员和组织选择Elasticsearch来构建强大的内容发现体验，这些年来，其受众和用户群都非常满意。在了解了团队如何在全文搜索的上下文中利用Elasticsearch之后，我们构建了Elastic App Search，这是...

2020-04-07 09:22:01 768

原创 Elastic：创建你的第一个Elastic watcher
原力计划

在Elasticsearch可以提供给我们数据的存储及快速的搜索，但是如果能够实时地发送警报则对我们的应用来说将会非常地有用。在今天的文章中，我们将讲述如何使用API的方法利用Elasticsearch来生成警报。在之前我有两个教程来讲述如何在Elastic中发送警报：Elastic：使用ElastAlert发送通知 X-Pack：创建阈值检查警报我们今天的配置环境如下：在上面...

2020-04-06 12:53:15 1888

原创 Elastic：使用Elastic Helm Chart来部署多节点的Elasticsearch集群
原力计划

在之前的文章“Elastic：Elastic Cloud Kubernetes (ECK) 部署”我介绍了如何在minikube中部署ECK。在今天的文章中，我来介绍一下如何使用Elastic Helm Chart来部署一个多节点的Elasticsearch集群。安装安装VM在今天的安装中，我选择使用virtualbox来部署我们的ECK。我们也可以选择Docker及其它的容器来...

2020-04-05 19:22:33 1289

原创 Vagrant 入门教程

vagrant是一个工具，用于创建和部署虚拟化开发环境的。它用起来非常方便。它可以很方便地帮我们部署一个虚机。在我们很多的情况里，我们可以利用Linux系统来部署我们的beats及web服务。在今天的教程里，我们来简单地介绍一下如何在Mac OS的环境下部署一个Ubuntu 18.04的系统。安装Homebrew对于没有安装Homebrew的开发者来说，我们需要按照如下的方式来安...

2020-04-04 18:54:52 470

原创 Elastic：Elastic Cloud Kubernetes (ECK) 部署
原力计划

借助Kubernetes上的Elastic Cloud（ECK），您可以扩展基本的Kubernetes编排功能，以轻松地部署，保护，升级Elasticsearch集群等。在今天的文章中，我们简单地介绍如何在我们自己的电脑上部署你的ECK。如果有条件的开发者，你可以到AWS，GCP等云端去部署你自己的ECK。在我今天的练习中，我使用我的MacOS Catalina来部署。准备工作安装...

2020-04-04 12:15:58 2211 3

翻译 Solutions：如何使用Elastic APM来监控多语言微服务应用程序

微服务架构引入的挑战之一是了解应用程序的性能以及花费时间最多的能力。 Elastic Stack和Elastic APM可以为基于微服务的现代解决方案以及整体应用程序提供可观测性。应用程序性能监视（APM）结合了不同的技术，以提供相关的每个服务组件正在做什么，何时何地，何时以及持续多长时间的深入，透明和整体的视图。 APM展示了服务如何交互，在整个系统中进行事务跟踪，并让您看到了瓶颈。这些丰...

2020-04-01 10:12:36 1271