elastic...2020/04/25  · 16 4. elastic 1.hadoop hive/spark es 2. api proxy es 3. kafka-offset

1

�� lemon2020/04/20, ����, Elastic ���,@ ��������https://mp.weixin.qq.com/s/LsSbXgPUJlIaTap3wo5Uig

Elastic��������

2

����

• Elasticsearch������������������� ACID��‒ Nosql���"��

• Elasticsearch� �������������‒ ! �Refresh��

���#�

3

Elasticsearch����������������������� �������������

������Who@Elastic.com

4

01.������������

5

����

• :9=<�����• +.�����4%7'>• ��� 5-%7

• �������06�$�

• 06�;,1�#�

• 8*@• # �?��• �"&���������<3

• ! �/• 2�#�/��()#

•

;,�4�

6

����

• �������API��• ���Elastic���

• �������

• Elastic����‒ ��Elastic����‒ ��Elastic� ��

����

7

����

• ���• API�����

• Elastic����

���

8

�������

9

02.����Elastic��������

10

����

• �+-"$�&

• �$����%��#'�-"!�.�-"

• ��)�-"���%�‒ ��)�*�$)�

• �(,���%�

• �+#'�%�

• ��-"$�&

Elastic��� �&)���

11

03.�����������

12

0.�����������

1.���������������� � ����� �

2.����������������

3.Hadoop�� ���ES-Hadoop ��

13

1.��������

14

2.���������

1.�������������

2.���������� �

15

3.���������

16

4.������� Elastic����

1.Hadoop��Hive/Spark � ES�������

2.����API��Proxy� ��ES��

3.�� ��Kafka-Offset��������������

17

5.����� ��=.or6�=.

1.���������<(�42��;�0�" #$B5C9�E*%@

2.��������0�" ?�,��-1&#,0�" ��� /3):D+�0�" ,��=.0�" !��8�42��=.!���'=.�=.>��

3.����A�0�,�7������

18

6.����������

19

7.����������

20

8.���������

1.������������

2.�� ������������

21

04.����Elastic�������

22

1.����

• % �������‒ !���% ‒ !���%

• ��% ‒ �% �$�#�������‒ �% �$�� %

Elastic% #"���&

23

2.����

• �� �����‒ %����� �‒ �� ��� ���#�$‒ ���Greenplum��!�

• �"�‒ �� ���"��‒ ���Greenplum���

����&"��

24

3.����������

1.�����������������������

2.��������� ����….

25

4.�������

���������������

26

5.�������

• ����‒ ��������

• ����‒ �� ���‒ ������������

����

27

6.������

• ���� ���

• ��� ���

• ���� ���

������

28

05.�����ClickHouse��

29

ClickHouse�������

3030

���

31

https://elasticsearch.cn

���� �����������