일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | 7 |
8 | 9 | 10 | 11 | 12 | 13 | 14 |
15 | 16 | 17 | 18 | 19 | 20 | 21 |
22 | 23 | 24 | 25 | 26 | 27 | 28 |
29 | 30 | 31 |
- window
- JavaScript
- Java
- Spring
- SQL
- Express
- GIT
- 공정능력
- tomcat
- hadoop
- Python
- SPC
- table
- Android
- Eclipse
- mybatis
- 보조정렬
- R
- vaadin
- es6
- plugin
- mapreduce
- NPM
- MSSQL
- SSL
- Sqoop
- Kotlin
- IntelliJ
- xPlatform
- react
- Today
- Total
목록bigdata/elastic (4)
DBILITY
책보고 해봤다. package의 장점, 설치의 간편함이다. elasticsearch는 cluster name이 같으면 자동 ha라는군. [root@big-master ~]# rpm --import https://artifacts.elastic.co/GPG-KEY-elasticsearch [root@big-master ~]# vi /etc/yum yum/ yum.conf yum.repos.d/ [root@big-master ~]# vi /etc/yum.repos.d/elasticsearch.repo [root@big-master ~]# yum -y install elasticsearch Loaded plugins: fastestmirror base | 3.6 kB 00:00:00 elasticsearch-..
filebeat kafka out을 테스트해 보았다. elasticsearch로 보내기 위해 nifi로 dataflow를 구성,elasticseach에 저장하고 검색할 수 있다. kibana에서 dashboard를 구성해 봐야한다. [kafka@big-slave4 ~]$ kafka-topics.sh \ > --zookeeper big-master:2181,big-slave1:2181,big-slave2:2181/kafka-cluster \ > --topic kafka-log --partitions 3 --replication-factor 2 --create Created topic "kafka-log". [kafka@big-slave4 ~]$ exit logout [root@big-slave4 ~]# r..
flume의 file Source,Channel,Sink 기능과 비교해 보기 위해 윈도우용을 진행해 본다. 윈도우용 wget이 필요하다. 물론, 그냥 web 다운로드도 가능하다. https://www.elastic.co/kr/를 참고하자. E:\>wget https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-6.2.4-windows-x86_64.zip --2018-05-11 22:40:18-- https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-6.2.4-windows-x86_64.zip Resolving artifacts.elastic.co (artifacts.elastic.co)....
참고하여 설치해보자. 시작하세요! 하둡프로그래밍의 저자가 근무하는 곳인가 보다. 책처럼 깔끔하다. 따라하면 되겠다. http://gruter.github.io/cloumon-elk/ [root@big-master ~]# adduser gmonitor [root@big-master ~]# passwd gmonitor Changing password for user gmonitor. New password: BAD PASSWORD: The password contains the user name in some form Retype new password: passwd: all authentication tokens updated successfully. [root@big-master ~]# usermod -..