ELK 스택 (ElasticSearch, Logstash, Kibana) 으로 데이터 분석

ELK 스택 (ElasticSearch, Logstash, Kibana) 으로 데이터 분석

(75개의 수강평)

5761명의 수강생

무료

Minsuk Heo
평생
초급, 중급
수료증
23개 수업, 총 1시간 19분
박민혁 프로필

logstash 및 filebeat 실행시 오류 박민혁 1달 전

// logstash.yml 파일

# Sample Logstash configuration for creating a simple
# Beats -> Logstash -> Elasticsearch pipeline.
 
input {
  beats {
    port => 5043
  }
}
 
output {
  elasticsearch {
    hosts => ["http://localhost:9200"]
    manage_template => false
    index => "logstash-%{+YYYY.MM.dd}"
    #user => "elastic"
    #password => "changeme"
  }
}
 
invaild frame type, received: 84
 
 
// filebeat.yml
// filebeat inputs
paths:
- /var/log/*.log
 
//logstash output
hosts:["192.168.100.148:5043"]
 

 

error : failed to connect to backoff

 

 

#netstat -nap : grep LISTEN

 

tcp    0    0.0.0.0:5043    0.0.0.0:*    LISTEN    114019/java

어디를 수정해야할지?

0
양경훈 프로필

아주 기본적인 질문이 있습니다. 양경훈 3달 전

처음이라 너무 기초적인 것 같지만 질문 드립니다.

혹시 elasticsearch는 기존에 있는 관계형DB 내 JSON 형태로 저장된 내용에 대하여 검색이 가능한가요?

아니면 기존 데이터를 모두 JSON 형태로 하나하나 포멧에 맞추어 입력해 넣어야만 데이터 검색이 가능한가요?

0
Kim Do Eun 프로필

질문입니다 Kim Do Eun 7달 전

  1. ctx는 뭔가요?
  2. 왜 update할때 put을 사용하지 않는건가요?

0
Oranzi 프로필

BULK 예제 실행하는데 있어 에러가 납니다. Oranzi 8달 전

BULK 예제 실행하는데 있어 에러가 납니다.

운영환경은 UBUNTU 18.04, Elasticsearch 6.4 입니다.

POST를 사요할 수 없는 것인지...이리저리 변경해봐도 아직 담을 찾기가 어렵습니다. 구글링해도 딱히 같은 사례가 안나오는 것 같고요.

도움 주시면 감사하겠습니다.

$ curl -XPOST [http://localhost:9200/](http://localhost:9200/) bulk?pretty -H 'Content-Type: application/json' --data-binary @classes.json

{"error":"Incorrect HTTP method for uri [/] and method [POST], allowed: [GET, HEAD, DELETE]","status":405}curl: (6) Could not resolve host: bulk

1
Sun Park 프로필

name과 team의 string이 분리되는 문제는 json 파일을 다음과 같이 변경하여 해결했습니다. Sun Park 9달 전

{

"record" : {

"properties" : {

"team" : {

"type" : "keyword", <<< "string"이었는데 "keyword"로 변경

"index" : "not_analyzed" <<< 추가

},

"name" : {

"type" : "keyword", <<< "string"이었는데 "keyword"로 변경

"index" : "not_analyzed" <<< 추가

},

0
Boseong Kim 프로필

마지막 스크립트 부분 Boseong Kim 11달 전

"error" : "ElasticsearchIllegalArgumentException[failed to execute script]; nested: ScriptException[scripts of type [inline], operation [update] and lang [grovy] are disabled]; ",

"status" : 400

이라고 에러나는데 왜그런거죠ㅠㅠ?

0
용쟁호투 프로필

stats 메트릭 질문 용쟁호투 2018.05.26

stats 메트릭은 기존에 min, max,avg, sum을 수행한 결과를 수행내역처럼 보여주는건가요?

아니면 stats 매트릭 자체에 count, min, max, avg, sum 항목이 내장되어있는 메트릭인가요?

0
용쟁호투 프로필

stats 메트릭 질문 용쟁호투 3달 전

stats 메트릭은 기존에 min, max,avg, sum을 수행한 결과를 수행내역처럼 보여주는건가요?

아니면 stats 매트릭 자체에 count, min, max, avg, sum 항목이 내장되어있는 메트릭인가요?

1
감마 프로필

windows10 -> gitbash 사용 감마 2018.04.06

cs3-31@DESKTOP-G182BN6 MINGW64 /c/logstash-5.6.8/bin

$ ./logstash.bat -f ~/c/github/BigData/ch06/logstash-simple.conf

[ERROR][logstash.agent ] failed to fetch pipeline configuration {:message=>"URI scheme not supported: C:/Users/cs3-31/c/github/BigData/ch06/logstash-simple.confnEither pass a local file path or \"file|http://\" URI"}

이렇게 에러 뜨는데 해결법 있나요??

0