hbase적재 문제
미해결
15일간의 빅데이터 파일럿 프로젝트
hbase에서 count 'DriverCarInfo'이 0row(s) 로 나타납니다. 다른 문의 글에서 답변해주신 내용대로 시뮬레이터 > Flume > Kafka > Storm > HBase | Redis 를 확인하였으며, ----------------------------- 주키퍼 클라이언트로 접속해서 토픽 정보가 잘 생성 되어 있는지 Server02에 접속해 아래 명령대로 확인해 보시고요.. $ zookeeper-client [zk: ...] ls /brokers/topics/SmartCar-Topic/partitions 위 SmartCar-Topic Z노드가 확인이 되었으면 큰 문제는 없습니다. 그냥 아래 순서대로 스톰 토폴로지를 재배포 후 테스트 해보시기 바랍니다. 1. 스톰 토폴로지 삭제 : $ storm kill "DriverCarInfo 2. CM에서 카프카 중지 3. Service 명령으로 Storm 중지 4. CM에서 주키퍼 중지 5. CM에서 주키퍼 시작 6. Service 명령으로 Storm 시작 7. CM에서 카프카 시작 8. 스톰 토폴로지 배포 9. 실시간 테스트 ----------------------------- 위의 내용대로 다시 실시하엿습니다 Redis 확인시에도 10건의 과속차량 정보가 조회되는것 확인하였으나, Storm UI에서 Acked가 증가되지 않는것 같습니다.(Emitted 와 Transferred 는 증가한거 맞을까요?) 이럴 경우 어떻게 해야 할까요? 답변부탁드립니다.
- hbase
- bigdata
- Hadoop
- Flume
- ZooKeeper
- Kafka
- 데이터 엔지니어링
- Impala
- redis