저장된 데이터 관리 방법
225
1 asked
안녕하세요. IoT에 대해서 공부하고있는 학생입니다.
iot 데이터를 저장하는 방법에 대한 강의를 수강하고 궁금한 사항이 생겨 질문 남깁니다.
데이터를 3초에 1개씩 저장하면 하루만 해도 많은 양의 데이터가 저장될 것 같은데 이 데이터들을 어떻게 관리해야하는지 궁금합니다.
주기를 정해놓고 리셋을 하는건가요? 아니면 이상한 값이 발생했을때 이벤트를 만들어 특이값만 저장하는건가요?
소중한 지식을 나눠주시면 감사하겠습니다.
Answer 1
0
지금처럼 MongoDB에 센서 데이터를 수신하면 많은양의 데이터가 쌓이게 되닌것은 사실입니다. 그렇다고 지금 실습에서 사용하는 센서 데이터정도는 아주 작은량이 될 것입니다. 만약 여러 센터 데이터를 수집한다고 하면 즉 대용량 데이터 수집 처리를 할려면 하둡 기반 HBase/Spark등으로 분산처리를 해야됩니다.
IoT데이터 관리는 서비스(일,월,분기,년~~)를 어떻게 하느냐가 중요합니다.
요즘은 IoT서비스 플랫폼에서 처리를 해주기 때문에 개발자가 프로그램적으로 해결하기에는 한계가 있다는 점을 말씀드립니다. 강의에서 수집되는 데이터는 어느 시점에서 불필요한 데이터가 되는지를 판단해서 주기적으로 삭제나 백업을 하는 방법이 좋을 듯합니다.
스프링 기반 서버
0
79
1
실습용 보드 등 한번에 저렴하게 하는 법 없을 까요?
0
164
0
mongodb 접속 실패
0
308
1
보드관련 질문
0
212
1
몽고DB 사용 이유 문의
0
626
2
mqtt 서버 설정 방법
0
434
1
MQTT 설치후 토픽 설정시 에러
0
500
1
Studio 3T 커넥션 방법
0
245
1
mongoose.connect() 콜백 에러
0
311
1
MQTT 도표 관련 논문 인용
1
432
1
mqtt client 에서 받은 값이 깨질경우
0
550
1
다른서버에서 mqtt 접속 테스트가 안되네요.
0
1352
2
아두이노에서 MQTT서버 접속이 안됩니다.
0
782
1
맥북(Mac OS Ventura 13.1) WeMos D1 R1 연결 에러
0
970
2
여러 온습도 센서를 사용하여 HTML에 표출
0
361
1
Robo3T 지원 중지
1
238
1
교재 어디서 다운 받나요?
0
323
1
외부 네트워크에서 접속하려면 어떻게 해야될까요?
0
2957
2
$.ajax{} 구문 안에 url을 입력했는데 접속이 안되면 어떻게 해결해야되나요?
0
522
3
데이터 타입변경
0
242
0
DHT11 센서에서 NaN 값이 나옵니다
0
1161
1
socket.timeout
0
506
1
mosquitto 설치부터 null 값이 받아지네요
0
554
3
아두이노 mqtt에서 값을 읽을수 없습니다.
0
662
5