Analytic SQL 관련 질문

Question

안녕하세요. 권철민 선생님. 저는 SQL을 업무에서 활용하고 싶은 직장인입니다. 선생님 강의로 SQL을 열심히 공부하고 있고 지금은 Analytic SQL을 수강 중인데요. 제 궁극적인 목표는 회사 데이터베이스에서 SQL로 데이터를 가져와 판다스 등으로 처리한 뒤 머신러닝으로 결과를 도출하는 것이라서 'Analytic SQL이 내게 필요할까?' 라는 생각이 들고 있습니다. 왜냐하면 다양한 계산들은 판다스에서 더 수월히 수행할 수 있을 것 같아서요. 혹시 제가 아직 지식이 부족하여 그런 것이고 제가 모르는 Analytic SQL의 장점이 있다면 조언 부탁드립니다.

권 철민 · Answer

안녕하십니까, SQL은 데이터를 추출하는 용도로 주로 사용하고 가공은 판다스로 하시는 업무 로직을 선호하기 때문에 Analytic SQL을 배워야 할지 의문이시군요 ^^ 그럼에도 불구하고 Analytic SQL은 배우시는게 좋습니다. Analytic SQL은 데이터 분석 시 매우 유용합니다. SQL 분석 시 Group by나 Join 만으로는 한계가 있습니다. Analytic SQL 강의 초반부에서도 말씀 드리지만, 기존 SQL로는 요즘 분석환경의 다양한 요구사항은 충족할 수 없습니다. 때문에 현업에서 SQL을 사용한 분석에서 Analytic SQL의 활용 빈도는 매우 높습니다(Analytic SQL의 장점은 강의에서도 설명드리기에 여기서 다시 말씀드리는 것보다는 강의를 참조하시면 좋을 것 같습니다) 말씀하신 대로 판다스는 데이터 계산, 특히 다양한 통계 함수 기능을 제공하거나 시계열 데이터 분석을 효율적으로 지원합니다. Analytic SQL강의에서 이동 평균에 대한 말씀도 드리지만 이동 평균은 판다스로 구현하는게 더 쉽게 적용할 수도 있습니다. 하지만 판다스는 Group by등의 적용이 SQL만큼 편하지 않습니다. 또한 데이터의 가공 레벨이 복잡해 질수록 이를 위한 판다스 코드들이 더 길어지고, 이해에 어려움이 따릅니다. 현재 업무로직이 SQL은 데이터를 추출하는 용도로 주로 사용하고 가공은 판다스로 하시는 로직이라면 아마 본 강의를 다 듣고 나시면 SQL을 이용해서 데이터 추출 및 가공까지 대부분의 데이터 처리는 다 SQL로 완료하고 통계 처리 함수 정도만 판다스로 한다던가의 수준으로 판다스 개입이 최소화되는 로직을 더 선호 하시게 될겁니다 ^^ 그리고 많은 회사들이 데이터 처리에 판다스 보다는 SQL을 핵심 기반으로 하고 있습니다. 나중에 업무 확장을 위해서라도 Analytic SQL을 배워두시는게 큰 도움이 될 수 있을 것입니다. 감사합니다.