Qaish Kanchwala는 The Weather Company^®의 머신 러닝(ML) 엔지니어링 관리자로, DevOps, ML 및 데이터 엔지니어를 포함한 8명의 엔지니어로 구성된 팀을 관리하고 있습니다. 이 엔지니어들은 The Weather Company의 프로덕션에 사용되는 ML 모델을 구축하고 훈련하는 일을 담당하고 있습니다. Kanchwala가 책임지는 업무의 대부분은 엔지니어링 팀을 위한 솔루션을 설계하고 작업이 제시간에 완료되도록 하는 것입니다.

The Weather Company는 데이터를 우선으로 하는 조직으로 거듭나고 있습니다. Kanchwala 팀에게 이는 고객 광고, 개인화, 건강 상태 예측을 위한 ML 사용 사례에서 데이터를 활용하는 것을 의미합니다. 미래의 광고는 더 이상 쿠키나 기타 식별자에 의존하지 않기 때문에, Kanchwala 팀은 데이터를 사용하여 사용자 세그먼트를 예측합니다. 그런 다음 예측한 사용자 세그먼트를 다양한 광고 캠페인에 사용합니다.

데이터를 사용하여 예측한 사용자 세그먼트의 정확도는 수익 창출에 영향을 미칠 수 있으므로 Kanchwala 팀은 이러한 캠페인에 최적화된 가장 정확한 데이터를 사용해야 합니다. 예를 들어, 모델의 정확도가 낮으면 고객이 도달하고자 하는 세그먼트에 대한 인덱싱이 부족하거나 의도한 오디언스 세그먼트에 도달하지 못하는 광고 캠페인이 발생할 수 있습니다.

이러한 모델 예측을 위해 Apache Airflow 및 Sagemaker와 같은 데이터 파이프라인을 사용하기 때문에 파이프라인은 신뢰할 수 있어야 하고 데이터는 정확해야 합니다.

Kanchwala는 “저희의 경우, 구축한 세그먼트와 예측에 따라 많은 비즈니스 의사 결정이 이루어지고 있습니다.”라고 말합니다. "이러한 세그먼트를 구축할 때 예측 파이프라인으로 들어가는 데이터가 정확해야 해당 파이프라인에서 나오는 예측이 정확해지기 때문에 정확도를 확보하기 위해 노력하고 있습니다. 여기서 정확도가 떨어지면 누군가의 비즈니스 결정이나 수익에 영향을 미칠 수 있습니다.”

대부분의 데이터 및 ML 엔지니어링 팀과 마찬가지로, 시간 경과에 따른 모델 성능을 추적하고 변경 사항이 발생할 때 알림을 받을 수 있도록 사전 알림을 입력하는 것은 어려운 일이었습니다. Kanchwala 팀이 데이터 문제를 인식하지 못한다면 고객은 오래되거나 관련성이 낮은 데이터를 기반으로 한 예측을 사용하여 결정을 내리게 될 수 있습니다.

The Weather Company는 세계 최고의 날씨 정보 제공업체¹로, 사람과 기업이 날씨에 대해 보다 정보에 입각한 결정을 내리고 조치를 취할 수 있도록 지원합니다. The Weather Company에서 제공하는 오픈 웹을 통한 대량 기상 데이터, 인사이트, 광고, 미디어 솔루션은 전 세계의 사람, 기업 및 브랜드가 확장 가능하고 개인정보를 보호하는 방식으로 날씨에 대비하고 날씨의 힘을 활용할 수 있도록 지원합니다.

¹ Comscore에 따르면, 월간 순방문자 수 평균을 기준으로 2022년 전 세계 일기 예보 제공업체 중 가장 많은 순방문자(웹 및 앱)를 확보한 곳은 The Weather Channel이었습니다. Comscore Media Metrix®, Worldwide Rollup Media Trend, News/Information – 날씨 카테고리(The [M] Weather Channel 포함), 2022년 1월~12월 평균