AI/DS논문이야기

[논문이야기] 측정오차 하 광고 시계열 모델링 연구 ③

[논문이야기] 측정오차 하 광고 시계열 모델링 연구 ③

[논문이야기] 측정오차 하 광고 시계열 모델링 연구 ②에서 이어집니다. 이전 글 말미에, 예측적(Predictive) 관점에서 적절한 측정오차가 정규화(Regularization) 관점에서 도움을 줄 수 있다고 설명했죠. 또한 모두 다루지는 않았지만, 측정오차가 모형 잔차의 자기상관성(autocorrelation), 평균-분산 관계에(mean-variance trade-off) 유의미한 영향을 주지 않음도 확인할 수 있었습니다. 즉 이렇게만 보면 측정오차는 중요하지 않은 사소한 문제로 보입니다. 사실일까요? 이번 글에서는 ‘해석적(Analytic)’ 관점에서…

[논문이야기] 측정오차 하 광고 시계열 모델링 연구 ②

[논문이야기] 측정오차 하 광고 시계열 모델링 연구 ②

[논문이야기] 측정오차 하 광고 시계열 모델링 연구 ①에서 이어집니다. 이전 글에서는 디지털 광고가 ‘1인 1 스마트폰 시대’에 힘입어 광고 시장의 메인스트림으로 우뚝 올라서게 됐으며, 이제는 업계 차원에서 ‘측정오차’에 대한 적절한 조치가 필요한 시점이라고 화두를 던졌죠. 이번 글부터는 통계적 모델링을 통해 측정오차가 실제 광고 성과에 어떤 영향을 미치는지 본격적으로 살펴보겠습니다. ‘계통오차’와 ‘랜덤오차’로 구분되는 측정오차 측정오차에 대한…

[논문이야기] 측정오차 하 광고 시계열 모델링 연구 ①

[논문이야기] 측정오차 하 광고 시계열 모델링 연구 ①

디지털 광고는 매년 가히 폭발적으로 성장하고 있습니다. 특히 글로벌 팬데믹으로 인해 오프라인 시장이 크게 위축되던 시기에 소비의 중심축이 오프라인에서 온라인으로 옮겨가면서 디지털 광고는 전 세계 광고 시장의 메인스트림으로 자리잡게 됐습니다. 디지털 광고의 핵심은 단연 스마트폰입니다. 스마트폰 유저들이 PC, 노트북, 태블릿보다 우월한 편의성을 기반으로 언제 어디서나 웹에 접속할 수 있게 되면서 ‘웹 기반 매체’들이 새롭게 광고…

[논문이야기] 부동산 경매시장의 버블 ⑤

[논문이야기] 부동산 경매시장의 버블 ⑤

[논문이야기] 부동산 경매시장의 버블 ④에서 이어집니다. 이전 글에서 필자는 부동산 경매 시장의 정량적 분석을 통해 매매 시장의 버블을 찾아낼 수 있으며, 이는 곧 경매 시장의 ‘1등과 2등 간 입찰 가격 차이’라는 지표를 통해 확인할 수 있을 것이라는 가설을 제시했다. 해당 지표의 절댓값이 크다는 것은 곧 불특정 다수의 시장 참여자의 특정 자산(부동산)에 대한 미래 가치가 오를…

[논문이야기] 부동산 경매시장의 버블 ④

[논문이야기] 부동산 경매시장의 버블 ④

[논문이야기] 부동산 경매시장의 버블 ③에서 이어집니다. 이전 글을 통해 필자는 최근 부동산 시장이 침체 국면에 들어서고 있으며, 집값 급락으로 인한 버블 붕괴에 대비할 수 있는 지표의 필요성에 대해 밝힌 바 있다. 또한 이전 글을 통해 버블이 인간의 ‘군중 심리’ 본능에 의해 발생한다고도 설명했다. 이번 글에서는 부동산 매매 시장의 버블을 예측하기 위한 수단으로써 ‘경매’ 시장을 들여다봐야…

[논문이야기] 부동산 경매시장의 버블 ③

[논문이야기] 부동산 경매시장의 버블 ③

[논문이야기] 부동산 경매시장의 버블 ②에서 이어집니다. 이전 글(1,2)에서는 최근 경제 ‘뇌관’으로 떠오르고 있는 부동산 시장의 ‘버블’의 위험성에 대해 살펴봤다. 또한 필자는 버블은 세계적으로도, 역사적으로도 반복됐다는 점을 지적하며 왜 인간이 ‘같은 실수를 반복할수 밖에 없는지’에 대한 의문을 제기한 바 있다. 이번 글에서는 버블이 결국 인간의 비이성적 측면, 그중에서도 ‘군중 심리’ 또는 ‘양 떼 효과’에서 비롯된다는 점에…

[논문이야기] 부동산 경매시장의 버블 ②

[논문이야기] 부동산 경매시장의 버블 ②

[논문이야기] 부동산 경매시장의 버블 ①에서 이어집니다. 지난 글에 이어 이번 글에서는 버블의 의미와 역사, 그리고 버블이 반복되는 이유에 대해 살펴본다. 버블이란 버블(bubble)이란 이는 시장에 전반적으로 특정 자산이 과도하게 공급되면서, 해당 자산의 가격이 내재한 가치 또는 일반적인 수준보다 크게 형성되는 현상을 의미한다. 이는 과열된 경제 상황을 설명할 때 주로 사용되는 표현이기도 하다. 버블의 문제는, 거품이 꺼지면서…

[논문이야기] 부동산 경매시장의 버블 ①

[논문이야기] 부동산 경매시장의 버블 ①

부동산 시장이 침체기에 접어들면서 일각에서는 정부 차원에서 실물시장 충격을 최소화하기 위한 방침을 적극적으로 모색해야 한다는 목소리가 높다. 그러나 과거의 역사를 돌아보면 버블을 성공적으로 진압했던 사례는 전무하다. 이때 만약 버블을 선제적으로 탐지할 수 있다면, 부동산 시장에 새로운 문법을 쓸 수 있을 것이다. 주택 가격 내림세, 기준 금리 인상이 초래한 ‘부동산 거래 절벽 현상’ 한국부동산원이 내놓은 자료에…

[논문이야기] 부동산 경매 시장의 할인/할증 요인 – 번외

[논문이야기] 부동산 경매 시장의 할인/할증 요인 – 번외

이전 글(1,2,3,4)까지를 통해 부동산 경매 시장의 할인/할증 요인을 수학・통계학적으로 발견하고, 나아가 해당 요인에 대한 특성을 분석해 부동산 시장의 성격을 거시적으로 살펴봤다. 마무리 차원에서 이번 글에서는 필자가 본 연구를 하게 된 개인적인 배경과 소회를 밝힌다. 기술보다는 논리에 초점 위 주제로 논문을 쓰게 된 이유는 실제로 전공이 부동산이거나 전문 분야라서는 아니다. 최근 몇 년간의 업무 대부분은 데이터…

[논문이야기] 부동산 경매 시장의 할인/할증 요인 ④

[논문이야기] 부동산 경매 시장의 할인/할증 요인 ④

[논문이야기] 부동산 경매 시장의 할인/할증 요인 ③에서 이어집니다. 지난 글에서 필자는 경매 시장 분석(낙찰가율)의 한계를 푸리에 변환으로 해결했으며, 나아가 푸리에 변환으로 추출된 ‘잠재’ 컴포넌트들이 실제 변수로 직결된다는 것을 통계적으로 검정했다. 이번 글에서는 위 과정을 통해 추출된 할인/할증 컴포넌트의 정체가 무엇인지 살펴본다. 할인/할증 컴포넌트의 정체는 지금까지의 분석 결과를 정리해 보면 다음과 같다. 낙찰가율에서 매매 시세와 법원…

[논문이야기] 부동산 경매 시장의 할인/할증 요인 ③

[논문이야기] 부동산 경매 시장의 할인/할증 요인 ③

[논문이야기] 부동산 경매 시장의 할인/할증 요인 ②에서 이어집니다. 지난 글(1,2)에서 가격 분석이 아닌 시장 분석을 해야 하는 이유, 그리고 외부 데이터 동원이 힘든 점 등에 대해 살펴보며 부동산 경매 시장의 데이터 분석이 어렵다는 것을 확인했다. 그렇다면 이 문제를 어떻게 해결할 수 있을까? 이번 글에서는 위 두 가지 문제를 한 번에 해결할 방법을 소개한다. 푸리에 변환…

[논문이야기] 부동산 경매 시장의 할인/할증 요인 ②

[논문이야기] 부동산 경매 시장의 할인/할증 요인 ②

[latexpage] [논문이야기] 부동산 경매 시장의 할인/할증 요인 ①에서 이어집니다. 이전 글에서는 부동산 경매 시장을 왜 분석해야 하는지, 낙찰가율이라는 경매 시장의 시계열 지표가 어떤 오류를 가지는지, 그리고 법원 감정가 교정 등의 방법이 왜 비지니스에서 사용되기 어려운지를 살펴봤다. 서술한 문제들은 정확히 필자 또한 실무자로서 겪었던 문제들이기도 하다. 의사 결정을 위해 시계열 분석이 필요한 와중에, 낙찰가율의 고질적 문제로…

[논문이야기] 부동산 경매 시장의 할인/할증 요인 ①

최근 부동산 시장이 심상치 않다. 전 세계적으로 긴축 기조가 시작됨에 따라, 전문가들 사이에서는 코로나19 이후 통화 완화 정책으로 엄청난 유동성 수혜를 봤던 국내 부동산 시장의 ‘거품’이 꺼지면서 실물시장 충격에 대비해야 하는 것 아니냐는 우려가 나온다. 작년 말부터 미국을 포함한 주요국 중앙은행을 중심으로 인플레이션을 대비하기 위해 기준금리 인상이 지속되고 있는 가운데, 이에 따라 주택가격이 하락하면서 가계의…

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ⑤

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ⑤

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ④에서 이어집니다. 이전 글(1,2,3,4)까지의 기나긴 대장정을 통해, 우리는 에너지 사용량에 대한 기존 연구의 1차 모멘트 벡터(1st moment vector) 계산과 함께 회귀 모델의 ‘공분산’을 포함한 2차 모멘트 행렬(2nd moment matrix)까지 완전히 추정할 수 있게 됐다. 아울러 이렇게 계산된 1차 모멘트 벡터 및 2차 모멘트 행렬을 통해…

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ④

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ④

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ③에서 이어집니다. 이전 글(1,2,3)까지를 통해 필자는 에너지 사용량 추정의 필요성, 이와 관련된 기존 연구의 한계, 그리고 이를 개선하기 위해 종국적으로는 서로 다른 식들의 오차항들 간 ‘상관관계(correlation)’, 즉 2차 모멘트 행렬의 계산이 통계 모델에 포함돼야 한다고 설명했다. 이번 글에서는 이 같은 상관관계를 모델에 반영하는 통계적 방법론을…

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ③

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ③

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ②에서 이어집니다. 이전 글에서 기존 개별 건축물의 에너지 사용량은 종속 변수는 (각 월별) 에너지 사용량으로, 독립 변수는 연면적,총수, 재질 등의 건축물 속성으로 하는 회귀(Regression) 기반의 모델로 추정된다고 설명했다. 아울러 이전 글 말미에, 기존 연구가 2차 모멘트(2nd moment) 계산이 반영되지 않았기 때문에 현실을 제대로 설명하지 못한다고도…

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ②

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ②

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ①에서 이어집니다. 이전 글에서 언급했듯 에너지원 수급,생산,수송,설비 투자 등에 관한 효율적 의사결정을 위해서는 무엇보다도 에너지 사용량 추정이 정확하게 이뤄져야만 한다. 이번 글에서는 기존 연구들이 어떻게 ‘통계적으로’ 에너지 사용량을 추정했는지 개략적으로 살펴보고, 나아가 ‘계절적 추이’를 반영해야하는 이유를 짚어본다. 에너지 사용량을 현실적으로 추정하기 위한 방법, ‘회귀분석’ 이상적으로는,…

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ①

[논문이야기] 건축물 별 월간 전기/가스 사용량 예측:결합확률분포 모델 기반 예측 ①

대내외 경제 불확실성으로 올겨울 에너지 관련 원자재 가격 급등은 ‘예견’된 가운데, 전문가들은 지금부터라도 겨울철 에너지 사용량을 정확하게 예측하는 한편, 에너지 절약을 위한 대응 방안을 마련해야 한다고 당부했다. 그러나 정작 업계에서는 기존 에너지 사용량 추정에 사용됐던 방법론에 대해 의문을 제기하는 분위기다. 해당 연구들의 방법론이 현실을 제대로 대변하지 못한다는 이유에서다. 그렇다면 어떻게 정확하게 에너지 사용량을 예측할 수…

[논문이야기] 우리나라 제약업은 연구개발 중심일까 카피약 판매 중심일까? ③

가격 경쟁 구도 변화와 시장 점유율 구도 변화에서 핵심 논리는 산업별로 특이한 내재매몰비용이 있을 경우, 해당 비용에 대한 투입이 얼마나 많이 이뤄지느냐에 따라 상품의 품질에 영향을 받고, 결국 가격 경쟁 구도와 시장 점유율 구도가 변화한다는 논리가 아래에 깔려있다. 따라서 서튼(Sutton 1991, 1997, 1998)[1],[2],[3]의 논리가 실제로 한국 시장에 적용되는지 확인하기 위해서는 필수적으로 내재매몰비용(Endogenous sunk cost)이 있었는지…

[논문이야기] 우리나라 제약업은 연구개발 중심일까 카피약 판매 중심일까? ②

[논문이야기] 우리나라 제약업은 연구개발 중심일까 카피약 판매 중심일까? ②

공정거래위원회는 2010년 11월에 리베이트를 제공한 제약사 뿐만 아니라 리베이트로 불법 이득을 수취한 의료진까지 양쪽을 모두 처벌하는 이른바 ‘리베이트 쌍벌제’로 처벌 수위를 올렸다. 리베이트를 받은 의료진은 1년 이내 자격정지, 2년 이하 징역 등의 처벌을 받게됐고, 이어 2011년 4월에는 정부합동 리베이트 전담수사반이 만들어진다. 실제로 2012년 7월에 자사 의약품을 써 주는 대가로 의사 400명에게 리베이트성 향응, 접대를 제공한…