전체 글
-
세 집단을 비교하기Data Analysis/Statistics 2020. 8. 2. 22:11
Table of Contents Introduction 분산분석(Analysis of Variance;ANOVA)이란? 일원배치 분산분석(One-way ANOVA) 이원배치 분산분석(Two-way ANOVA) 다변량 분산분석(Multivariate Analysis of Variance, MANOVA) 공분산분석(Analysis of Covariance, ANCOVA) Reference Introduction 데이터 기반의 의사 결정을 위해 두 집단 간의 평균 차이를 비교하는 방법으로 T-검정이 있다. 두 집단을 비교하기를 통해 T-검정의 종류를 소개하였고, 종류 별 상황과 실제 R을 이용하여 분석을 하는 과정을 함께 설명하였다. 하지만, 일상 생활에서 우리는 의사 결정을 할때 두 가지의 경우에서 하나의 ..
-
두 집단을 비교하기Data Analysis/Statistics 2020. 8. 2. 21:23
Table of ContentsIntroductionT검정(T-Test)이란?일표본 T검정(One sample T-test)이란?독립표본 T검정(Independent-samples T-test)이란?대응표본 T검정(Paired-samples T-test)이란?Reference Introduction 최근들어 데이터 기반의 의사 결정이라는 말이 보편화되어 다양한 현장에서 활용하고 있으며, 이와 관련된 채용이 적극적으로 늘고 있는 추세이다. 제품 A를 판매하고 있는 회사에서 새로운 제품 B를 출시 하기 위해서 다양한 형태로 제품의 특성을 측정하고 이들 간의 관계를 분석하곤 한다. 이렇게 두 집단의 차이가 우연에 의해 발생하는 차이가 아니라 정말로 다른 두 집단이라는 검정을 하기 위해서 두 집단의 평균 차이를..
-
[Algorithms] 인공 신경망(Artificial Neural Network)이란?Data Analysis/Algorithms 2020. 7. 27. 23:26
Table of Contents Introduction 인공 신경망(Artificial Neural Network)이란? 인공 신경망 in R Reference Introduction 지난 날 인터넷 기술의 발달과 재생 에너지를 기반으로 3차 산업 혁명을 이끌어 왔다면, 4차 산업혁명(The Fourth Industrial Revolution)은 초연결(Hyperconnectivity)과 초지능(Superintelligence)이라는 특징을 가지고 있기에 기존의 주변 환경을 보다 빠르게 변화시키고 있다. 이를 가능케 했던 근본적인 기술에는 인공 지능(Artificial Intelligence;AI), 사물 인터넷(Internet of Things;IoT), 클라우드 컴퓨팅(Cloud Computing),..
-
[R] Bar Chart Race 재현 04Project/Bar Chart Race (with R) 2020. 7. 18. 13:10
목차 [R] Bar Chart Race 재현 01 [R] Bar Chart Race 재현 02 [R] Bar Chart Race 재현 03 서론 Bar Chart Race 재현 프로젝트의 마지막 단계로 지난 3번의 과정을 거쳐 데이터를 수집하고, 전처리 과정을 통해 데이터의 구조를 변경하는 작업을 진행하였다. 전처리 과정을 막대 그래프를 그리기 위한 과정이었으며, 이 과정에서는 melt()함수에 대한 이해가 필요했다. 데이터를 구조화 한 이후에 ggplot2를 이용하여 시각화를 한다. Bar Chart Race 재현의 마지막 과정으로 시각화 한 부분을 영상처리를 할 예정이다. 시각화 작업을 진행하기 위해서는 프레임 단위로 이미지가 생성이 되어야 가능하며, R에서는 gganimate를 활용하여 영상화를 진..
-
[R] Bar Chart Race 재현 03Project/Bar Chart Race (with R) 2020. 7. 11. 11:02
목차 [R] Bar Chart Race 재현 01 [R] Bar Chart Race 재현 02 서론 Bar Chart Race 재현 프로젝트를 수행하면서 전체적인 프로세스를 소개하였고 공공데이터를 수집하는 방법과 Bar Chart Race가 가능하도록 데이터를 가공하는 과정을 소개하였다. 이어서 가공한 데이터를 기반으로 데이터 시각화 하는 방법에 대해 가이드 할 예정이다. R에서는 기본으로 제공하는 graphics라는 라이브러리가 있으나, 시각화를 자유롭게 핸들링하기 위해서는 ggplot2를 추천한다. 본 재현에서는 기존에 있는 graphics 라이브러리가 아닌 ggplot2를 이용하여 시각화를 한다. 데이터 시각화 reshape2 라이브러리에 있는 melt()를 사용하여 [표 1]과 같이 데이터를 가공..
-
[R] Bar Chart Race 재현 02Project/Bar Chart Race (with R) 2020. 7. 5. 22:41
목차 [R] Bar Chart Race 재현 01 서론 지난 1년 동안 Bar Chart Race와 관련된 영상들이 계속해서 등장하여 많은 인기를 끌고 있다. 실제 Bar Chart Race를 구성해서 제공하는 콘텐츠부터, 다양한 툴을 활용하여 이를 제작하는 과정까지를 소개하는 콘텐츠들이 이에 해당한다. Bar Chart Race의 경우 다이나믹한 데이터 시각화를 애니메이션으로 보여주기 때문에 데이터에 대한 변화를 쉽게 이해 할 수 있다는 장점을 가지고 있다. Bar Chart Race를 재현하기 위한 연구모형으로 지난 Bar Chart Race 재현 01에서 을 소개하였다. 이번 재현에서는 원천 데이터를 수집하는 것부터 시작해서 원하는 형태로 데이터를 가공하는 전처리 단계까지의 데이터 엔지니어링(Dat..
-
[Algorithms] 연관 규칙(Association Rule) 분석Data Analysis/Algorithms 2020. 7. 4. 18:06
Table of Contents Introduction 연관 규칙(Association Rule)이란? 연관 규칙의 이해 연관성 분석 in R Reference Introduction 데이터 마이닝에 관심이 있는 사람들이라면 기저귀를 사는 사람이 맥주도 산다는 사례를 들어본 적이 있을 것이다. 남편에게 기저귀 심부름을 하면 맥주를 사오는 현상에 따라 진열장을 재 배치했다는 이 사례는 Rakesh Agrawal이 Marks & Spencer 라는 영국의 할인점 체인에서 시도한 분석 기법이다. 다만, 이게 실제 성공한 사례인지에 대해서는 알려진 바 없다. 바코드 시스템 도입으로 리테일 산업에서 대용량 데이터가 발생하기 시작했으며 이를 장바구니 데이터라고 부른다. 이런 대용량 데이터를 수집하기 전부터 도대체 ..
-
통계적 검정은 어떻게 하는가?Data Analysis/Statistics 2020. 6. 27. 19:19
Table of Contents Introduction 통계적 가설(Statistical Hypothesis)이란? 검정통계량(Test Statistic)이란? 오류(Error)와 유의수준(Significance level)이란? Reference Introduction 현대의 통계학과 다르게 대푯값을 집계만 해도 괜찮았던 시기가 있었다. 평균을 구하거나 백분률을 계산하는 방식의 고전적인 통계는 19세기 초에 세계적으로 널리 확산됐다. 간호사로 알려져 있는 나이팅게일(Florence Nightingale, 1820 ~ 1910)도 이러한 방법을 사용해서 참전했던 군인들의 현황을 집계하여, 전시에 사망한 군인보다 야전 병원에서 병균으로 전염된 환자의 수가 많다는 것을 알 수 있었다. 이를 바탕으로 전장 물..