2030 BigDATA

통계 특정집단을 대상으로 수행한 조사나 실험을 통해 나온 결과에 의해 요약된 형태의 표현 조사 대상의 범위에 따라 전수조사와 표본조사로 구분 전수 조사 대상 집단 모두를 조사하는데 많은 비용*시간이 소요되므로 특별한 경우를 제외하고는 사용되지 않음 표본 조사 모집단에서 샘플을 추출하여 진행하는 조사로 대부분의 설문조사가 표본조사로 진행됨 모집단의 정의, 표본의 크기, 조사방법, 조사기간, 표본추출방법을 정확히 명시해야 한다. # 표본 조사에서 사용되는 주요 용어 모집단[Population] 조사하고자 하는 대상 집단 전체 원소[Element] 모집단을 구성하는 개체 표본[Sample] 조사하기 위해 추출한 모집단의 일부 원소 모수[Parameter] 표본 관측에 의해 구하고자 하는 모집단에 대한 정보 표..

자격증/ADsP 2021. 2. 17. 17:17

확률 표본공간[S]에 있는 각 사건과 실수 P(A)가 대응하는 집합함수 부분집합인 각 사건에 대해 실수값을 가지는 함수의 확률 값 P(A)는 A의 확률[0 ≤ P(A) ≤ 1 , P(S) =1] 표본공간[Sample Space, S(간혹 Ω로 표기) 모든 가능한 실험 결과들의 모임 사건[Event] 표본공간[S]의 부분집합 원소[Element] 나타날 수 있는 개별의 결과들을 의미 확률변수[Random Variable] 표본공간[S]의 각 원소 S가 단 하나의 실수 X에 대응하는 함수 정의역이 표본공간 치역이 실수값[0 100개[양품80, 불량20개] 중 5개를 추출할 때, 불량품이 0개인 확률은? 이항정리 이항정리의 일반화[다항정리] 파스칼 정리 n개 중 r개를 뽑는 확률은 n-1개 중[1개를 미리 뽑..

자격증/ADsP 2021. 2. 14. 17:17

데이터마트[Data Mart] 데이터 웨어하우스와 사용자 사이의 중간층에 위치한 하나의 주제 또는 하나의 부서 중심의 데이터 웨어하우스 데이터 마트 내 대부분의 데이터는 데이터 웨어하우스로부터 복제되지만 자체적으로 수집도 가능 관계형 데이터베이스나 다차원 데이터베이스를 이용해 구축 동일한 데이터 셋을 활용할 경우, 최신 분석기법들을 이용하면 분석가의 역량 차이에 의한 분석 효과는 미미하지만 데이터 마트를 어떻게 구축하느냐에 따른 분속효과 차이는 큼 CRM[Customer Relationship Management] 관련 업무 중에서 핵심은 고객 데이터 마트 구축! 데이터 마트 내 대부분의 데이터는 데이터웨어하우스로부터 받음! → 받아온 데이터를 데이터 분석에 활용할 수 있는 자료로 변환하기 위해 만드는 ..

자격증/ADsP 2021. 2. 10. 17:17

데이터 분석 데이터 분석은 통계를 기반으로 두고 있지만 통계지식과 복잡한 가정이 상대적으로 적은 실용적인 분야 대기업들의 경우, 데이터웨어하우스[D.W]와 데이터마트[D.M]을 구축해 분석 데이터를 가져와 사용 신규시스템이나 D.W에 포함되지 못한 자료의 경우, Legacy, Staging Area, ODS에서 데이터를 가져와 D.W에서 가져온 내용과 결합하여 활용할 수 있다.[단, 전처리없이 D.W와 바로 결합하지는 못함] → 운영시스템[Legacy]에 직접 접근해 데이터를 활용하는 것은 매우 위험한 일이므로 거의 사용 안함 → Staging Area의 데이터는 운영시스템에서 임시로 저장된 데이터이므로 거의 사용 안함 ODS[운영데이터 저장소]의 데이터는 기존 운영시스템의 데이터를 전처리하여 정제된 데..

자격증/ADsP 2021. 2. 9. 17:17

사용자 정의 함수 function()을 사용해 사용자가 원하는 함수를 정의하기 위해 사용하는 함수 인수를 이용한 함수, 인수가 없는 함수를 만들 수 있음

자격증/ADsP 2021. 2. 8. 17:17

① If(조건){조건이 참일때 수행} else{조건이 거짓일 때 수행} if(condition){cons.expr}else{alt.expr} sum(x)가 sum(y)보다 항상 작으므로 if (sum(x)>sum(y)) {print(x)}는 값이 출력되지 않음 ② Ifelse(조건, 참, 거짓) if(condition,true,false) ③ switch(변수, 실행문1, 실행문2...) switch(expr, value1, value2.....)

자격증/ADsP 2020. 9. 2. 17:17

Apply계열 함수 주어진 함수 연산을 특정 단위로 쉽게 할 수 있도록 지원하는 함수군 for, while 등의 반복문보다 빠른 속도와 상대적으로 짧은 코드로 반복 연산 처리가 가능한 함수 apply 계열 함수를 사용하면 대용량 데이터에 대한 반복 연산을 쉽게 수행 가능 apply 행(Row) 또는 열(Column) 단위의 연산을 쉽게할 수 있도록 지원하는 함수 apply(데이터명, 1, na.rm = T) → 1 : 행 apply(데이터명, 2, na.rm = T) → 2 : 열 lapply list + apply를 의미하는 함수 → 실행결과를 list형태로 출력 → list인자는 length(데이터)만큼 생성 [인자는 변수의 개수만큼 생성] lapply(데이터명, func, na.rm = T) sap..

자격증/ADsP 2020. 9. 1. 17:17

unique( ) 함수 중복되는 값들을 제거할 때 사용 unique(x, incomparables= FALSE, ...) Arguments 설명 x 벡터, 데이터 프레임, 배열, NULL incomparables 비교할 수 없는 값의 벡터 FALSE로 지정할 경우 모든 값들을 비교할 수 있다는 의미 fromLast 중복이 마지막에서부터 고려되는지 아닌지를 논리 값으로 알려줌 기본은 FALSE nmax unique item들의 최대값을 알려줌 MARGIN 고정된 배열[array]의 margin 하나의 정수값을 가짐 duplicated( ) 함수 중복되는 값들을 제거할 때 사용 duplicated(x, incomparables=FALSE, ...) Arguments 설명 x 벡터, 데이터 프레임, 배열, N..

자격증/ADsP 2020. 8. 1. 17:17