Big Data 와 DQ를 통한 게임 분석

Big Data ?? DQ ??

데이터분석 !!

Level 200

소개

강성욱 김상수

SQL Server 운영과 튜닝

PLAY?

불편한 진실.

• 비가오면 동접이 높다?

- 큰 차이가 없더라.

• 시험기간에는 동접이 떨어진다?

- 오히려 늘었다.

• 동접이 가장 높을 때는

• - 크리스마스 이브! (싱글들이 많나?)

로그 된다.

SIZE?

psx001tg010268 tds005tg2936

빅데이터?

Game Log = Big Data

다양하고

속도가 빠르면

크고

ACID? 분산처리

확장성 분석 비즈니스

Game Log = Big Data

빅데이터?

가치가 있는가?

tds028tg0053

게임로그

걸림돌?

품질 저하로

인한 통계의

부정확성

데이터

폭발로 인한

저장 문제

대용량

분석에서

속도 문제

Big Data 분석의 핵심 키워드 3가지

품질향상

분석

주제

통찰력

손실.

오류?

• 남/여, M/F,

1/0 , 1/2

표준화

• 주소의 30%

오류

완전성

• 3년전 10살이

던 사용자는

지금도 10살

명확성

• 10레벨 이상

황금도끼 소

유 가능

유효성

• 김상수 라는

유저는 오직

한명이다

유일성

SELECT 성별, COUNT(*) FROM DW_회원 GROUP BY 성별

멘붕

비율은?

좋아할까?

클렌징

M, F

1, 2 남, 여

남:1, 여:0

IQ? EQ? DQ!

OLAP Data

Legacy Data

Cloud DataMarket

기술관리

수집

일치 기술자료

검색

프로파일링

SQL 2012 DQS 설치

SQL 2012 DQS 설치

SQL 2012 DQS(Data Quality Service)

DQS의 기능

기술검색 도메인관리

데이터 일치 데이터 정리

기술자료

DQS with SSIS DEMO

Big Data 분석의 핵심 키워드 3가지

품질향상

분석

주제

통찰력

분석 주제 설정

접속 패턴 분석

신규/ 재가입자

유지자

탈퇴 징후자

탈퇴자

BI SEMANTIC MODEL

Client Tools

Data Sources

BI Semantic Model

Data model

Business logic

and queries

Data access

Team BI Created by user or IT Team context Managed on server

Personal BI Created by user Individual context Exists as document

Corporate BI Created by IT Organizational context Actively managed on server

Single model

for BI … … multiple ways to

build it

BI Semantics

BI SEMANTIC MODEL Power View

접속 패턴 분석

DEMO

다차원 모델링

SSIS

BI Semantic Model (Multidimensional Model)

가입 단계별 분석

계정생성

캐릭터생성

게임플레이

가입 단계별 분석

DEMO

다차원 모델링

SSIS

BI Semantic Model(Tabular Model, Power Pivot)

Big Data 분석의 핵심 키워드 3가지

품질향상

분석

주제

통찰력

통찰력!

tds028tg0049

Accel? Excel!

DEMO

Analysis with Azure

DEMO

요리 만들기..

데이터 품질 향상

분석 주제 설정

분석을 통한 통찰력 확보