44
소셜데이터의 재구성 LG CNS SMA/CRM남궁현 [email protected] @gmail.com

소셜데이터의 재구성

Embed Size (px)

Citation preview

Page 1: 소셜데이터의 재구성

소셜데이터의 재구성

LG CNS SMA/CRM팀

남궁현 [email protected] @gmail.com

Page 2: 소셜데이터의 재구성

데이터 재구성

데이터 분석

Page 3: 소셜데이터의 재구성

재구성 분석 proactive passive

Page 4: 소셜데이터의 재구성

분석 데이터

분석결과 / 보고서

Data Analyst

Page 5: 소셜데이터의 재구성

재구성 데이터

분석

해석 시각화 가공데이터 인사이트

분석결과 /보고서

Cleansing Data Modeling Adaptation Physical Architecture Fast Processing

Data Handling

Data Analysis

Data& Infrastructure

Insight& Report

Page 6: 소셜데이터의 재구성

Network Analysis Content Analysis Semi/Structured Data Un-structured Data

소셜 데이터

Page 7: 소셜데이터의 재구성

비정형 텍스트 데이터의 재구성

소셜 데이터의

Content Analysis를 위한

#SmartSMA #InsightReport

LG CNS SMA/CRM @ @

Page 8: 소셜데이터의 재구성

#과장

#분석파트장

#박사 #시맨틱웹

#온톨로지

#의료정보

#빅데이터

#공공데이터

#연구소

#소셜데이터

#텍스트 분석

#Linked Data

#Knowledge Base

[email protected]

Page 9: 소셜데이터의 재구성

재구성 데이터 데이터분석

Relating un-structured Data to

Ontology / Structured Knowledge

Page 10: 소셜데이터의 재구성

Semantic Annotation

Ontology Enrichment

Ontology Population

In Semantic Web Area

Page 11: 소셜데이터의 재구성

2007 2011

Linked Data

Currently

Realization of Ontology Enriched

From http://linkeddata.org/

Page 12: 소셜데이터의 재구성

Rich Snippets

Realization of Ontology Enriched

See https://developers.google.com/structured-data/

Page 13: 소셜데이터의 재구성

https://www.wikipedia.org/

http://www.yelp.com/ https://www.freebase.com/

Nearly Artificial Intelligence ≈ Answering Systems

Page 14: 소셜데이터의 재구성

Structured

Semi-Structured

Un-Structured

By Rich Snippets

Data Extraction, 자연어처리

저흰 주로 여기 있네요

Attachment

Attachment

Page 15: 소셜데이터의 재구성

Structured

Semi-Structured

Un-Structured

Not Here?

Why?

Page 16: 소셜데이터의 재구성

Approximately 90% of the world’s data is held in unstructured formats

90%

Structured Numerical or Coded Information

10%

Unstructured or Semi-structured Information

Possibilities ..

By http://www.oracle.com, 2012

Page 17: 소셜데이터의 재구성

No, Schema.org

http://schema.org/

Page 18: 소셜데이터의 재구성

No, Linked Data Cloud

From http://linkeddata.org/

Page 19: 소셜데이터의 재구성

Data Extraction 자연어처리

Scraping a.k.a. Focused Crawling

HTML Tag, DOM Handling

Instance Extraction

긍부정 분석

Topic Modeling (LDA)

Word Counting 모호성 해소

문서분류

What we do

Semi-Structured

Un-Structured

Page 20: 소셜데이터의 재구성

Page 21: 소셜데이터의 재구성

From **전자 김치냉장고 마케팅분석 by LG CNS

Page 22: 소셜데이터의 재구성

From **전자 김치냉장고 마케팅분석 by LG CNS

Page 23: 소셜데이터의 재구성

From *** 녹즙 마케팅포인트분석 by LG CNS

Page 24: 소셜데이터의 재구성

From **카드 신규카드 마케팅 전략 by LG CNS

Page 25: 소셜데이터의 재구성

From (NIA-BC카드 빅데이터 시범사업) SixPocket 분석 by LG CNS

Page 26: 소셜데이터의 재구성

At SmartSMA ShowRoom - http://smartsma.co.kr

Page 27: 소셜데이터의 재구성

+

데이터

Page 28: 소셜데이터의 재구성

Structured Data

Un-Structured Data

Page 29: 소셜데이터의 재구성

Know-How

LG CNS SMA/CRM @ @

Tools

Page 30: 소셜데이터의 재구성

데이터_crawling

ABcrawler by LG CNS Available at: https://www.odpia.org

Page 31: 소셜데이터의 재구성

틀_Data Modeling

BM 소셜데이터 내부데이터 외부데이터

Page 32: 소셜데이터의 재구성

재구성_Defined Rules

SAS Content Categorizer http://www.sas.com/

Page 33: 소셜데이터의 재구성

재구성_After Parser

Morpheme Anal. User Dic.

Patterned Str.

Text Prism by LG CNS Available at: https://www.odpia.org

Page 34: 소셜데이터의 재구성

재구성_Machine Learning

WSD module by LG CNS & BilKE Lab(http://bike.sn.ac.kr)

Page 35: 소셜데이터의 재구성

시각화

가공데이터 인사이트

해석

분석_Where we create Values

Page 36: 소셜데이터의 재구성

www.odpia.org

Page 37: 소셜데이터의 재구성

Big Picture

Page 38: 소셜데이터의 재구성

Social Data in Classifications

Page 39: 소셜데이터의 재구성

Indexed Reputations

Page 40: 소셜데이터의 재구성

Tangible Tools Data, and Alliances

Page 41: 소셜데이터의 재구성

From 분석 갤러리 in https://www.odpia.org/

Page 42: 소셜데이터의 재구성

정돈된 데이터 Tools & Know-How

in

Page 43: 소셜데이터의 재구성

Q & A

감사합니다.

Page 44: 소셜데이터의 재구성

Self Q & A

근데 *G의 마케팅은 왜 그런가요?