분석기술의 진화 및 활용사례 - saskorea.com€¦ · Copyright © 2013, SAS Institute Inc. All rights reserved. 기업내부 Smart Search 대상 컨텐츠 스마트 검색

Copyright © 2013, SAS Institute Inc. All rights reserved.

SAS Text Analytics: 텍스트 분석기술의 진화 및 활용사례 SAS Korea 구방본


비정형 텍스트 분석 이슈-진화

Text Analytics Framework

흥미로운 주요 기능

활용 사례

LG CNS SMA 소개

Wrap Up

Agenda


Quiz


텍스트 분석의 이슈

집 근처에 있는 하이마트 대리점 판매 점원이 LG전자 3D TV 를 보여 주면서 정말 자세히 설명을 해주더라구요~ 처음 본 3D TV라 그런지 정말 실감나고 신기했어요, 디자인은 삼성이 좋아서 알아 봤는데 가격은 착하지 않더라구요.

긍정의 글 ? 무엇이 긍정 ? 어느 회사 이야기 ?

제품의 무슨 속성이 좋은지 ? 제품의 어떤 속성을 안 좋다고

하는지?


텍스트 분석의 진화

침수 침수

재난분야

물이 발목까지 물이 허리까지

피해 정도

강남역 뉴욕제과 서울역 아울렛

위치

100mm 148.5mm

강수량

9.7m 5.31kgf/m^2

하수관거

침수 확인 침수 확인

CCTV 정형 데이터

비정형 데이터


Crawler

Data

Quality

Data

Integration

Social Data Service

ODS

Event Streaming

외부 데이터

End User Analytics

EG+RPM

E-DW

A-DW

Packed-Model

Analytic

Sandbox

Big Data Farm

M2M 데이터

DataFlux@

ESP

Engine Visualization Grid In-Database In-Memory

Visual

Analytics

FDC

ATM

CDR

Web Log

Rule & Model Data Management System Monitoring Cloud Computing

Visualization Grid In-Database In-Memory

Visual

Analytics

내부 데이터

기간계

SAS Big Data Analytics Platform


SAS Text Analytics Framework

Crawler

Data Quality

Media Portal

Conversation

Center

Media

Workbench

Business Analytics

Social Network Analysis

Data Mining

Text Summarization

Sentiment Analysis

Text Mining Content Categorization

Text Analysis for Unstructured Data

Business Analysis for Structured Data

Business Analysis for Social Network

Data

Integration

30 L

anguage


Text Summarizer Content Categorizer

1. SAS TA 개요

계층 및 Flat 분류를 지원 목적성으로 사전에 만들어진 분류 Template 제공 분류 노드 수의 제한이 없으며 대용량의 문서 분류 제공 손쉬운 분류 Rule 편집기능 제공 자동적으로 자연어 처리 및 단순 / In-Depth 규칙 적용

주요 키워드에 대한 컨셉 정의 의미 기반의 문장에 대한 Weight 스코어링 중요성에 대한 문장 이나 구문 추천 문서의 요약 정보 생성

Text Analytics 주요 제품


문맥을 긍정/부정, 좋고/나쁨, 상향/하향중립으로 분류 Statistical 모델링 기능 Linguistic 모델링 Hybrid 모델링 제품 이미지 Trend Tracking/ 모니터링

Text Miner Sentimental Analysis Manager

문서 용어 및 핵심 키워드 추출 자체 동의어 Parsing 기능 종합적인 텍스트 전처리 능력 및 차원축소 기법 텍스트 클러스터링 알고리즘 용어간의 연관관계 분석

1. SAS TA 개요 Text Analytics 주요 제품


지원 언어 : Arabic, Chinese, Czech, Danish, Dutch, English, Finnish, French, German, Greek, Hebrew, Hungarian, Indonesian, Italian, Japanese, Korean, Norwegian, Polish, Portuguese, Romanian, Russian, Slovak, Spanish, Swedish, Thai, Turkish, and Vietnamese. Dialects included Simplified and Traditional Chinese, Parisian and Canadian French, Old and New World German, Nynorsk and Bokmål Norwegian, and both Portugal and Brazilian Portuguese, Spanish.

주요기능 - 30개 언어 지원


주요기능 - 의미 기반 정확한 분류

복문의 문장 구조에서 의미가 다른 문장을 각각

의미에 따라 분류


주요기능 - Rule-based 기반 개체명 인식 기능

Rule 기반으로 개체명 인식이 가능.

조직, 사람 등의 개체명 인식을 Rule을 통해 인식 가능


주요기능 - Subject 관련 Keyword 찾기

“북한” 컨셉 옆 2-3줄내의 복합 명사와 동사 키워드 추출


좋아하는 대상 찾기(target). 좋아하는 주체 찾기(holder).

주요기능 - Target detection & opinion holder 기능


Mobile & Hi-Tech

Retail

Smart Search

SMA 서비스

SAS Text Analytics 활용 사례


Mobile, High-tech – Hot Risk Issue Alert

신상품 출시 후 품질 조기 경보

수많은 VOC 중 Hot Risk 도출

Top 20 Risk Alert

리스크 확산 방지

제품 및 회사에 대한 이미지 지속

TA 마이닝


내/외부 VOC 통합 분석 Insight 빅데이터 분석 구조

포스팅/댓글 한 사람의 구매 외부 고객 Identification

신상품 출시 후 품질 조기 경보

내외부 VOC통합 Hot Risk 도출

외부 고객 Identification

성향/취향, 구매실적 연계분석

전략적 디지털 마케팅 활용

통합 VOC분석/ 외부 고객 Identification

18%

4배, 2-3주 선행

18% Identify


기업내부 Smart Search

대상 컨텐츠 스마트 검색 시스템 정보 활용

창의적 업무 활성화

협업/소통 증가

필요정보 검색시간 감소

맞춤 통합 검색기능

전문가 검색기능

찾아오는 검색기능

검색 Layer

검색엔진

색인DB

관심정보 추천

용어 관리

컨텐츠 자동분류/Tagging

UI Layer 분석 Layer

전문가 네트워크

분석 엔진 데이터I/F

…

정보 정확성 100향상

1만건 -> 100건 맞춤 추천

검색 소요시간 80% 감소

업무 리드타임 40% 단축

협업과제 수행을

위한 기회발굴


시점별 주요 Keyword 추이 분석

powered by SAS

SMA On-Demand 서비스


LG CNS Smart SMA

데모


Wrap Up

18년 역사의 자연어 처리 기술

검증된 30개언어 텍스트 분석 엔진(≠하둡+R )

통합 마이닝(텍스트 마이닝 + 데이터 마이닝)

빅데이터 분석의 필수품


See Your Big Results with

SAS® Visual Analytics

Documents

분석기술의 진화 및 활용사례 - saskorea.com€¦ · Copyright © 2013, SAS Institute Inc. All rights reserved. 기업내부 Smart Search 대상 컨텐츠 스마트 검색