Embed Size (px)
DESCRIPTION
진정한 빅데이터 플랫폼 기반의 지식 분석도구인 Palantir(팰런티어, 팔란티르)의 한글 버전 소개서입니다....
Citation preview
The Palantir
By Seunghoon Lee,
MOS Asia
April, 2013
07/08/2014
2
인신 매매 조직을 어떻게 찾아내는가?
국민 건강 보험 사기를 어떻게 막을 수 있는가?
어떻게 세금 도둑과 은닉 재산을 찾아낼 수 있는가?
어떻게 조직 폭력배를 찾아내는가?
어떻게 테러나 재해를 미리 예측할 수 있을까?
07/08/2014
4
방대하고 복잡한 데이터의 지식관계를
시각화하여 표현하는 도구
단계적이고 폐쇄적인 환경에서 구동
(하나의 데이터베이스가 모두를 지배 할)
07/08/2014
6
팰런티어는 다양한 분야에서 복잡한 문제를
해결할 수 있는 솔루션입니다.
정보/국방
법 집행 및 준수
재무 분석 / 사기 (은행 / 텔레콤)
사이버 / 기업 보안
대규모 데이터를 포함하는 다른 시나리오 솔루션
팰런티어는 전 조직이 협업하여 지식을 관리하기 위한 해법을 제공합니다
데이터 통합 •구조적 또는 구조화, 관계형, 시간적 데이터를 통합할 수있는 기능과 지리 정보가 포함되어 있음 •정보를 얻을 수는 있지만 데스크톱, 소유자 시스템, 데이터베이스의 데이터를 대체하지 않습니다 ..
데이터 종류 Every piece of information in Palantir comes from a Data Source
Why does this matter?
데이터 통합
• 구조화 된 데이터 및 비 구조화된 데이터
• 서버에서 데스크탑에 이르기까지 모든 자원
• 데이터 소스 사이의 응용 프로그램 보안
• 원격 데이터에 통합 동시 검색
• 데이터를 연결하지만, 데이터 소스를 대체하지 않습니다
• 팰런티어는 데이터 계층 기업입니다
검색 및 데이터 검색
하나의 인터페이스 (영구, 개념적, 지리)에 모든 데이터 소스에서 검색하고 표준 ICD 501에 의해 확인된 보안 - 정보 커뮤니티 (미국)의 임원 :
단일 인터페이스에서 모든 데이터를 검색
검색, 개념 영구, 통계, 시간적 지리
보안 사용 및 관리 ( 'DCI 규격 501')에 적용
팰런티어는 기업 데이터 검색 서비스입니다
검색 및 데이터 검색
07/08/2014
13
지능형 커뮤니티의 일원: 지능 커뮤니티에서 발견과 정보 또는 검색의 보급
지식 관리
지식 관리
지식 관리
지식 관리
보안 분석을위한 중앙 저장소
다른 사람의 일을 할 수 있는 애널리스트 활용
보안 모델은 매우 강력한 기능을 제공
데이터 소스 및 보안 수준 사이의 해상도를 관리
혁신적인 데이터베이스
팰런티어는 지식 관리 솔루션입니다
지식 관리
협업 기반
중앙 저장소를 확보하여 BD는 수정 및 그룹 작업에 초점을 맞춘 작업을 수행
데이터 모델링 각자 다른 유형의
데이터들을 상관관계 분석 모델링
협업 기반
더 많은 데이터 분석을 서로 공유
조직 내외부 사이에서
기고, 공지 및 평가를 통해
개념은 엔지니어들이 공동 작업하는 방식에 따라
개인 정보 보호에 설계된 전용 시스템
팰런티어는 협업기반의 솔루션입니다
미리보기 / 링크 분석 검토
공동 통제
지식 관리
검색 및 검색 데이터
데이터 통합
Raptor – 비정형 데이터 처리 07/08/2014
24
• 색인 데이터 소스 (데이터베이스, 파일 저장소, 운영 체제 등) • 검색 (SQL 같은) 용어 또는 쿼리를 사용 할 수 있습니다 • 데이터 소스의 수정을 모니터링하고 팰런티어 클러스터에 변경 사항을 전송
사용자 정의 온톨로지 07/08/2014
26
세분화 된 액세스 제어
07/08/2014
29
- 유닉스 권한이 만든 제어 시스템과 유사 그룹과 사용자의 정의에 따르면,
- 마크 비밀 또는 분류의 권한을 취득했습니다. 이 마크는 또한 시스템에 데이터를 포맷하거나 강조하는 데 사용할 수 있습니다.
None Users have no access at all to the data.
Discovery Users can discover through a search that data exists in an investigation,but they cannot read,
change, or delete the data.
Read Users can discover and read data, but not change or delete it.
Write Users can discover, read, change, and delete data.
Owner Users can discover, read, change, and delete data, as well as change thepermissions of the
associated data source.
07/08/2014
30
세분화 된 액세스 제어
07/08/2014
31
히스토리를 제어하고 변경
07/08/2014
34
아키텍쳐
07/08/2014
35
중앙 집중식 관리 아키텍처
Analytical Stack Open Source Stack Palantir Stack Description
Palantir Government System of record,
knowledge management,
collaboration
Object Explorer Let subject matter experts
explore Big Data
Horizon Programmatically run fast
streaming algorithms
HBase, HyperTable,
Cassandra
HBase/Cassandra Run fast structured queries,
run longer SQL-style
analysis
Hadoop Map Reduce, Pig,
Hive
Hadoop Map Reduce Run programmatic queries
in parallel
Hadoop HDFS Hadoop HDFS Raw data storage
07/08/2014
37
07/08/2014
39
조직 및 조사 관리
07/08/2014
40
발견, 분석 및 지식 관리
07/08/2014
41
데이터 소스 관리
07/08/2014
42
조사 발표 및 요약
07/08/2014
43
객체 조작, 타임 라인, 히스토그램
07/08/2014
44
주파수 분석기 형식의 데이터보기
07/08/2014
45
데이터 분석 보기
07/08/2014
46
데이터 분석 보기
07/08/2014
47
데이터 분석 보기
07/08/2014
48
데이터 분석 보기
07/08/2014
49
기술 분석 : 경쟁 우위를 점할 수 있게 해주는 분석 신축성
데이터베이스 아이텍쳐
보안 모델
검색 자동화
온톨로지 / 의미론적
법인 해상도
협업 모델
데이터 수집
링크 분석
GIS 통합
객체 속성
히스토리
히스토그램 / 그래픽
타임 라인
요약 도구
흐름보기
개체 그룹화
각 경우의 분석을 연결
빠른 검색속도
확장성
DCI 501/Diretivas INT 준수...
사용자 인증
라이센스
특징 - 비교 차트 07/08/2014
50
07/08/2014
분석 – 헤즈볼라 그룹의 자금 (비디오 : 10 분)
분석 – 이란의 함대 접근 금지 (비디오 : 10 분)
07/08/2014
53
분석 - 국방정보 모바일 , 위법 사례 적발
분석 - 은행 사기 (비디오 : 6 분)
분석 – 사이버 보안
인공 지능은 충분하지 않습니다
딜레마:
1) 기계는 적응 적으로 처리 할 수있는 인간의 능력을 대체하지 않습니다.
2) 인간은 거대한 양의 데이터를 볼 수 없습니다
Palantir: 인간이 분석을 주도
인간의 능력을 높이기 위한 지렛대로 컴퓨터를 사용
인공 지능
인간의 복합적인 인텔리전스
Successful Analysis
From: shadowserver.org, and shadows-in-the-cloud.net
07/08/2014
62
07/08/2014
63
