ADsP 데이터 분석 준전문가 PART 01 - 기타

< DBMS >

# DBMS

: Data Base Management System의 약자

: 데이터베이스를 관리하여 응용 프로그램들이 데이터베이스를 공유하며 사용할 수 있는 환경을 제공하는 소프트웨어

: 데이터베이스를 구축하는 틀 제공, 효율적인 데이터 검색, 저장 기능 제공

ex) 오라클, 인포믹스, 액세스

​

# 관계형 DBMS

: 데이터를 컬럼과 로우를 이루는 하나 이상의 테이블로 정리

# 객제지향 DBMS

: 정보를 '객체' 형태로 표현하는 데이터베이스 모델

# 네트워크 DBMS

: 레코드들이 노드로, 레코드들 사이의 관계가 간선으로 표현되는 그래프를 기반으로 하는 데이터베이스 모델

# 계층형 DBMS

: 트리 구조를 기반으로 하는 계층 데이터베이스 모델

​

< SQL>

# SQL

: Structured Query Language의 약자

: 데이터베이스를 사용할 때 데이터베이스에 접근할 수 있는 데이터 베이스의 하부 언어

: 영어 문장과 비슷한 구문

​

# SQL 집계 함수

- AVG : 평균

- COUNT : 조건이 맞는 것의 개수를 반환 --> 수치형, 문자형 (어떠한 데이터 타입에서도 사용 가능)

- SUM : 총합

- STDDEV : 분산

- MIN : 최소

- MAX : 최대

​

< 개인정보 비식별 기술 >

: 데이터 셋에서 개인을 식별할 수 있는 요소를 전부 또는 일부를 삭제하거나 다른 값으로 대체하는 방법으로 개인을 알아볼 수 없도록 하는 기술

​

# 데이터 마스킹

: 데이터의 길이, 유형, 형식과 같은 속성을 유지한 채 새롭고 읽기 쉬운 데이터를 익명으로 생성하는 기술

# 가명 처리

: 개인 정보 주체의 이름을 다른 이름으로 변경하는 기술, 다른 값이 대체될 때 일정한 규칙 노출되지 않도록 주의

# 총계처리

: 데이터의 총합을 보임으로서 개별 데이터의 값이 보이지 않도록 함

# 데이터값 삭제

: 필요없는 값 또는 개인식별에 중요한 값을 삭제

# 데이터 범주화

: 데이터의 값을 범주의 값으로 변환하여 값을 숨김

​

< 무결성과 레이크 >

# 데이터 무결성

: 데이터베이스 내의 데이터에 대한 정확한 일관성, 유효성, 신뢰성을 보장하기 위해 데이터 변경/수정 시 여러 가지 제한을 두어 데이터의 정확성을 보증하는 것을 말함

- 무결성 제한의 유형: 개체 무결성, 참조 무결성, 범위 무결성

​

# 데이터 레이크

: 수많은 정보 속에서 의미있는 내용을 찾기 위해 방식에 상관없이 데이터를 저장하는 시스템, 대규모의 저장소 의미

​

< 빅데이터 분석 기술 >

# 하둡 Hadoop

: 여러 개의 컴퓨터를 하나인 것처럼 묶어 대용량 데이터를 처리하는 기술

: 분산 파일 시스템을 통해 수 천대의 장비에 대용량 파일을 저장할 수 있는 기능 제공

​

# Apache Spark

: 실시간 분산형 컴퓨팅 플랫폼

​

# Smart Factory

: 공장 내 설비와 기계에 사물인터넷이 설치되어 공정 데이터가 실시간으로 수집, 데이터에 기반한 의사결정이 이뤄짐으로써 생산성을 극대화할 수 있는 기술

​

# 머신러닝

: 인공지능의 연구 분야 중 하나, 인간의 학습 능력과 같은 기능을 컴퓨터에서 실현하고자 하는 기술 및 기법

ex) 딥러닝 - 컴퓨터가 많은 데이터를 이용하여 사람처럼 스스로 학습할 수 있게 하기 위해서 인공 신경망 등의 기술을 기반하여 구축한 기계학습 기술 중 하나

​

# 블록체인

: 거래 정보를 하나의 덩어리로 보고 이를 차례로 연결한 거래 장부

​

# B2B - 기업과 기업 사이의 거래를 기반으로 한 비즈니스 모델

# B2C - 기업과 고객 사이의 거래를 기반으로 한 비즈니스 모델

​

< 데이터의 유형 >

정형 데이터 : 형태 O, 연산 O , 관계형 데이터 베이스에 저장

반정형 데이터 : 형태 O, 연산 X, 파일에 저장

비정형 데이터 : 형태 X, 연산 X, NoSQL에 저장