강좌 / 팁

기 타 [인공지능 - Ai] ANN, DNN, CNN, RNN 개념과 차이

2020.12.29 13:25

elios 조회:1852 추천:4

앞전에 머신러닝과, 딥러닝의 개념에 대해서 간단하게 알아보았는데요.

이번에는 인공지능에 대해서도 함께 알아보겠습니다.

인공지능, 머신러닝, 딥러닝

인공지능(Artificial Intelligence)는 인간의 지능이 갖고 있는 기능을 갖춘 컴퓨터 시스템을 뜻하며, 인간의 지능을 기계 등에 인공적으로 구현한 것을 말합니다.

머신러닝(Machine Learning) 혹은 기계학습은 인공지능의 한 분야로, 컴퓨터가 학습할 수 있도록 하는 알고리즘과 기술을 개발하는 분야를 뜻합니다.

딥러닝(Deep Learning)은 여러 비선형 변환기법의 조합을 통해 높은 수준의 추상화(다량의 복잡한 자료들에서 핵심적인 내용만 추려내는 작업)을 시도하는 기계학습 알고리즘의 집합으로 뜻합니다.

01.png

 

인공지능 vs 머신러닝 vs 딥러닝

따라서 위의 그림처럼 가장 포괄적인 인공지능 분야 안에 머신러닝이 속하고 있고, 머신러닝 분야 속에는 딥러닝 분야가 속해있다고 볼 수 있겠습니다.

● ANN, DNN, CNN, RNN

ANN(Artificial Neural Network)

위에서 설명한 머신러닝의 한 분야인 딥러닝은 인공신경망(Artificial Neural Network)를 기초로 하고 있는데요. 인공신경망이라고 불리는 ANN은 사람의 신경망 원리와 구조를 모방하여 만든 기계학습 알고리즘 입니다.

인간의 뇌에서 뉴런들이 어떤 신호, 자극 등을 받고, 그 자극이 어떠한 임계값(threshold)을 넘어서면 결과 신호를 전달하는 과정에서 착안한 것입니다. 여기서 들어온 자극, 신호는 인공신경망에서 Input Data이며 임계값은 가중치(weight), 자극에 의해 어떤 행동을 하는 것은 Output데이터에 비교하면 됩니다.

 

02.jpg

 

ANN 인공신경망

인공신경망은 시냅스의 결합으로 네트워크를 형성한 인공뉴런(노드)이 학습을 통해 시냅스의 결합 세기를 변화시켜, 문제 해결 능력을 가지는 모델 전반을 가리킨다. (출처 : 위키백과)

쉽게 설명하자면,

신경망은 다수의 입력 데이터를 받는 입력층(Input), 데이터의 출력을 담당하는 출력층(Output), 입력층과 출력층 사이에 존재하는 레이어들(은닉층)이 존재합니다. 여기서 히든 레이어들의 갯수와 노드의 개수를 구성하는 것을 모델을 구성한다고 하는데, 이 모델을 잘 구성하여 원하는 Output값을 잘 예측하는 것이 우리가 해야할 일인 것입니다. 은닉층에서는 활성화함수를 사용하여 최적의 Weight와 Bias를 찾아내는 역할을 합니다.

ANN의 문제점

학습과정에서 파라미터의 최적값을 찾기 어렵다.

출력값을 결정하는 활성화함수의 사용은 기울기 값에 의해 weight가 결정되었는데 이런 gradient값이 뒤로 갈수록 점점 작아져 0에 수렴하는 오류를 낳기도 하고 부분적인 에러를 최저 에러로 인식하여 더이상 학습을 하지 않는 경우도 있습니다.

Overfitting에 따른 문제

학습시간이 너무 느리다.

은닉층이 많으면 학습하는데에 정확도가 올라가지만 그만큼 연산량이 기하 급수적으로 늘어나게 됩니다.

하지만 이는 점점 해결되고 있습니다. 느린 학습시간은 그래픽카드의 발전으로 많은 연산량도 감당할 수 있을 정도로 하드웨어의 성능이 좋아졌고, 오버피팅문제는 사전훈련을 통해 방지할 수 있게 되었습니다.

DNN(Deep Neural Network)

 

03.png

 

Nerual Network vs DNN

ANN기법의 여러문제가 해결되면서 모델 내 은닉층을 많이 늘려서 학습의 결과를 향상시키는 방법이 등장하였고 이를 DNN(Deep Neural Network)라고 합니다. DNN은 은닉층을 2개이상 지닌 학습 방법을 뜻합니다. 컴퓨터가 스스로 분류레이블을 만들어 내고 공간을 왜곡하고 데이터를 구분짓는 과정을 반복하여 최적의 구번선을 도출해냅니다. 많은 데이터와 반복학습, 사전학습과 오류역전파 기법을 통해 현재 널리 사용되고 있습니다.

그리고, DNN을 응용한 알고리즘이 바로 CNN, RNN인 것이고 이 외에도 LSTM, GRU 등이 있습니다.

CNN(합성곱신경망 : Convolution Neural Network)

기존의 방식은 데이터에서 지식을 추출해 학습이 이루어졌지만, CNN은 데이터의 특징을 추출하여 특징들의 패턴을 파악하는 구조입니다. 이 CNN 알고리즘은 Convolution과정과 Pooling과정을 통해 진행됩니다. Convolution Layer와 Pooling Layer를 복합적으로 구성하여 알고리즘을 만듭니다.

 

04.png

 

CNN

Convolution

05.png

 

CNN - convolution

데이터의 특징을 추출하는 과정으로 데이터에 각 성분의 인접 성분들을 조사해 특징을 파악하고 파악한 특징을 한장으로 도출시키는 과정이다. 여기서 도출된 장을 Convolution Layer라고 한다. 이 과정은 하나의 압축 과정이며 파라미터의갯수를 효과적으로 줄여주는 역할을 합니다.

Pooling

이는 Convolution 과정을 거친 레이어의 사이즈를 줄여주는 과정입니다. 단순히 데이터의 사이즈를 줄여주고, 노이즈를 상쇄시키고 미세한 부분에서 일관적인 특징을 제공합니다.

CNN은 보통 정보추출, 문장분류, 얼굴인식 등의 분야에서 널리 사용되고 있습니다.

RNN(순환신경망 : Recurrent Neural Network)​

 

06.jpg

 

RNN

RNN 알고리즘은 반복적이고 순차적인 데이터(Sequential data)학습에 특화된 인공신경망의 한 종류로써 내부의 순환구조가 들어있다는 특징을 가지고 있습니다. 순환구조를 이용하여 과거의 학습을 Weight를 통해 현재 학습에 반영합니다. 기존의 지속적이고 반복적이며 순차적인 데이터학습의 한계를 해결하연 알고리즘 입니다. 현재의 학습과 과거의 학습의 연결을 가능하게 하고 시간에 종속된다는 특징도 가지고 있습니다. 음성 웨이브폼을 파악하거나, 텍스트의 앞 뒤 성분을 파악할 때 주로 사용됩니다.

핵심?은..

본문 앞의 내용처럼, 알고리즘에 따라서 분류가 되는 것이라고 생각 하시면 될 것 같습니다.

예를 들면, 데이터 분석을 할때 쉽게 프로그래밍 하기 위해, 이미 만들어진 함수를 끌어와서 복잡한 계산을 간단히 하는 것 처럼, 석사이상? 전문가들이 깊게 파고들고 연구해서 RNN, CNN, 등의 알고리즘을 만들어서, 요즘 사용되는 python, r 등의 컴퓨터 언어 프로그램에서 사용되는 것이라고 알고 계시면 될 것 같아요.

번호 제목 글쓴이 조회 추천 등록일
[공지] 강좌 작성간 참고해주세요 gooddew - - -
3869 하드웨어| 노트북-GIGABYTE p2542 바이오스 없뎃 세븐좋아 776 1 01-28
3868 윈 도 우| Windows Command Syntax - 문법 정리 [9] 오스 1343 12 01-28
3867 윈 도 우| 윈도우 명령어 - cmd 총정리 [11] 오스 3452 15 01-28
3866 소프트웨어| [OP]GoodbyeDPI 0.1.6 Open Source Platform [1] Antory 1233 2 01-28
3865 윈 도 우| 윈도우 10 설치, 최적화 및 기타 팁 100개 정리 [56] 컴알못러 27519 78 01-26
3864 소프트웨어| 오토핫키 절대한영전환 사용하기 [8] 미유키로즈 2170 9 01-21
3863 윈 도 우| 표준 사용자 계정을 관리자 계정으로 변경하기 [13] @카리스마 2709 17 01-19
3862 기 타| MEGA 고용량 파일 다운로드 방법 [3] Antory 2465 10 01-19
3861 소프트웨어| 업그레이드, 랜섬웨어 에서 바라본 백업의 중요성 [3] elios 2297 5 01-15
3860 윈 도 우| 스냅샷 등록 배치파일 [1] 슈머슈마 1228 9 01-15
3859 윈 도 우| 배치파일 스크립트 - 퀵 가이드 [12] 오스 1509 16 01-14
3858 소프트웨어| IFW 자체 정보 얻기 활용. 최종. Image For Windows [18] 입니다 1675 10 01-13
3857 소프트웨어| 오토핫키로 시작 메뉴 위치 변경하기 [9] 미유키로즈 1110 5 01-13
3856 소프트웨어| utorrent 간단 사용법 [3] 간장종지646 2514 12 01-11
3855 소프트웨어| 오토핫키 스크립트 내에 바이너리 포함시키기 [9] 지후빠 1157 7 01-07
3854 소프트웨어| 사무실 사용자 지정 설치 위해 ODT 관련 [1] RoyalS 1227 2 01-06
3853 소프트웨어| nircmd.exe 다운 받아 windir에 복사하기 ps1 ahk [19] 지후빠 891 6 01-05
3852 모 바 일| [Tip] 자급제 단말기 맥 주소 등록하세요 [11] asklee 4580 7 12-30
» 기 타| [인공지능 - Ai] ANN, DNN, CNN, RNN 개념과 차이 [3] elios 1852 4 12-29
3850 기 타| 빅데이터 개념과 공부 방법? 필수적으로 알아둬야 할것 같아요 [6] elios 1717 2 12-26
XE1.11.6 Layout1.4.8