특성 맵 (Feature Map) 1. 개요 특성 맵(Feature Map)이란 합성곱 신경망(CNN, Convolutional Neural Network)에서 입력 데이터에 필터를 적용하여 특정 시각적 특징(특성)이 활성화된 위치와 강도를 나타낸 텐서(Tensor) 형태의 데이터를 의미한다. CNN의 핵심은 이미지의 공간적 구조를 유지하면서 유의미한 패턴…
검색 결과
"Activation Function"에 대한 검색 결과 (총 15개)
뉴런 (Neuron) 1. 개요 뉴런(Neuron)는 신경계의 기본 구조적·기능적 단위가 되는 특수화된 세포로, 외부 자극을 수용하고 이를 전기적·화학적 신호로 변환하여 신체 각 부위로 전달함으로써 생명체의 항상성 유지와 인지 기능을 수행하는 '신경세포'를 의미한다. 2. 뉴런의 구조와 기능 뉴런은 일반적인 세포와 달리 신호를 효율적으로 전달하기 위해 매우…
Swish 활성화 함수 1. 개요 Swish는 Google Brain 팀이 제안한 자기 게이팅(Self-Gating) 메커니즘 기반의 비선형 활성화 함수로, 깊은 신경망에서 ReLU(Rectified Linear Unit)보다 더 나은 성능을 보이기 위해 설계되었습니다. Swish 함수는 입력값 에 시그모이드(Sigmoid) 함수를 곱한 형태로 정의되며, …
역전파 알고리즘 (Backpropagation) 1. 개요 역전파 알고리즘(Backpropagation)은 인공신경망(Artificial Neural Network)의 가중치를 업데이트하기 위해 손실 함수의 기울기를 효율적으로 계산하는 방법이다. 출력층에서 발생한 오차를 입력층 방향으로 역방향으로 전파하며 각 층의 가중치(Weight)와 편향(Bias)을 …
편향 벡터 (Bias Vector) 1. 개요 편향 벡터(Bias Vector)는 인공 신경망(Artificial Neural Network)의 각 뉴런에서 입력 값의 가중합에 더해지는 상수 값들의 집합을 의미합니다. 수학적으로는 선형 변환 에서 에 해당하는 항입니다. 편향은 모델이 데이터의 패턴을 더 유연하게 학습할 수 있도록 돕는 '오프셋(Offset)…
모델 예측 (Model Prediction) 개요 모델 예측(Model Prediction)은 머신러닝 및 딥러닝 분야에서 학습된 알고리즘이 새로운, 보지 못한 데이터(Unseen Data)에 대해 특정 결과를 도출해 내는 과정을 의미합니다. 모델 학습(Model Training)이 과거의 데이터(레이블이 있는 정답 데이터)를 통해 패턴을 학습하고 가중치(…
가중치 초기화 (Weight Initialization) 개요 가중치 초기화(Weight Initialization)는 인공 신경망(Artificial Neural Network)을 학습시키기 전에 네트워크의 가중치(Weight)와 바이어스(Bias)에 초기값을 부여하는 과정을 의미합니다. 딥러닝 모델의 성능은 아키텍처와 하이퍼파라미터뿐만 아니라, 초기 가…
리니어ReLU (LinearReLU) 리니어ReLU(LinearReLU)는 인공 신경망(Artificial Neural Networks)에서 활성화 함수(Activation Function)로 사용되는 수학적 연산자입니다. 이 함수는 입력값이 양수일 경우 선형적으로 값을 전달하고, 음수일 경우 0으로 고정하는 ReLU(Rectified Linear Unit…
가중치 (Weight) 가중치(Weight)는 인공 신경망(Artificial Neural Network, ANN) 및 머신러닝 모델에서 입력 데이터의 중요도를 결정하는 핵심 매개변수입니다. 신경망이 학습을 통해 데이터를 이해하고 예측하는 과정에서 가장 중요한 역할을 하며, 모델의 성능을 결정짓는 가장 큰 요소 중 하나입니다. 이 문서에서는 가중치의 정의,…
tanh 개요 tanh(하이퍼볼릭 탄젠트, Hyperbolic Tangent)는 인공신경망에서 널리 사용되는 비선형 활성화 함수 중 하나입니다. 수학적으로는 입력값에 대한 하이퍼볼릭 탄젠트 값을 출력하며, 출력 범위가 -1에서 1 사이로 제한된다는 특징을 가지고 있습니다. 이는 신경망의 학습 안정성과 수렴 속도에 긍정적인 영향을 미칠 수 있어, 특히 초기 …
합성곱 신망 개요 합성곱경망(Convolutional Network, 이하 CNN)은공지능, 컴퓨터 비전(Computer) 분야에서 가장 핵심적인 신경망 모델 하나입니다. CNN 이미지, 비디오 음성 등의 격자 형태(grid-like) 데이터를 효율적으로 처리할 수 있도록 설계된 심 신경망 구조로,의 시각 시스템을 모방한 아키텍처를 기반으로 합니다. 기존의…
시그모이드 함수 개요 시모이드 함수(Sigmoid Function)는 S자 형태의 곡선을 가지는 수학적 함수로, 특히 인공지능, 통계학, 생물학, 그리고 수학 교육 등 다양한 분야 중요한 역할을. 이 함수는 입력값이 매우 작을 때 출력값이 0에 가까워지고, 입력값이 매우 클 때는 출력값이 1에 가까워지는 특성을 가지며, 중간 영역에서는 부드러운 비선형 변화…
MLP 개요 MLP(Multi-Layer Perptron, 다층 퍼셉트론)은 인공신경망(Artificial Neural Network, ANN)의 가장 기본적이고 널리 사용되는 형태 중 하나입니다 단일 퍼셉트론은 선형적으로 분리 가능한 문제만 해결할 수 있지만, MLP는 여러 개의 은닉층(Hidden Layers)을 포함함으로써 비선형 문제를 해결할 수 있…
완전 연결 층 개요 완전 연결 층(Fully Connected Layer)은 인공지능(AI) 분야에서 신경망(Neural Network)의 핵심 구성 요소 중 하나로, 입력 데이터와 출력 데이터 간의 복잡한 관계를 모델링하는 데 사용됩니다. 이 층은 전층 연결 구조를 가지며, 모든 노드가 이전 계층의 모든 노드와 연결되어 있습니다. 일반적으로 신경망의 마지…
딥러닝 개요 딥러닝(Deep Learning)은 인공지능(AI)의 하위 분야로, 인간의 뇌 구조를 모방한 신경망(Neural Network)을 기반으로 데이터에서 복잡한 패턴을 학습하는 기술입니다. 2010년대 이후 컴퓨팅 파워와 대량 데이터의 확보로 급속히 발전하며, 컴퓨터 비전, 자연어 처리(NLP), 음성 인식 등 다양한 분야에서 혁신적인 성과를 거두…