Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | |||||
3 | 4 | 5 | 6 | 7 | 8 | 9 |
10 | 11 | 12 | 13 | 14 | 15 | 16 |
17 | 18 | 19 | 20 | 21 | 22 | 23 |
24 | 25 | 26 | 27 | 28 | 29 | 30 |
Tags
- 자연어 논문 리뷰
- nlp논문
- 논문리뷰
- 자연어처리
- t분포
- Window Function
- leetcode
- 자연어 논문
- LSTM
- GRU
- 짝수
- CASE
- HackerRank
- MySQL
- NLP
- SQL코테
- update
- Statistics
- 서브쿼리
- sql
- 그룹바이
- inner join
- airflow
- sigmoid
- 표준편차
- SQL 날짜 데이터
- 코딩테스트
- torch
- 설명의무
- 카이제곱분포
Archives
- Today
- Total
목록경사하강 학습법 (1)
HAZEL
[ Deep Learning 02 ] 경사하강 학습법 ( Gradient Descent ) , 옵티 마이저 ( Optimizer )
Deep Learning 02. 경사하강 학습법 1. 모델을 학습하기 위한 기본적인 용어 1.1. 학습 매개변수 ( Trainable Parameters ) : 학습 과정에서 값이 변화하는 매개변수 : 매개변수가 변화하면서, 알고리즘 출력이 변화됨. : y = ax + b 일때, a 와 b를 의미함 , 즉, 가중치 W와 편향 b 1.2. 손실함수 ( Loss Function) : 실제값과 예측값의 차이를 수치화 해주는 함수 : 실행하고 있는 학습 알고리즘이 얼마나 잘못하고 있는지를 나타내는 지표 : 지표의 값이 낮을수록 즉, 손실이 낮을 수록 학습이 잘 됬다는 것을 의미함. : 정답과 알고리즘 출력을 비교하면서 손실을 구함. -> 어떤 손실함수를 사용하냐에 따라서 학습이 어떻게 이루어지는지 결정됨 1.2..
DATA ANALYSIS/ML & DL
2021. 1. 27. 00:35