Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | 7 |
8 | 9 | 10 | 11 | 12 | 13 | 14 |
15 | 16 | 17 | 18 | 19 | 20 | 21 |
22 | 23 | 24 | 25 | 26 | 27 | 28 |
29 | 30 |
Tags
- 정보처리기사실기
- html/css
- 자연수의성질
- 데이터분석
- pandas
- numpy/pandas
- 정보처리기사필기
- 요구사항확인
- 디버깅
- 텍스트마이닝
- 딥러닝
- 자바 실습
- 언리얼프로젝트
- 자바
- 데이터시각화
- 이수증
- 선형분류모델
- C++
- 파이썬
- 데이터입출력구현
- 선형회귀모델
- 머신러닝
- 데이터베이스
- JSP/Servlet
- 코딩테스트
- 언리얼학습
- c언어
- 중학수학
- Orange
- 핵심프로젝트
Archives
- Today
- Total
목록활성화함수 (1)
클라이언트/ 서버/ 엔지니어 " 게임 개발자"를 향한 매일의 공부일지
딥러닝 11 - 활성화 함수, 오차역전파, 경사하강법 그리고 relu 함수에 대하여
이제 딥러닝 수업이 하루치만 남아있다. 빠르게 학습을 마치고 다음 과목을 공부해보고 싶다. 딥러닝 개념 정리 오늘 학습할 개념들 1. 활성화 함수 초기에는 계단 함수를 사용했는데 문제가 발생한다. 2. 경사 하강법 이 기울기를 미분해서 구하는 것이다. 공식을 암기할 필요는 없지만 이 알파값이 Learning rate라는 것 정도는 알고 있어야 한다. 기울기가 급하면 내려가는 보폭이 커지는 것을 생각하면 된다. 만약 예측값이 10인데, 실제값이 15가 나왔다면 기울기를 왼쪽으로 이동해야 한다고 판단한다. 이때 얼마만큼 왼쪽으로 이동할지 결정하는 것이 Learning rate(학습률) 알파값이다.초기에는 랜덤값으로 설정이 되니 그때의 순간 기울기..
인공지능/딥러닝
2024. 9. 22. 18:11