경사하강법 - 딥러닝의 가장 기본적인 학습 알고리즘 - 함수의 기울기 계산해 함숫값이 작아지는 방향으로 이동 반복 - 미니배치 입력에 대해 순전파와 역전파를 번갈아 반복 수행 순전파: 입력 정보로부터 손실 함수 계산 과정 - 신경망 구조를 따라가면서 현재의 파라미터값 이용해 계산 역전파 - 순전파 계산 과정의 역순으로 진행 - 손실 함숫값에 영향 미친 모든 성분에 대해 손실 기울기 계산 - 파라미터 성분의 경우 계산된 손실 기울기 이용해 값을 변경 (이변경이 바로 신경망 변화를 가져오는 학습의 핵심 과정 학습률 - 학습 속도를 조절하는 하이퍼 파라미터 - 파라미터값 = 파라미터값 - 학습률 x 손실기울기 참고자료: 파이썬 날코딩으로 알고 짜는 딥러닝
트리와 그래프 차이점 Trees Graphs 통로 트리는 특별한 형태의 그래프입니다. 즉, 최소로 연결된 그래프 이며 두 정점 사이에 하나의 경로 만 있습니다. 그래프에는 두 개 이상의 경로가있을 수 있습니다. 즉, 그래프는 노드간에 단방향 또는 양방향 경로 (에지)를 가질 수 있습니다. 루프 트리는 루프 , 회로 및 자체 루프 가없는 그래프의 특별한 경우입니다 . 그래프는 루프, 회로를 가질 수있을뿐만 아니라 자체 루프를 가질 수 있습니다 . 루트 노드 트리에는 정확히 하나의 루트 노드가 있으며 모든 자식 에는 부모 가 하나만 있습니다. 그래프에는 이러한 루트 노드 개념이 없습니다 . 부모 자녀 관계 트리에는 부모 자식 관계가 있으므로 흐름이 위에서 아래로 또는 그 반대로있을 수 있습니다. 그래프에는 ..
- Total
- Today
- Yesterday
- DBeaver
- Index
- 실리콘 맥
- SMTP
- Apple 개발자 프로그램
- JAVA mail
- dfs
- mariadb
- 맥북 캡처
- ELB
- jconsole
- Graphviz
- 경사하강법
- HTTPS
- MariaDB 테이블 복사
- 역전파
- react html
- HTTP Status Code
- BFS
- ChatGPT
- AUTO_INCREMENT
- weka
- 신경망
- 파이썬 아나콘다
- EC2
- 테이블 사용량
- 렌더링 특수문자
- t4g.micro
- graph
- aws ec2
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | |||||
3 | 4 | 5 | 6 | 7 | 8 | 9 |
10 | 11 | 12 | 13 | 14 | 15 | 16 |
17 | 18 | 19 | 20 | 21 | 22 | 23 |
24 | 25 | 26 | 27 | 28 | 29 | 30 |