예시설명이 너무 좋아서 보고 반해버렸다..
➢ Batch size 크기 선택 :
결론: 일반적으로는 작은것 사용
클수록: 학습속도 빠름, 비교적 안정적인 학습이 가능. (local optimal 에 빠질 위험 존재.)
작을수록: local optimal 에서 빠져나올수 수있다.
'인공지능 (기본 딥러닝) > 딥러닝 및 파이토치 기타 정리' 카테고리의 다른 글
[1차원 추가 및 제거] Pytorch squeeze / unsqueeze (1) | 2023.12.23 |
---|---|
[Cross entropy] 크로스 엔트로피의 index 값은 0부터 시작이다. (0) | 2023.12.23 |
[Pytorch] 모델 생성시, super().__init__() (0) | 2023.11.01 |
오차함수 vs 최적화함수 vs 활성화 함수. (0) | 2023.03.16 |
[퍼옴] 머신러닝 모델 활성화함수(Activation function) 선택 방법. (0) | 2023.03.09 |