바뀜

109 바이트 추가됨 ,  2022년 1월 28일 (금) 16:40
49번째 줄: 49번째 줄:  
|dataframe의 dropna() 따위로 처리한다..
 
|dataframe의 dropna() 따위로 처리한다..
 
|-
 
|-
|로스값이 너무 커서
+
|기욹기팽창(로스값이 너무 커서)
|로스값이 너무 커지면 학습값이 너무 커져서 어느 순간 발산해버릴 때가 있다.
+
|로스값이 너무 커지면 학습값이 너무 커져서 어느 순간 기울기가 발산해버릴 때가 있다.
 
|모델의 크기를 줄이거나..(근데, 로스가 1자리 숫자여도 nan이 발생한다..)
 
|모델의 크기를 줄이거나..(근데, 로스가 1자리 숫자여도 nan이 발생한다..)
 
학습률을 낮추거나.
 
학습률을 낮추거나.
83번째 줄: 83번째 줄:  
|배치사이즈 늘리기.
 
|배치사이즈 늘리기.
 
|데이터의 배치사이즈를 크게 해서 한번에 학습되는 량이 많게끔.
 
|데이터의 배치사이즈를 크게 해서 한번에 학습되는 량이 많게끔.
 +
|-
 +
|경사 clipping.
 +
|옵티마이저에서 조절할 수 있는 옵션이다.
 
|}
 
|}