5장 훈련 노하우 배우기 (3)
– 로지스틱 회귀에 대한 규제 적용 1. 그래디언트 업데이트 공식에 페널티 항 반영 def __init__(self, learning_rate=0.1, l1=0, l2=0): self.w = None self.b = None self.losses = () self.val_losses = () self.w_history = () self.lr = learning_rate self.l1 = l1 self.l2 = l2 2. fit() 메서드에서 역방향 계산을 수행할 때 기울기에 페널티 항의 도함수를 추가합니다. def … Read more