
활성화 함수가 왜 필요한가?에 관해서 완전 자세히 초등학생도 이해할 정도로 풀어보자.우선, 퍼셉트론의 구조에 관해서 살펴보자. 위에 구조에서 살펴볼 수 있듯이,1. 입력값에 가중치(특징)을 곱한다.2. 하나의 출력으로 나타낸다.3. 활성화 함수를 거쳐서 또 다른 값으로 나타낸다. 그리고 책과 블로그 등에서 하는 말에 관해서 살펴보자. 위에 말을 들으면 뭔가 고개가 끄덕여진다.만일 은닉층을 여러 개 둘 경우, 선형 함수의 값을 다음 층의 입력값으로 넣으면선형함수(선형함수(...)) 이러한 형태가 되니까,결국에는 선형이므로 층이 의미가 없어지는 것처럼 느껴진다.하지만 그렇다면,활성화 함수를 넣으면 왜 의미가 생기는 것일까?선형 함수의 중복은 의미가 없다는 건 쉽게 상상이 가지만,활성화 함수가 의미 있다는 ..