모듈 0: 출발선
이 강좌가 돌아가는 방식, 그리고 첫 예측
이 강좌를 전에 들은 적이 있나요?
한 번만 세기 위해서예요. 내 답만 익명의 진행 상황과 함께 보내져요.
왜 중요한가 대부분의 사람은 남의 코드가 돌아가는 걸 보면서 신경망을 배워요. 여기서는 모든 조각을 직접 만들고, 무슨 일이 일어날지 일어나기 전에 예측해요. 먼저 예측하는 것이 보기를 이해로 바꿔요.
시작하기 전에
- 필요한 것. 학교 수학(강좌가 쓰는 기울기, 로그, 확률은 모두 가르쳐요)과 약간의 Python: 반복문, 함수, 리스트, 딕셔너리. 설치할 건 없어요: 모든 것이 이 브라우저에서 돌아가요.
- 얼마나 걸리나. 1부(만들고 훈련하기, 모듈 0~14)는 약 90시간의 작업이고, Python 모듈을 건너뛰면 약 80시간이에요: 주 6시간이면 약 15주. 2부(생성하고, 규모를 키우고, 이해하기, 모듈 15~24: 생성 모델, 확산, 자기 지도 학습, 스케일링 법칙, 모델 적응과 모델 속 들여다보기, 주장 판단하기, 캡스톤과 기말 시험)는 약 50시간, 9주가 더해져요. 각 부에는 자기 수료증이 있어요. 각 모듈은 강좌 페이지에 자기 시간을 보여 줘요.
- 이미 Python에 능숙한가요? 모듈 1은 관문으로 끝나요. 그걸 먼저 보세요: 통과하면 모듈을 건너뛰고 바로 수학으로 가요.
- 경험 많은 프로그래머인가요? 보여 주는 시간은 이 주제가 처음인 사람 기준이에요. 이미 코딩으로 먹고사는 사람은 흔히 그 3분의 1이면 되고, 특히 수학과 첫 신경망 모듈(2~4)에서 그래요: 각 레슨의 연습 문제를 먼저 읽고, 새로운 곳에서만 속도를 늦추세요.
- 모듈의 주제를 이미 알고 있나요? 모듈 1(Python), 2(수학), 3(뉴런에서 신경망까지), 4(autograd), 7(새 데이터)은 각각 AI 튜터를 끈 채 먼저 볼 수 있는 관문으로 끝나요. 통과하면 모듈이 완료로 표시되고 다음 모듈이 열려요. 수료증은 그 모듈에 대해 관문을 쳐 줘요.
연습할 네 가지 습관
- 곡선 맞히기. 훈련 실행 전에 몇 지점에서의 손실을 추측해요. 그다음 실행되고 얼마나 가까웠는지 봐요. 강좌를 거치며 추측이 날카로워지는데, 그 날카로워짐이 진짜 직관이에요.
- 층 얻어내기. 강좌에는 미리 만들어 둔 층의 작은 라이브러리가 있어요. 각 층은 평범한 NumPy로 직접 만들고 기울기 검사를 통과할 때까지 잠겨 있어요. 그 뒤엔 빠른 버전을 써요.
- FLOP 장부. FLOP은 곱셈이나 덧셈 한 번이에요. 강좌의 모든 실행은 몇 번을 썼는지 보고해서, 무엇이 싸고 무엇이 비싼지 배우게 돼요.
- 네 개의 다이얼. 진도는 네 가지 기술로 재요: 만들기(직접 쓰기), 진단(무엇이 망가졌는지 찾기), 예측(무슨 일이 일어날지 말하기), 신뢰(AI 답이 틀렸을 때 판단하기).
첫 곡선 맞히기
아래에서 뉴런 하나가 경사 하강법으로 직선 y = 3x + 1을 배워요. 손실은 높게 시작해서 떨어져요. 단계 0, 5, 20, 100에서의 손실을 추측한 다음 코드를 실행하세요: 훈련하고 추측을 실제 값 옆에 점수와 함께 출력해요. 맞히는 건 걱정하지 마세요. 진짜 추측을 하세요.
손실: 모델이 지금 얼마나 틀렸는지 말하는 숫자 하나. 훈련은 그걸 작게 만드는 일이에요.
이 레슨의 단어와 기호
- 손실
- 모델이 얼마나 틀렸는지 말하는 숫자 하나. 훈련은 그걸 작게 만들어요
- 곡선 맞히기
- 실행 전에 몇 지점에서의 손실을 추측하고, 그다음 비교하기
- FLOP
- 곱셈이나 덧셈 한 번. 강좌가 실행의 비용을 재는 방법
- 네 개의 다이얼
- 만들기, 진단, 예측, 신뢰: 시험이 재는 네 가지 기술
내 차례
my_guess의 각 None을 단계 0, 5, 20, 100에서의 손실 추측으로 바꾸세요. 그다음 실행하세요. 정직한 추측이면 무엇이든 통과하고, 점수는 여러분을 위한 거예요.
레슨 완료. 잘했어요.
코드 · 브라우저에서 실행
출력
진행 상황은 익명으로 집계돼요. 바꾸기
이 연습은 곧 열려요
앞의 레슨을 마치면 이 레슨이 열려요. 강좌 전체가 무료이고 계정도 필요 없으며, 이 레슨은 지금 바로 읽을 수 있어요.
이 브라우저가 learn.floati.life의 쿠키를 막고 있어서, 여기서 마친 레슨들이 순서대로 열리지 않아요. 이 사이트의 쿠키를 허용하고 새로고침하세요.