본문으로 건너뛰기
ToolPotion
AI 어드바이저
제출 (무료)

CS336: Language Modeling from Scratch

추천

스탠포드 CS336은 현대 언어 모델을 처음부터 구축하고 이해하는 데 중점을 둔 종합 과정입니다. 이 과정은 토큰화, 아키텍처, 최적화 및 데이터 정렬과 같은 필수 주제를 다루며, 학생들에게 자신만의 언어 모델을 개발하는 실습 경험을 제공합니다.

  • 기간주 20~25시간
  • 모듈강의 19개, 과제 5개
  • 가격$7,875
  • 수료증아니요
  • 난이도고급
  • 업데이트2026년 봄
강좌 보기
공유
CS336: Language Modeling from Scratch 스크린샷
CS336: Language Modeling from Scratch 스크린샷

스탠포드 CS336, 제목 'Language Modeling from Scratch'는 2026년 봄에 제공되는 고급 과정으로, 현대 언어 모델을 구축하고 이해하는 복잡성을 깊이 탐구합니다. 이 과정은 현대 자연어 처리(NLP) 애플리케이션의 기본이 되는 언어 모델에 대한 깊은 이해를 얻고자 하는 학생들을 위해 설계되었습니다. 인공지능(AI) 및 기계 학습(ML) 분야가 계속 발전함에 따라, 언어 모델에 대한 철저한 이해는 과학자와 엔지니어 모두에게 점점 더 중요해지고 있습니다.

더 읽기

이 과정 구조는 전통적인 운영 체제 과정에서 영감을 받아 학생들이 자신만의 언어 모델을 개발하는 전체 과정을 안내합니다. 여기에는 사전 훈련을 위한 데이터 수집 및 정리, 변환기 모델 구축, 모델 훈련 및 배포 전 평가와 같은 중요한 측면이 포함됩니다. 커리큘럼은 실용적인 구현을 강조하며, 학생들이 자료에 깊이 참여하고 상당한 코딩 작업을 수행하도록 요구합니다.

이 과정의 전제 조건은 Python에 대한 숙련도, 딥 러닝 및 시스템 최적화 경험, 대학 수준의 미적분학, 선형 대수학, 기본 확률 및 통계에 대한 확고한 기초입니다. 학생들은 기계 학습 개념과 프레임워크, 특히 PyTorch에 익숙해야 하며, 이 과정은 상당한 실습 프로그래밍을 포함합니다.

과제는 학생들의 기술을 점진적으로 구축하도록 구성되어 있으며, 표준 변환기 언어 모델 훈련에 필요한 기본 구성 요소의 구현으로 시작합니다. 이후 과제는 모델 성능 최적화, 확장 및 추론 작업을 위한 강화 학습 기술 적용에 중점을 둡니다. 이 과정은 학생들이 자율 학습을 위해 GPU 컴퓨팅 리소스에 접근할 수 있는 자료를 제공하여 과제를 효과적으로 완료하는 데 필요한 도구를 보장합니다.

협력과 학문적 진실성을 강조하며, 학생들은 스터디 그룹에서 작업하도록 권장되지만, 자신의 과제를 이해하고 완료해야 합니다. 이 과정은 저수준 프로그래밍 질문에 대한 AI 도구 사용을 촉진하지만, 과제 문제를 직접 해결하는 데 의존하는 것은 권장하지 않습니다. 전반적으로 CS336은 언어 모델을 이해하고 개발하는 데 있어 엄격하고 포괄적인 접근 방식을 제공하며, 학생들을 AI 및 NLP 분야의 고급 작업에 대비시킵니다.

  • 카테고리교육 및 연구

  • 실습 과제

  • 변환기 모델에 중점

  • Python 프로그래밍 강조

  • 협력 장려

  • 과제를 위한 GPU 컴퓨팅 접근

  • 구현 중심 커리큘럼

  • 강화 학습 기술

  • 딥 러닝 최적화

  1. 전제 조건 이해: Python, 딥 러닝 및 수학에서 과정 전제 조건을 충족하는지 확인하세요.

  2. 강의 참석: 월요일과 수요일에 예정된 강의에 참여하세요.

  3. 과제 참여: 실습 과제를 완료하여 자신만의 언어 모델을 구축하세요.

  4. 자료 활용: 과제를 위해 필요한 경우 GPU 컴퓨팅 리소스에 접근하세요.

  • 언어 모델 개발
  • 딥 러닝 최적화
  • 데이터 전처리
  • 강화 학습 응용
  • 협력 학습

CS336: Language Modeling from Scratch 리뷰

로딩 중...

CS336: Language Modeling from Scratch와(과) 비슷한 항목

대형 언어 모델 과정

AI GitHub 저장소

대형 언어 모델 과정은 다양한 기술 수준의 학습자들이 접근할 수 있도록 상세한 로드맵과 인터랙티브한 Colab 노트북을 통해 대형 언어 모델(LLM)에 대한 포괄적인 소개를 제공합니다.

교육 및 연구교육 및 이러닝
도구 보기

AI GitHub 저장소

다양한 기술 수준의 학습자들이 접근할 수 있도록 상세한 로드맵과 인터랙티브한 Colab 노트북을 통해 대형 언어 모델(LLM)에 대한 포괄적인 소개를 제공합니다.대형 언어 모델 과정은 다양한 기술 수준의 학습자들이 접근할 수 있도록 상세한 로드맵과 인터랙티브한 Colab 노트북을 통해 대형 언어 모델(LLM)에 대한 포괄적인 소개를 제공합니다.

추천교육 및 연구교육 및 이러닝
AI GitHub 저장소 TOP 250 보기

LLM 줌캠프는 대규모 언어 모델(LLM)의 실제 응용에 중점을 둔 무료 온라인 과정입니다. 10주 동안 참가자는 지식 기반에 따라 질문에 답할 수 있는 AI 시스템을 구축하는 방법을 배웁니다.

교육 및 연구교육 및 이러닝

AI 학습 38위

도구 보기

대규모 언어 모델(LLM)의 실제 응용에 중점을 둔 무료 온라인 과정입니다. 10주 동안 참가자는 지식 기반에 따라 질문에 답할 수 있는 AI 시스템을 구축하는 방법을 배웁니다.LLM 줌캠프는 대규모 언어 모델(LLM)의 실제 응용에 중점을 둔 무료 온라인 과정입니다. 10주 동안 참가자는 지식 기반에 따라 질문에 답할 수 있는 AI 시스템을 구축하는 방법을 배웁니다.

추천교육 및 연구교육 및 이러닝
AI 학습 38위

데이터캠프의 개발자를 위한 AI 엔지니어 과정은 API와 오픈 소스 라이브러리를 사용하여 소프트웨어에 AI를 통합하는 방법을 가르칩니다. AI 기반 시스템을 구축하고 사용자 경험을 향상시키기 위한 실용적인 기술을 습득하세요.

교육 및 연구

AI 학습 71위

도구 보기

데이터캠프의 개발자를 위한 AI 엔지니어 과정은 API와 오픈 소스 라이브러리를 사용하여 소프트웨어에 AI를 통합하는 방법을 가르칩니다. AI 기반 시스템을 구축하고 사용자 경험을 향상시키기 위한 실용적인 기술을 습득하세요.

교육 및 연구
AI 학습 71위

CS224N은 딥러닝 기법을 사용한 자연어 처리(NLP)에 중점을 둔 스탠포드 과정입니다. 학생들은 신경망 모델을 설계하고 구현하는 방법을 배우며, NLP의 최첨단 연구와 실용적인 응용에 대한 통찰을 얻게 됩니다.

기업 교육 및 이러닝교육 및 이러닝

AI 학습 40위

도구 보기

CS224N은 딥러닝 기법을 사용한 자연어 처리(NLP)에 중점을 둔 스탠포드 과정입니다. 학생들은 신경망 모델을 설계하고 구현하는 방법을 배우며, NLP의 최첨단 연구와 실용적인 응용에 대한 통찰을 얻게 됩니다.

추천기업 교육 및 이러닝교육 및 이러닝
AI 학습 40위

머신 러닝 줌캠프는 ML 엔지니어링을 가르치기 위해 설계된 포괄적이고 무료인 4개월 프로그램입니다. 참가자는 구조화된 학습 경로와 실습 프로젝트를 통해 머신 러닝에 대한 필수 기술과 지식을 습득하기 위해 등록할 수 있습니다.

교육 및 연구교육 및 이러닝

AI 학습 17위

도구 보기

ML 엔지니어링을 가르치기 위해 설계된 포괄적이고 무료인 4개월 프로그램입니다. 참가자는 구조화된 학습 경로와 실습 프로젝트를 통해 머신 러닝에 대한 필수 기술과 지식을 습득하기 위해 등록할 수 있습니다.머신 러닝 줌캠프는 ML 엔지니어링을 가르치기 위해 설계된 포괄적이고 무료인 4개월 프로그램입니다. 참가자는 구조화된 학습 경로와 실습 프로젝트를 통해 머신 러닝에 대한 필수 기술과 지식을 습득하기 위해 등록할 수 있습니다.

추천교육 및 연구교육 및 이러닝
AI 학습 17위

Hugging Face LLM 과정은 Hugging Face 라이브러리를 사용하여 대규모 언어 모델과 자연어 처리에 대한 포괄적인 소개를 제공합니다. 이 과정은 무료이며 광고가 없고, Python에 대한 충분한 지식을 가진 학습자를 위해 설계되어 AI 교육의 민주화를 목표로 합니다.

기업 교육 및 이러닝교육 및 이러닝
도구 보기

Hugging Face 라이브러리를 사용하여 대규모 언어 모델과 자연어 처리에 대한 포괄적인 소개를 제공합니다. 이 과정은 무료이며 광고가 없고, Python에 대한 충분한 지식을 가진 학습자를 위해 설계되어 AI 교육의 민주화를 목표로 합니다.Hugging Face LLM 과정은 Hugging Face 라이브러리를 사용하여 대규모 언어 모델과 자연어 처리에 대한 포괄적인 소개를 제공합니다. 이 과정은 무료이며 광고가 없고, Python에 대한 충분한 지식을 가진 학습자를 위해 설계되어 AI 교육의 민주화를 목표로 합니다.

추천기업 교육 및 이러닝교육 및 이러닝
AI 학습 TOP 100 보기

smol-course

AI 학습

🤗 smol-course는 대형 언어 모델의 미세 조정 기술을 가르치기 위해 설계된 무료 교육 리소스입니다. 소프트웨어 개발자와 엔지니어를 대상으로 하며, 실습 경험과 수료 후 인증 과정을 제공합니다.

머신러닝 및 데이터 사이언스
도구 보기

AI 학습

🤗 smol-course는 대형 언어 모델의 미세 조정 기술을 가르치기 위해 설계된 무료 교육 리소스입니다. 소프트웨어 개발자와 엔지니어를 대상으로 하며, 실습 경험과 수료 후 인증 과정을 제공합니다.

추천머신러닝 및 데이터 사이언스
AI 학습 TOP 100 보기

대형 언어 모델(LLM)을 활용한 생성적 AI 과정은 생성적 AI의 기본 원리를 가르치며, 실제 응용 프로그램에 배포하는 방법을 포함합니다. Python 경험이 있는 분들에게 적합하며, 이 기술에 대한 실용적인 직관을 기르는 데 도움을 줍니다.

기업 교육 및 이러닝
도구 보기

대형 언어 모델(LLM)을 활용한 생성적 AI 과정은 생성적 AI의 기본 원리를 가르치며, 실제 응용 프로그램에 배포하는 방법을 포함합니다. Python 경험이 있는 분들에게 적합하며, 이 기술에 대한 실용적인 직관을 기르는 데 도움을 줍니다.

추천기업 교육 및 이러닝
AI 학습 TOP 100 보기
1/8