September 12, 2023
파이토치 재단(PyTorch Foundation) 1주년
파이토치 재단(PyTorch Foundation)의 설립을 발표한지 1년이 되었습니다! 🎉 It’s been one year since we announced the formation of the PyTorch Foundation! 🎉
May 03, 2023
파이토치 도카톤(Docathon) 2023 개최 안내
April 19, 2023
가속화된 트랜스포머로 대규모 언어 모델 가속화하기
요약: 안드레이 카파시(Andrej Karpathy)가 GPT 모델을 컴팩트한 오픈소스로 구현한 nanoGPT를 예제로, 가속화된 파이토치 2.0 트랜스포머와 새로 도입된 torch.compile() 메서드를 사용하여 대규모 언어 모델을 가속하는 방법을 보여줍니다. 가속화된 PT2 트랜스포머와 함께 도입된 새로운 스케일드 닷 프로덕트 어텐션 연산자(scaled dot product attention operator)를 사용하여 플래시-어텐...
April 14, 2023
파이토치 2를 사용한 가속화된 생성 디퓨전 모델
요약: PyTorch 2.0 nightly 버전은 새로운 torch.compile() 컴파일러를 사용하여 생성적 디퓨전 모델의 성능을 즉시 개선하고 PyTorch 2와 통합된 멀티헤드 어텐션의 최적화된 구현을 제공합니다. TL;DR: PyTorch 2.0 nightly offers out-of-the-box performance improvement for Generative Diffusion models by using the ne...