메뉴 건너뛰기

GREATUSER

free

Amazon SageMaker BlazingText: 다중 CPU/GPU상에서 Word2Vec 알고리즘의 병렬 처리 이 글에서는 Amazon SageMaker에서 제공하는 알고리즘 중 2018년 1월에 출시된 BlazingText를 소개하고자 합니다. BlazingText는 Word2Vec임베딩을 생성하기 위한 비지도 학습 알고리즘입니다. 여기서 말하는 임베딩이란 대규모 코퍼스(말뭉치)에 있는 단어들이 밀집되어 있는 벡터를 의미합니다. 다음과 같은 환경에서 Amazon SageMaker를 사용하실 경우, BlazingText를 이용해서 Word2Vec을 빠르게 구현할 수 있습니다: (Mikolov의 Word2Vec C버전, fastText 같은 알고리즘을 위한) 단일 CPU 인스턴스 P2, P3 처럼 다중 GPU로 구성된 단일 인스턴스 (분산 CPU 트레이닝을 위한) 다중 CPU 인스턴스 p3.2xlarge (1 Volta V100 GPU) 인스턴스 1대 상에서BlazingText와 c4.2xlarge 인스턴스 1대 상에서 fastText 와 비교하면 BlazingText가 약 21배 빠르고 비용면에서도 20% 가량 저렴합니다. 여러개의 CPU 노드로 구성된 분산 트레이닝의 경우 BlazingText는 c4.8xlarge 인스턴스 8대에서 최대 초당 5천만 단어까지 학습 속도를 낼 수 있는데, 이는 c4.8xlarge  인스턴스 1대에서 fastText의 CPU 버전과 비교하면 임베딩의 퀄리티에 영향을 거의 주지 않으면서도 속도면에서 약 11배나 빠른 [ more... ]

The post Amazon SageMaker BlazingText: 다중 CPU/GPU상에서 Word2Vec 알고리즘의 병렬 처리 appeared first on 지락문화예술공작단.




원문출처 : https://jirak.net/wp/amazon-sagemaker-blazingtext-%EB%8B%A4%EC%A4%91-cpu-gpu%EC%83%81%EC%97%90%EC%84%9C-word2vec-%EC%95%8C%EA%B3%A0%EB%A6%AC%EC%A6%98%EC%9D%98-%EB%B3%91%EB%A0%AC-%EC%B2%98%EB%A6%AC/
번호 제목 글쓴이 날짜 조회 수
1105 Behind-the-scenes at Panasonic: factory to field 관리자 2017.12.08 106
1104 Introducing the Web Media Extension Package with OGG Vorbis and Theora support for Microsoft Edge 관리자 2017.12.06 106
1103 Stephen Orban – 엔터프라이즈 DevOps: DevOps를 수행할 때 기대할 수 있는 것들 관리자 2017.12.05 106
1102 H1 인스턴스 – 빅 데이터 애플리케이션을 위한 빠른 고밀도 스토리지 정식 출시 관리자 2017.12.04 106
1101 Black Marble uses Microsoft HoloLens to help revolutionise Crime Scene Investigation with tuServ 관리자 2017.10.10 106
1100 A week with Microsoft Edge: Get started with the browser designed for Windows 10 관리자 2017.04.18 106
1099 This Week on Windows: Windows 10 Creators Update, Xbox Clubs and more 관리자 2017.03.31 106
1098 Top 5 Windows and Microsoft Store Trends Every Developer Should Know 관리자 2018.03.24 105
» Amazon SageMaker BlazingText: 다중 CPU/GPU상에서 Word2Vec 알고리즘의 병렬 처리 관리자 2018.02.24 105
1096 Using Packer and Terraform for High Availability of NGINX Plus on Google Cloud Engine 관리자 2017.08.18 105
1095 Announcing Windows 10 Insider Preview Build 16226 for PC 관리자 2017.06.22 105
1094 This Week on Windows: CES, Forza Horizon 3, Cortana tips and more 관리자 2017.01.07 105
1093 웹 엔지니어가 알아야 할 인프라의 기본 – 한빛미디어 관리자 2016.01.07 105
1092 Announcing Windows 10 Insider Preview Build 17650 for Skip Ahead 관리자 2018.04.20 104
1091 Amazon EC2 차세대 M5 및 C5 인스턴스 타입 서울 리전 출시 관리자 2018.04.10 104
위로