Scientific Computing & Data Science

Written by Geol Choi | Dec. 23, 2017 이번 포스팅에서는 Amazon Cloud EC2에 PyTorch 개발환경을 구축하는 방법에 대하여 알아보고자 합니다. PyTorch는 Facebook AI Research (FAIR)에서 주도적으로 개발하고 있으며, Google의 TensorFlow와 함께 딥러닝 프레임워크(Deep Learning Frameworks)에서 어느 정도 양대 산맥이 되어가고 있는 듯 합니다. 그만큼 많은 유저 커뮤니티를 이루고 있지만 윈도우즈 유저들에게 안타깝게도 아직 Windows OS는 공식적으로 지원하고 있지 않습니다. 다만, 몇명의 파이오니어들의 공로로 Windows에 개발환경을 구축할 수 있음을 확인할 수 있습니다 (Windows에 PyTorch 설..

by Geol Choi | Jun. 22, 2017MXNet은 Caffe, CNTK, TensorFlow, Theano, Torch, H2O 등과 같은 딥러닝 프레임워크 중 하나이다.눈 여결 볼 것 중 하나는, AWS(Amazon Web Services)이 MXNet을 지원하게 되었는데 그 이유가 이 들 딥러닝 프레임워크 중 가장 확장 가능한(Scalable) 프레임워크라는 이유에서이다. 확장 가능하다는 것은, 계산 속도나 메모리 용량을 늘리기 위해 다중의 CPU 또는 GPU 활용하거나 컴퓨팅 머신을 자유자재로 늘릴 수 있다는 뜻이다. 또한 MXNet은 다양한 플랫폼을 지원하는데, 지원하는 플랫폼 종류에 대해서는 아래에 정리하여 살펴보도록 하겠다.딥러닝 프레임워크를 선택하는 기준?위에 언급한 딥러닝 프레..

원문기사: http://news.naver.com/main/read.nhn?mode=LSD&mid=shm&sid1=105&oid=028&aid=0002352254technology_기계화는 어떻게 인간의 직업을 소멸시킬까. 능력 있는 인공지능의 출현이 인간의 노동을 어떻게 배제하는지 살펴보기 위해 아마존의 사례를 깊이 파고들었다. 온라인 쇼핑 시대를 열며 등장 때부터 판매서비스 인력을 위협한 아마존은 이제 물류, 배송, 오프라인 매장에까지 기계를 도입하며 ‘아마존 제국’을 만들고 있다. 아마존의 기계제국 거대 인터넷 유통기업인 아마존은 지난해 12월24일부터 1월2일까지 이어진 크리스마스 휴가 시즌 동안 세계적으로 10억개 이상의 상품을 배송했다며, 이는 역대 최대 규모라고 지난달 3일 밝혔다. ‘사이버..

지난 글, "Windows 환경에서 Docker를 이용하여 TensorFlow 설치"하는 방법에 대하여 소개하였다.대부분의 Machine Learning 알고리즘이 고성능 컴퓨팅이 필요한 경우가 많으므로, 자신이 사용하는 PC 환경에 OpenCL, CUDA와 같은 GPU 컴퓨팅을 지원하는 비디오 카드가 있으면 좋겠지만(물론 CPU 병렬 컴퓨팅을 통해서도 가능은 하다), 그렇지 않은 경우 Amazon Web Services(이하 AWS)의 EC2에서 GPU를 지원하는 환경을 설정하여 TensorFlow를 사용하는 것도 하나의 방법이다.이 글은 AWS EC2에 GPU를 지원하는 환경을 설정하여 TensorFlow를 설치하고 사용하는 방법을 소개하고자 한다.* 주의: AWS에 계정이 있으며, AWS를 이용하여..

이번 글에서는 Amazon Web Service(AWS) EC2에서 생성한 Windows Server 2012를 Mac OS에서 원격제어하는 방법에 대하여 알아보도록 하겠다.단, 이미 AWS EC2에서 Windows Server 2012가 Instance를 생성하였다고 가정한다.매우 간단하지만, 처음 할 때에는 약간의 시행착오를 겪었기 때문에 다른 분들은 나와 같은 시행착오를 겪지 않도록 하기 위함이다. 자세한 내용은 다음 링크를 참고한다: https://docs.aws.amazon.com/AWSEC2/latest/WindowsGuide/connecting_to_windows_instance.html?console_help=true 1. Mac App Strore에서 Microsoft Remote Des..

by Geol Choi | Jun. 20, 2015 이번 글에서는 Amazon Web Service(AWS)를 이용하여 NodeJS 웹 서버를 구축하는 방법에 대하여 알아보도록 하겠습니다. 1. Amazon Web Server 사이트에 접속하여 sign in을 합니다. 2. Sign in을 한 후, 좌측 상단에 큐빅 모양의 아이콘을 클릭하여 AWS 메인으로 이동하면 아래 이미지의 화면이 나오고, EC2를 클릭합니다. 3. EC2를 클릭하여 Virtual Servers in the Cloud로 이동하면 아래의 이미지의 화면이 나오며 Launch Instance를 클릭하여 새로운 Instance를 생성합니다. 4. Server 설정 단계는 총 6단계로 이루어져 있습니다. 첫번째 단계는 Amazon Machi..

`하드웨어 제왕 삼성전자, 콘텐츠 제국을 구축한 아마존.` 하드웨어와 소프트웨어로 갈리는 IT 생태계를 양분하고 있는 공룡 라이벌 삼성전자와 아마존이 `적과의 동침`에 나서고 있다. 각자 강점이 있는 분야에서 협력하며 시너지 효과 창출에 본격 나선 것이다. 두 기업은 IT 생태계 확장을 놓고 글로벌 시장에서 치열한 다툼을 벌이고 있어 이 같은 밀월관계가 언제까지 지속될지에 관심이 쏠리고 있다. 가시적인 협력 결과는 올해를 기점으로 속속 나오고 있다. 22일 업계와 외신에 따르면 삼성전자는 삼성 스마트폰과 태블릿PC 전용 애플리케이션인 `킨들 포 삼성(Kindle for Samsung)`을 `갤럭시S5`에 탑재하기로 했다. 아마존 최대 강점인 전자책 관련 방대한 콘텐츠를 삼성 생태계에 끌어들이겠다는 전략을..

원문: http://www.itworld.co.kr/news/86608자사에서 막대한 데이터를 다루고 있다면 하둡을 반드시 고려해봐야 한다. 한때 구글과 야후!와 같은 글로벌 인터넷 기업의 전유물이던 가장 인기있고 잘 알려진 빅데이터 관리 시스템이 이제 다른 기업에까지 확산되고 있다.거기에는 두 가지 이유가 있다. 첫째, 기업이 관리해야 될 데이터가 훨씬 많아졌고, 하둡은 기존의 정형 데이터와 새로운 비정형 데이터를 혼합하는데 탁월한 플랫폼이라는 점이다. 둘째, 수많은 개발업체가 하둡 지원과 서비스를 제공하는데 뛰어들어 기업 입장에서 선택의 폭이 늘어났다는 것이다.포레스터 2013년 4분기 소프트웨어 조사 보고서에 따르면, 대부분의 기업들은 이미 보유한 데이터 가운데 단 12%만을 분석하고 있으며, 나머..