다시하는 블로그

구글 클라우드 플랫폼(GCP)에 SSH로 접속하는 방법은 

1. 브라우저 창에서 열기

2. 맞춤 포트의 브라우저 창에서 열기

3. gcloud 명령 보기

4. 다른 클라이언트 SSH 사용이 있다

현재 사용하고 있는 PC 에서 GCP로 접근 하는 제일 친숙한 방법인 다른 클라이언트를 사용해서 GCP로 접근하는 방법에 대해 알아보겠다

맥 또는 리눅스

일단 SSH 로 GCP에 접근하기 위해서는 RSA key pair 를 생성해야 한다

맥 혹은 리눅스에서는 .ssh 폴더 안에 RSA key pair 가 생성이 된다

ssh-keygen -t rsa -f ~/.ssh/[KEY_FILE_NAME] -C "[USERNAME]" 

를 이용해서 RSA key pair를 생성할 수 있다

[KEY_FILE_NAME]에는 생성할 RSA의 KEY 파일 이름을 생성한다. 현재 등록되어진 KEY 파일이 있을 수도 있으니 현재 생성되어지지 않은 이름으로 생성한다 ex) rsa-gcp-key

[USERNAME]에는 현재 생성한 GCP의 메일 주소를 따옴표와 함께 입력한다 ex:) "noname@gmail.com"

위와 같이 입력하면  RSA key pair 가 생성이 된다

위와 같이 PW를 입력 하고 RSA KEY를 생성한다

이후 cat ~/.ssh/[KEY_FILE_NAME].pub 를 하여 생성된 RSA KEY 내용을 확인 할 수 있다

위 처럼 나온  RSA KEY PAIR의 내용을 복사해두자

복사해 둔  RSA KEY pair의 내용을 GCP VM instance의 메타데의터의 SSH 키에 복사 한다

위와 같이 나오면 SSH 키 추가를 하면 된다

위와 같이 입력하면 key 등록이 끝난다

입력이 끝나면 터미널에서 

ssh -i ~/.ssh/[KEY_FILE_NAME] [USERNAME]@외부IP 로 접속을 하면 된다

Windows

windows에서 ssh로 접속하기 위해서는 putty 를 사용하면 된다

일단 RSA KEY pair 를 만들어야 하는데 puttygen 을 사용해서 rsa key pair를 만든다

puttygen은 putty 홈페이지 아래쪽에 다운로드 링크 혹은 위에 puttygen을 클릭하면 다운로드를 받을 수 있다

위에 Generate를 누르고 빈 창에 마우스를 휘적휘적 흔들면 key가 만들어 진다

위 테스크 바 사이에서 마우스를 움직이면 key가 만들어진다

키가 만들어 지면 Key comment에 [USERNAME]을 입력하고 Generate를 누른다

Generate를 누르면 다시 태스크바가 나오고 위와 같은 화면이 다시 뜨는데 여기서 Key comment에 [USERNAME]을 다시 입력하고 위 Key 내용을 복사해둔다

그 후 아래 Save private key를 누르면 SSH에 접속할때 사용할 ppk파일이 생성이 되고 ppk 파일이 생성되면 같은 폴더에 Save public key 를 이용해 public key 도 생성을 해둔다

그후 GCP 사이트에서 아까와 마찬가지로 메타데이터 SSH 탭에 key 내용을 복사해 넣는다

이 창에 puttygen에서 만든 rsa를 추가 항목을 클릭하여 넣어주면 된다

그 후 putty를 실행하여 Host name에는 [USERNAME]@외부아이피를 입력하고

왼쪽 Connection 탭에서 SSH->auth를 클릭한다

그 이후 Private key file for authentication 에 Browser 를 클릭하여 생성된 ppk파일을 선택하고 Open을 클릭하면 된다

다음 포스팅은 Cuda 설치등 기본적인 세팅을 하는 법을 알아보도록 하겠다

딥러닝을 원활하게 하기 위해서는 성능이 좋은 gpu가 필요한데

개인적으로 gpu를 살 돈도 전기세도 안까운 사람들을 위해 "아마존"과 "구글"에서는 클라우드 플랫폼으로 gpu를 제공을 한다

오늘은 그 클라우드 플랫폼을 생성하여 gpu를 사용하는 것에 대해 살펴보려고 한다

일단 구글 클라우드 플랫폼(이하 gcp)를 생성하기 위해서는 신용카드(본인을 증명할 수 있는), 휴대폰 그리고 구글 계정이 필요하다

위에 준비물 들이 준비가 됐다면 https://cloud.google.com 로 이동을 해서  try it free 를 선택한다

필요한 내용에 동의를 하고 계정 유형 및 이름과 주소 그리고 결제 신용카드를 작성해 넣으면 가입이 완료가 된다

평가판은 12개월 동안 사용이 가능하며 클라우드 플랫폼을 실행할때 마다 청구되는 크레딧 300을 제공해 주기 때문에 무료로 사용이 가능하다

아마 가입을 다 하고 나오면 아래와 같은 창이 아마(?) 생성이 될것이다

여기 까지 하면 기본적인 GCP를 사용할 준비가 끝났다

GPU

우선 GPU 를 세팅을 해주어야 하는데

이 화면에서 Google Cloud Platform 옆에 -가 3개 있는 제품 및 서비스를 누르면 

위와 같이 할당량 탭을 확인 할 수 있다

클릭을 하면 위와 같은 화면을 볼 수 있다. 위 화면은 현재 할당되어진 VM instance의 내용이 표시가 된것인데 GPU는 할당이 안되것을 확인 할 수 있다.

현재 사용할 수 있는 GPU 는 P100과 K80이 있다 일단 K80으로 할당해보도록 하겠다.

위 화면에서 할당량 수정 버튼을 클릭 하고 asia-east1-a 의 K80을 찾아 클릭 하도록 한다

asia-northeast라고 되어 있는 곳을 클릭했지만 asia-northeast가 아니고 asia-east1-a를 클릭해야 한다

클릭을 하면 위와 같은 화면이 나오고 전화번호를 입력하는 창이 나오는데 불법을 저지르는 것이 아니니 전화번호를 입력하도록 한다

입력을 하면 위 같이 몇개의 GPU를 사용할 것이지 그리고 왜 내가 GPU를 써야 하는지에 대해 응답하게 돼있다

일단 1개의 GPU와 내가 왜.GPU써야 하는 지에 대해 서술하고 요청을 제출한다

요청을 제출하면 메일로 사용을 해도 된다는 메일이 올 것이다

위와 같은 메일이 온다면 할당에 성공한 것이다

다음 포스팅은 이 VM instance를 사용하는 방법에 대해 알아보도록 하겠다

프로젝트 생성

기본적인 GCP 사용준비가 끝났으면 사용방법에 따라 프로젝트를 생성하면 된다

맨 윗줄에 프로젝트 선택을 클릭하여 프로젝트를 생성한다 

적당한 이름을 작성해서 프로젝트를 생성한다

프로젝트를 생성하면 1~2분 정도 시간이 소요된 뒤 프로젝트가 만들어 진다

프로젝트가 만들어 지면 아래와 같이 생성이 될 것이다

프로젝트가 만들어 지면 VM instance를 생성 할 수 있다

VM 인스턴스를 클릭하면 위와 같은 화면이 나오면서 1~2분정도 시간이 소요된다는 메시지가 출력이 된다

만들기 버튼이 활성화 되면 클릭하여 VM instance를 생성한다

생성하는 instance의 이름, 영역 그리고 사용할 운영체제를 선택해준다

이름과 운영체제는 사용할 이름과 운영체제를 자유롭게 선택하면 된다. 현재 사용할 운영체제는 우분투16.04LTS를 선택했다

영역은 구글 클라우드가 설치돼있는 국가이다. 현재 위치는 asia-east1-a 를 선택했다.

만약 GPU를 생성하지 않았다면 아래 GPU 개수가 0으로 되어 있을 것이다

하드 용량은 얼마나 사용할지 미리 살짝 파악후 만들어 두는 것이 편합니다

10기가는 조금 부족한 감이 있습니다

네트워크 내용은 그냥 일단 자동으로 선택이 되는 내용으로 설정했다

이후 만들기를 선택하면 생성이 완료 된다

다음 포스팅은 ssh로 접속하는 방법가 사용할 몇몇 가지를 설치하는 것에 대해 포스팅할 예정이다

거의 10년동안 Windows만 써오다가 처음으로 Mac을 구매하여 이것 저것 세팅을 하면서 정리를 해보고자 합니다

먼저 제일 많이 사용하고 있는 라이브러리인 Opencv 를 설치해보려고 합니다

일단 아무 것도 세팅 되어 있지 않은 MacBook 이 필요 합니다

우선 설치 순서는

1. Xcode install

2. Cmake install

3. Download Opencv 3.x

4. Build Opencv 3.x

5. Install Opencv 3.x

1. Xcode install

우선 Mac에서 이것 저것 설치 하기 위해서는 Xcode라는 것이 필요한 것으로 보여 App Store를 통해 설치해주었습니다

2. Cmake install 

https://cmake.org 를 통해 Cmake를 다운로드 받아서 설치해 주었습니다

설치 하면 Windows랑 비슷한 녀석이 설치가 됩니다

3. Download Opencv 3.x

https://github.com/opencv 을 통해서 Opencv와 Opencv_Contribute를 받아 올 수 있습니다

Contribute의 사용은 선택적입니다

Opencv_contribute는 기본 Opencv 이외에 tracking 등 기타 기능이 추가되어 있는 module입니다

Opencv 를 전부 다운받았다면 Opencv_contribute안에 있는 module폴더를 복사해서 Opencv 폴더로 카피 해둡니다

4. Build Opencv 3.x

Download가 끝났다면 build를 통해 Opencv 설치를 진행할 수 있습니다

Opencv폴더 내에 build 폴더를 만들고 그 안에 cmake를 통해 build를 진행 할 수 있습니다(꼭 build 폴더가 아니어도 상관없습니다)

Windows 와 마찬가지로 source code에 다운로드 받은 opencv path를 지정해주고 build the 

configure이후 Generate를 하면 make 파일들이 생성이 되고

make 를 통해 설치파일들을 만들 수 있습니다

5. Install Opencv 3.x

설치된 make 파일들은 (sudo) make install 을 이용해 설치 할 수 있습니다

위와 같이 설치가 되면서 끝이 나게 됩니다