공공데이터(오픈 API)란? feat. 구글 코랩 Google Colab 추천 & 단축키

포스팅 주제

우리 사회는 데이터 중심의 시대로 진입했다. 이제 회사에서도, 개인적인 사업에서도 결정을 내리기 위한 중요한 자료가 된 것이 빅데이터이다. 앞으로 공공데이터 및 오픈데이터 API를 어떻게 인증키 발급 / 등록해서 이용하고 가공해서 활용할 수 있는지 정리해 볼 것이다. 
 

오픈 API 란? 

 
Open API
Open API는 '공개 API'라는 뜻으로, 누구나 사용할 수 있도록 공개된 API이다. 대부분 Rest API 기술을 활용하여 구현된다. API는 Application Programming Interface의 약자로, 응용 프로그램 인터페이스이다. 간단히 말하면 이미 어떤 사이트에서 누구나 사용할 수 있도록 제공하는 기능을 가져와서 다른 사이트에서 사용할 수 있게 도와 주는 도구이다. 예를 들면 트위터의 API를 통해 다른 앱에서 트위터 계정에 글을 올리거나, 구글 지도 API를 통해 앱에 지도 기능을 추가할 수 있다. 네이버나 카카오, 구글 API를 쓰면 소셜 로그인을 구현 할 수 있다. 

Rest API
Rest API(Representational State Transfer API)는 데이터를 주고받는 규약 중 하나로, HTTP 프로토콜을 통해 정보를 제공하는 함수이다. Rest API는 URL 문자열의 정해진 구조를 사용하여 서비스를 제공한다. 응답은 주로 XML 또는 JSON 형태로 출력된다.

공공데이터 포털
공공데이터포털(data.go.kr)은 다양한 공공 데이터를 Open API 형태로 제공하며 누구나 필요한 데이터를 쉽게 수집할 수 있다. 공공데이터포털에 로그인해서 사이트 내에서 원하는 데이터를 검색하여 관련 Open API를 찾는다. 참고문서에서 서비스 활용 가이드를 다운로드하여 해당 API의 구조와 활용 방법을 파악하고 상세 기능 탭에서 "활용신청" 버튼을 클릭하여 API 사용 권한을 얻는다. 항상 바로 데이터를 가져올 수 있는 건 아니고 승인이 날 때까지 시간이 걸리기도 한다. 개발계정의 심의구분이 자동승인이면 신청 후 바로 사용할 수 있더. 데이터는 주로 CSV, Json, Xml 형식으로 제공되기 때문에 이걸 SQL 쿼리문이나 python, javascript 등으로 가공해서 사용해야 한다. 
 

 

---

개발환경

아래 툴 최신버전 사용 권장
- Eclipse IDE 
- Notepad++ (Google colab보다는 비추)
- google colab
- Python
- Bootstrap
- Chrome Browser

---

나는 Google Colab을 사용할 것이다. 
 
하지만 Notepad++로 파이썬 코드 실행할 수 있도록 환경설정하는 법도 함께 포스팅 한다.
구글 코랩을 쓰면 Notepad++는 설치할 필요가 없다. 

 

 

Notepad++ 에서 파이썬 코드 실행 플러그인 설치

✅ 플러그인 > 플러그인 관리 > NppExec > 설치

 
NppExec 플러그인 설치하고 단축키 F6 누르면 코드를 바로 컴파일해서 실행 가능
 
먼저 폴더에 파이썬 형식(test.py 등)으로 저장 > F6 > 아래 코드 스크립트창에 입력 

python "$(FULL_CURRENT_PATH)"

 
그럼 Notepad++ 내에서 하단에 NppExec 콘솔이 생기면서 코드의 실행 결과가 화면에 보여진다. 

 
원래 Welcome to Korea 라는 것이 떠야 하는데 Exit code 9009 에러가 뜸.
당연히 파이썬을 실행하려면 먼저 파이썬이 PC에 설치가 되어 있어야 한다. 
python 명령어가 제대로 실행되기 위해서는 Python 설치 경로가 환경 변수 PATH에 포함되어 있어야 한다.  
 
python이 제대로 설치되었는지 확인하는 방법
명령 프롬프트 열기 (Win + R → cmd 입력 → Enter)

python --version

 

버전이 표시되지 않고 오류가 발생하면, Python 실행 경로가 PATH에 설정되지 않은 것이다.

Python 설치된 경로를 시스템 환경변수에 추가해 주어야 한다.
제어판 → 시스템 → 고급 시스템 설정 → 환경 변수
Path를 편집 → Python 경로 추가 (예: C:\Python39\).
 
파이썬 설치나 환경변수 설정법은 아래 포스팅 참조 
https://awesomepossum.tistory.com/468

[Python] 내 파이썬 설치 경로는 어디에?

 
구글 코랩 쓰면 위 과정을 안 거쳐도 된다. 

---

데이터 다룰 때 Google Colab 추천하는 이유

보통 파이썬 처음 배우는 사람들은 주피터 노트북이나 VSCode 를 쓴다.
하지만 이제 대세는 구글 코랩이다.
 
Google Colab은 Notepad++ 보다 직관적이고 단축키로 쉽게 파이썬 코드를 작성하고 실행할 수 있다.
특히 데이터 분석, 머신러닝, 딥러닝, 그리고 파이썬 코딩을 위한 온라인 환경에서 매우 유용한 도구이다!

 
1. 설치가 쉽다. 그냥 웹 브라우저만 있으면 바로 실행 가능하고 Python 관련 설정을 따로 할 필요가 없이 바로 작업할 수 있다. 
2. 클라우드 환경에서 실행되기 때문에 코드와 데이터를 클라우드에서 바로 실행하고 저장할 수 있어서  컴퓨터 사양에 구애받지 않는다.
3. 파이썬 라이브러리(예: NumPy, Pandas, TensorFlow, Keras, PyTorch 등)를 기본적으로 제공하고 추가로 라이브러리를 설치하고 싶으면 !pip install 명령어로 바로 설치하고 바로 사용할 수 있다.
4. 작업한 내용을 자동으로 Google Drive에 저장하기 때문에 세션이 종료되더라도 데이터를 잃어버리지 않는다. 공유 링크를 통해 다른 사람과 코드와 결과를 실시간으로 공유하고 함께 작업할 수 있다.
 
https://colab.research.google.com/

Google Colab

 
여기 들어가서 `새 파일 추가`해서 쓰면 됨
메뉴에서 `Tools(도구) → Keyboard shortcuts` 선택하면 단축키 모음을 확인할 수 있다.

 

기본 단축키

1. 셀 실행 및 실행 관련

Shift + Enter: 현재 셀 실행 및 다음 셀로 이동
Ctrl + Enter (또는 Cmd + Enter): 현재 셀 실행 (위치 유지)
Alt + Enter: 현재 셀 실행 및 아래에 새 코드 셀 삽입

2. 셀 추가/삭제

Ctrl + M B (또는 Cmd + M B): 아래에 코드 셀 추가
Ctrl + M A (또는 Cmd + M A): 위에 코드 셀 추가
Ctrl + M D (또는 Cmd + M D): 현재 셀 삭제

3. 셀 이동

Ctrl + M K (또는 Cmd + M K): 현재 셀을 위로 이동
Ctrl + M J (또는 Cmd + M J): 현재 셀을 아래로 이동

4. 셀 유형 변경

Ctrl + M Y (또는 Cmd + M Y): 셀을 코드 셀로 변경
Ctrl + M M (또는 Cmd + M M): 셀을 마크다운 셀로 변경

편집 관련 단축키

1. 실행 취소/재실행

Ctrl + Z: 실행 취소
Ctrl + Shift + Z: 재실행

2. 텍스트 정리

Ctrl + [: 들여쓰기 줄이기
Ctrl + ]: 들여쓰기 늘리기

3. 코드 포맷팅 (Python 코드 정렬)

Ctrl + Shift + \: 코드 자동 포맷팅 (설치된 포매터 필요)

---

공공데이터 포털에서 데이터 활용 신청하기

 

공공데이터 포털 접속

 

https://www.data.go.kr/index.do

공공데이터 포털

 

검색창에서 원하는 데이터 검색

 

데이터 우측에 `활용신청` 버튼 클릭

 

 

활용신청 누른 후 신청 목적을 입력하기

웹사이트 개발용으로 설정해주었다.

 

마이페이지  > API 신청으로 가면 신청한 API와 활용가능한 API 의 목록이 보여진다.

그리고 API 사용기간이 정해져 있기 때문에 만료일 안에 사용해야 한다.

API의 사용기한은 보통 2년이다. 

 

데이터 활용이 승인되면 인증키 2개가 발급된다.

이 중에 하나를 사용하면 된다. 

 

 

오늘은 여기까지만 포스팅하고 내일 이어서 작성한다!