공지사항
HOME
LOGIN
회원가입
사이트맵- HOME>
반출정책
서울시 빅데이터 캠퍼스 반출정책
2019.12. 서울시 빅데이터 캠퍼스 (서울특별시 스마트 도시 정책관)
빅데이터캠퍼스 반출
- 반출 기본 사항
- 원칙적으로 캠퍼스 내에서 분석을 완료하기를 권장함
- 분석 완료 후 분석결과요약서 등을 다른 사람들과 공유함이 원칙임
- 중간산출물 혹은 최종결과물은 반출심사를 거쳐 외부로(개인에게) 제공됨
- 반출이 가능한 형태는 원본데이터와 분석산출물로 구분됨
- 반출요청서에 반출 신청한 자료 각각에 대해 출처와 산출과정을 자세히 명시해야 심사 가능
- 용어 정의
- 반출신청 : 원본데이터 또는 분석산출물을 캠퍼스 외부로 제공하도록 신청
- 본데이터 : 분석산출물이 아닌 단순 내부 자료(원본데이터를 신청하는 경우를 단순 자료 제공으로 처리함)
- 분석산출물 : 캠퍼스에서 제공하는 데이터를 활용하여 도출해 낸 중간결과나 분석하여 작성한 소스코드, 데이터 및 결과보고서 등 문서. 분석산출물을 작성하는 방식은 발췌처리와 기초통계처리, 통계처리로 정의함.
- 발췌처리 : 원본데이터를 형태 그대로 일부분을 추출 처리
- 기초통계처리 : 원본데이터의 (시간, 공간 등) 단위 보다 크거나 상이한 단위로 합계, 평균 등 기초통계처리
- 통계처리 : 원본데이터의 (시간, 공간 등) 단위 보다 크거나 상이한 단위로 검정값, 범주화, 지수화 등 처리
반출 가능 여부
- 원본데이터 반출
- 반출 가능
- 사이트에 기공개되어 있는 원본데이터(단, 기공개된 외부 홈페이지들을 통해 다운로드 권장)
- [표1]~[표8]까지의 목록 중 원본데이터 반출이 가능한 경우
- 길단위 추정 유동인구(도로명주소 도로링크 단위)는 원본데이터 반출이 불가하나 예외적으로 보고서용 등 꼭 필요한 경우에 한해서 동단위 일부(3~4개동)의 반출신청 시 제공처에 문의 후 반출가능여부 판단(단, 개인(팀)당 한번으로 제한함)
- 열린데이터 광장 데이터셋(http://data.seoul.go.kr에서도 다운로드 가능)
- 지역경계 shp파일 중 통계청 폴더의 시, 구, 행정동, 집계구 경계, 행정안전부 폴더
- 반출 불가능
- 반출이 제한되어 있는 원본데이터
- 지역경계 shp파일 중 통계청 폴더의 기초단위구
- 서울시 배경지도
서울시 빅데이터 캠퍼스 반출정책
2019.12. 서울시 빅데이터 캠퍼스 (서울특별시 스마트 도시 정책관)
빅데이터캠퍼스 반출
- 반출 기본 사항
- 원칙적으로 캠퍼스 내에서 분석을 완료하기를 권장함
- 분석 완료 후 분석결과요약서 등을 다른 사람들과 공유함이 원칙임
- 중간산출물 혹은 최종결과물은 반출심사를 거쳐 외부로(개인에게) 제공됨
- 반출이 가능한 형태는 원본데이터와 분석산출물로 구분됨
- 반출요청서에 반출 신청한 자료 각각에 대해 출처와 산출과정을 자세히 명시해야 심사 가능
- 용어 정의
- 반출신청 : 원본데이터 또는 분석산출물을 캠퍼스 외부로 제공하도록 신청
- 본데이터 : 분석산출물이 아닌 단순 내부 자료(원본데이터를 신청하는 경우를 단순 자료 제공으로 처리함)
- 분석산출물 : 캠퍼스에서 제공하는 데이터를 활용하여 도출해 낸 중간결과나 분석하여 작성한 소스코드, 데이터 및 결과보고서 등 문서. 분석산출물을 작성하는 방식은 발췌처리와 기초통계처리, 통계처리로 정의함.
- 발췌처리 : 원본데이터를 형태 그대로 일부분을 추출 처리
- 기초통계처리 : 원본데이터의 (시간, 공간 등) 단위 보다 크거나 상이한 단위로 합계, 평균 등 기초통계처리
- 통계처리 : 원본데이터의 (시간, 공간 등) 단위 보다 크거나 상이한 단위로 검정값, 범주화, 지수화 등 처리
반출 가능 여부
- 원본데이터 반출
- 반출 가능
- 사이트에 기공개되어 있는 원본데이터(단, 기공개된 외부 홈페이지들을 통해 다운로드 권장)
- [표1]~[표8]까지의 목록 중 원본데이터 반출이 가능한 경우
- 길단위 추정 유동인구(도로명주소 도로링크 단위)는 원본데이터 반출이 불가하나 예외적으로 보고서용 등 꼭 필요한 경우에 한해서 동단위 일부(3~4개동)의 반출신청 시 제공처에 문의 후 반출가능여부 판단(단, 개인(팀)당 한번으로 제한함)
- 열린데이터 광장 데이터셋(http://data.seoul.go.kr에서도 다운로드 가능)
- 지역경계 shp파일 중 통계청 폴더의 시, 구, 행정동, 집계구 경계, 행정안전부 폴더
- 반출 불가능
- 반출이 제한되어 있는 원본데이터
- 지역경계 shp파일 중 통계청 폴더의 기초단위구
- 서울시 배경지도
서울시 빅데이터 캠퍼스 반출정책
2019.12. 서울시 빅데이터 캠퍼스 (서울특별시 스마트 도시 정책관)
빅데이터캠퍼스 반출
- 반출 기본 사항
- 원칙적으로 캠퍼스 내에서 분석을 완료하기를 권장함
- 분석 완료 후 분석결과요약서 등을 다른 사람들과 공유함이 원칙임
- 중간산출물 혹은 최종결과물은 반출심사를 거쳐 외부로(개인에게) 제공됨
- 반출이 가능한 형태는 원본데이터와 분석산출물로 구분됨
- 반출요청서에 반출 신청한 자료 각각에 대해 출처와 산출과정을 자세히 명시해야 심사 가능
- 용어 정의
- 반출신청 : 원본데이터 또는 분석산출물을 캠퍼스 외부로 제공하도록 신청
- 본데이터 : 분석산출물이 아닌 단순 내부 자료(원본데이터를 신청하는 경우를 단순 자료 제공으로 처리함)
- 분석산출물 : 캠퍼스에서 제공하는 데이터를 활용하여 도출해 낸 중간결과나 분석하여 작성한 소스코드, 데이터 및 결과보고서 등 문서. 분석산출물을 작성하는 방식은 발췌처리와 기초통계처리, 통계처리로 정의함.
- 발췌처리 : 원본데이터를 형태 그대로 일부분을 추출 처리
- 기초통계처리 : 원본데이터의 (시간, 공간 등) 단위 보다 크거나 상이한 단위로 합계, 평균 등 기초통계처리
- 통계처리 : 원본데이터의 (시간, 공간 등) 단위 보다 크거나 상이한 단위로 검정값, 범주화, 지수화 등 처리
반출 가능 여부
- 원본데이터 반출
- 반출 가능
- 사이트에 기공개되어 있는 원본데이터(단, 기공개된 외부 홈페이지들을 통해 다운로드 권장)
- [표1]~[표8]까지의 목록 중 원본데이터 반출이 가능한 경우
- 길단위 추정 유동인구(도로명주소 도로링크 단위)는 원본데이터 반출이 불가하나 예외적으로 보고서용 등 꼭 필요한 경우에 한해서 동단위 일부(3~4개동)의 반출신청 시 제공처에 문의 후 반출가능여부 판단(단, 개인(팀)당 한번으로 제한함)
- 열린데이터 광장 데이터셋(http://data.seoul.go.kr에서도 다운로드 가능)
- 지역경계 shp파일 중 통계청 폴더의 시, 구, 행정동, 집계구 경계, 행정안전부 폴더
- 반출 불가능
- 반출이 제한되어 있는 원본데이터
- 지역경계 shp파일 중 통계청 폴더의 기초단위구
- 서울시 배경지도
캠퍼스에서 제공하는 개인별 H/W 및 S/W 분석자원과 공동으로 활용하는 분석자원입니다.
개인별 시스템 자원
<H/W 자원>1)분석서버 제공(VM)
1. 분석서버(VM) 시스템 소개
분석서버(VM)는 빅데이터 캠퍼스에 방문하신 이용자분들께 안전하고 안정적인 분석환경을 제공하고, Toad, Python 등 다양한 오픈소스 분석Tool을 탑재하여 빅데이터 분석환경을 제공합니다.
2. 분석서버(VM) 시스템
빅데이터 캠퍼스 이용자분들께서 사용하실 수 있는 분석서버(VM)는 원격데스크탑 접속으로 제공됩니다.
| 단계 | 이름 | 서비스 방식 | 서버 제원 |
|---|---|---|---|
| 1 단계 | 분석서버(VM) | 원격데스크탑 접속 |
- 운영체제 : Windows 2012 - vCPU : 4 core - vMEM : 16GB - Disk : 500GB |
| 2 단계 | 분석서버(VM) | 원격데스크탑 접속 |
- 운영체제 : Windows 2012 - vCPU : 8 core - vMEM : 32GB - Disk : 1TB |
| 3 단계 | 분석서버(VM) | 원격데스크탑 접속 |
- 운영체제 : Windows 2012 - vCPU : 16 core - vMEM : 64GB - Disk : 2TB |
3.분석서버(VM) 이용 방법
분석서버(VM) 이용 프로세스
4. 제공되는 SW 리스트
분석서버(VM)
| 분류 | 솔루션명 | OS | 버전 | 제품개요 |
|---|---|---|---|---|
| Development Environments | Anaconda 3 | Win64 | 23.03-1 | 아나콘다 - 파이썬(3.10.9) |
| Development Environments | JDK | Win64 | 8u202 | JAVA 개발키트 |
| Development Environments | Rstudio | Win64 | 2022.02.0+443 | R 개발환경 |
| Development Environments | 이클립스 (Eclipse) | Linux 64 src/ Win64 | 2019-09 | 자바기반 통합 개발 프로그램 |
| Document Viewer | adobe reader | Win64 | 23.001.20064 | PDF 문서 뷰어 |
| Document Viewer | Office Standard 2016 | Win64 | 16.0.4266 | 엑셀/워드/파워포인트 |
| Document Viewer | 한컴오피스뷰어 | Win32/64 | 9.6.1.0 | 한컴 오피스 뷰어 |
| Editor | Notepad++ | Win32/64 | 8.5.3 | 텍스트 에디터 |
| File Compression (압축) | 7-Zip | Win64 | 23 | 세븐집 / 압축분할 프로그램 |
| FTP | FileZilla | Win64 | 3.64.0 | 파일질라/ FTP 클라이언트,서버 |
| Office Suite | Apache OpenOffice | Win32, Linux32/64 | 4.1.7 | 윈도우 및 리눅스를 포함한 다양한 플랫폼을 지원하는 무료 통합오피스 |
| Office Suite | LibreOffice | Win64 | 6.4.3 | 리브레오피스 / 오피스 Sofrware |
| SQL editor | Toad for mysql | Win64 | 8.0.0.296 | 토드/DB 클라이언트/8.0.0.296 |
| SQL editor | Workbench | Win64 | 8.0.20 | MySQL DB클라이언트 |
| Telnet | PuTTY | Win32/64 | 0.70 | Telnet/SSH 클라이언트 |
| Web Browser | Chrome | Win64 | 109.0.5414.120 | 크롬 (Chromium) /웹브라우저 |
| Web Browser | Internet Explorer | win64 | 11.0.14 | 웹 브라우저 |
| 공간정보시스템 | QGIS | Win64 | v3.28.6 | 공간분석 및 시각화 도구 |
| 빅데이터 분석 플랫폼 | POWER BI Desktop | Win64 | 2.80.5803 | 통계분석 솔루션 |
| 빅데이터 분석 플랫폼 | R Language | Win64 | 4.3.0 | 통계분석 솔루션 |
| 텍스트 정제 | 가위손 | Win32/64 | v3.1 | 대용량 텍스트파일 분할 및 추출 프로그램 |
2)오피스SW서버 제공
1. 오피스편집서버(VM) 소개
엑셀, 한글, 파워포인트 등 일반 오피스 문서 작성을 위한 Office 서버(VM)입니다.
2. 오피스편집서버(VM) 현황
빅데이터 캠퍼스 이용자분들께서 사용하실 수 있는 오피스편집서버는 원격데스크탑 접속으로 제공됩니다.
| 이름 | 서비스 방식 | 서버 제원 | 비고 |
|---|---|---|---|
| 오피스편집서버(VM) | 원격데스크탑 접속 |
- 운영체제 : Windows 2012 - vCPU : 32 core - vMEM : 64GB - Disk OS : 100GB - Data : 1TB |
3. 오피스편집서버 이용 방법
오피스편집서버(VM) 이용 프로세스
공용 자원 제공
1) 원본파일서버
- 빅데이터 분석을 위한 원본 데이터파일및 다양한 공개 SW 목록을 조회할 수 있는 서버 시스템
- OS 환경 : Windows Server 2012 R2
2) 원본DB서버
- 빅데이터 원본 DB 조회 및 사용자 User 계정생성이 가능한 원본 DB 서버 시스템
- OS 환경 : Linux CentOS v7.2
- DBMS : MariaDB
