[정보] 빅데이터캠퍼스 소개및데이터설명

서울시 빅데이터 캠퍼스 안내 및 데이터 설명 자료입니다.

많은 참고 하시기 바랍니다.

 

빅데이터캠퍼스 소개및데이터설명 최종 from bigdatacampus

 

1. 빅데이터 캠퍼스 홈페이지(bigdata.seoul.go.kr) 캠퍼스 소개 및 데이터 설명
2.  1. 캠퍼스 소개 . 빅데이터 캠퍼스란? 2. 이용 안내 . 운영계획 . 입주/분석/퇴소 절차 . 제공서비스 - 데이터서비스 - 분석솔루션서비스 - 시스템자원서비스 . 파트너십 협치 3. 데이터 설명 . 캠퍼스 데이터셋 목 차 2
 3.  빅데이터캠퍼스란? 시민에게 유용한 데이터를 공유합니다 민·관·산·학 협치로 빅데이터 분석환경을 제공합니다 시민의 참여로 새로운 사회적 가치를 만듭니다 시민과 함께 사회혁신 생태계를 구현합니다 1 2 3 4 1. 캠퍼스 소개 3
 4.  시민에게 유용한 데이터를 공유합니다 서울의 다양한 사회문제를 해결하기 위한 방안으로 빅데이터를 분석, 도출된 분석결과를 효율적으로 정책에 반영 이러한 빅데이터를 시민과 공유하고 연구함으로써 사회적 가치를 창출하고자 오픈소스 기반 빅데이터 분석환경인 빅데이터캠퍼스 운영 빅데이터 캠퍼스란? 1. 캠퍼스 소개 4
 5.  서울시 빅데이터 공유활용 원천 데이터 공유가 가능하도록 클라우드 기반의 분석시스템 구축 시스템은 원천데이터(소유권, 프라이버시 등) 유출방지를 위해 VDI(Virtual Desktop Interface) 적용 소프트웨어는 기업과의 연계를 통해 범용성이 높은 오픈소스로 클라우드 시스템 구축 민·관·산·학 협치로 빅데이터 분석환경을제공합니다 빅데이터 클라우드 가상화 연결 복제 서울시 빅데이터 공유.활용 플래폼 빅데이터 캠퍼스란? 서울시 빅데이터캠퍼스 시민사회 파트너 연구소 스타트업 1. 캠퍼스 소개 5
 6.  빅데이터 자원을 공유해 사회혁신에 공헌하고자 하는 시민, 학계, 공공기관 및 민간기업과의 파트너십을 기반으로 운영 참여를 희망하는 대상은 교육프로그램 개설 및 운영, 빅데이터 제공, MOU 등 다양한 방식으로 참여 시민의 참여로 새로운 사회적 가치를 만듭니다 빅데이터 캠퍼스란? 시민 학계 공공기관 민간기업 누구나 캠퍼스에서 데이터를 공유해, 개별적으로 분석할 수 있고, 분석과제에 따라 협력기관 또는 분석전문가와 함께 공동 분석프로젝트를 진행할 수 있습니다. 시민과 시민사회의 집당지성을 활용한 정책 아이디어 발굴과 정책 실행에 추진 동력을 확보할 수 있습니다. 기존에 접하기 어려웠던 유용한 빅데이터와 분석 인프라를 활용해 기존 연구에 새로운 기회를 마련할 수 있습니다. 빅데이터 및 서울시의 빅데이터 우수 사례를 활용해 새로운 비즈니스 기회와 글로벌 기업 경쟁력을 갖춰 나갈 수 있습니다. 1. 캠퍼스 소개 6
 7.  보다 과학적이고 선제적인 행정서비스를 지원, 유용한 데이터와 분석 인프라를 활용해 새로운 기회 창출 이러한 과정을 통해 서울시는 시민과 시민사회의 집단 지성을 활용한 정책 아이디어 발굴과 실행 추진 동력 확보 사회문제 해결의 다양한 방안을 모색해 지속 가능한 사회혁신 추구 시민과 함께 사회혁신 생태계를 구현합니다 빅데이터 캠퍼스란? 1. 캠퍼스 소개 7
 8.  운영계획 S-플랙스 준공 빅캠 사무실 및 분석실 구성 S-플랙스 백본 네트워크 개통 빅캠 오픈 클라우드 기반 서비스 오픈 로컬기반 분석환경 구성 - VDI, Workstation 세팅 - 데이터 서버 설치 - 분석 데이터 확보 - 데이터 전처리 - 데이터셋 제공 캠퍼스 포털 서비스 구성 - 입주자 신청, 등록 - 공모안내 등 클라우드기반 서비스 - 클라우드 인프라 구축 - 클라우드 서비스 구현 1단계 >> 로컬기반 분석환경 구성 및 캠퍼스 오픈 2단계 >> 클라우드기반 서비스 오픈 1단계 2단계 ’16년 2월 ’16년 4월 ’16년 5월 ’16년 7월 ’16년 8월~12월 2. 이용안내 8
 9.  운영계획 상암동 캠퍼스 개포동 캠퍼스 1단계 시스템 인프라 구축 후, ’16.7월 오픈 . 상암동 에스플렉스센터 스마티움(S2동) 15층 - 빅데이터 캠퍼스 분석실 1단계 건물 리모델링후, ‘16.12월중 오픈 예정 . 개포동 디지털 혁신파크 - 빅데이터 분석실 및 부속시설(신관 2층) 2. 이용안내 9
 10.  운영계획 S-플렉스센터(스마티움 15층) 배치도 빅데이터 분석실 상면도(15층) 2. 이용안내 10
 11.  개인 / 법인 / 단체 - 모든 개인/ 법인 / 단체 - 외국인(국내에 일정한 주소를 두고 거주하거나 학술ㆍ연구를 위하여 일시적으로 체류하는 사람 또는 국내에 사무소를 두고 있는 법인 또는 단체) 절차 - 이용절차 : 연구 및 분석목적을 명확히하여 이용 계획서를 제출하고 승인을 득함 자격 - 전제조건 : 캠퍼스 운영규정 준수 및 분석결과의 공익 목적 활용 동의 - 우선순위(우대) ① 캠퍼스에 자원(데이터/분석인력/SW 등)을 제공한 파트너 기관 ② 사회혁신을 목표로 설립된 NPO 및 공공 연구소(대학 포함) ③ 공익에 부합하는 형태의 창업 및 개선을 목표로 하는 개인 및 단체 ④ 기타 캠퍼스 설립 및 운영 목적에 부합하는 개인 및 단체 ⑤ 서울시민 및 서울시 소재 대학, 연구소, 기업 등 운영계획 사 용 자 이용자격 2. 이용안내 11
 12.  운영계획 폐쇄망 - 캠퍼스에서 분석 목적으로 사용되는 원천데이터는 캠퍼스 외부로 이전되거나 복제될 수 없음 - 사용자의 산출물에는 원천데이터가 포함되지 않아야 하며, 이를 검증하기 위한 절차이행 이용범위 - 원칙 : 캠퍼스 입주자는 모든 데이터 접근 및 열람 가능(동일 수준) - 예외 : 제3권리자의 요구가 있을 경우 제한적 접근 및 열람 공공데이터 - 캠퍼스 내 폐쇄 정보통신망에서 데이터 열람 가능토록 원천기관의 동의를 득한 데이터 - 열린데이터광장 등을 통해 기 공개되어 있는 데이터 민간데이터 - 캠퍼스 내 폐쇄 정보통신망에서 데이터 열람 가능토록 제3 권리자의 동의를 득한 데이터 데이터이용 데이터셋 2. 이용안내 12
 13.  결과 공유 1. 원칙 : 분석결과 공유(단, 논문/영업비밀/스타트업 등 경우 공유 시기 조정 가능) 파트너 역할 1. 당해기관이 보유하고 있는 유용한 원천 데이터를 캠퍼스에 제공 2. 데이터 분석에 필요한 하드웨어를 캠퍼스에 제공 3. 데이터 분석에 필요한 소프트웨어의 사용권을 캠퍼스에 제공 4. 캠퍼스를 사용하는 비전문가의 데이터 분석을 지원하기 위한 분석 전문 인력의 파견 근무 5. 분석 결과의 공개를 전제로 서울시가 직면한 사회문제를 데이터 중심으로 분석 파트너 권한 1. 파트너 기관의 임직원을 캠퍼스에 입주시켜 자원을 활용할 수 있다. 2. 기관의 홍보물 등에 캠퍼스의 파트너 기관임을 표시할 수 있다. (예, 파트너십 로고) 운영계획 공유확산 파트너십 2. 이용안내 13
 14.  입주 >> 빅데이터 캠퍼스 홈페이지(bigdata.seoul.go.kr) 입주신청 후 방문 입주 입주/분석/퇴소 절차 서울시 통합회원 가입STEP1 캠퍼스 홈페이지 로그인STEP2 빅데이터 분석 계획서 작성 및 이용신청 제출STEP3 승인결과 확인STEP4 빅데이터 캠퍼스(S-플렉스센터 스마티움 15층) 입주STEP5 가. 1회 입주신청시 1개월이내 나. 개인별, 팀별 신청 가능 다. 개인별 시스템 자원 제공 입주시 유의사항 2. 이용안내 14
 15.  입주 >> 빅데이터 캠퍼스 홈페이지(bigdata.seoul.go.kr) 입주신청 후 방문 입주 입주/분석/퇴소 절차 2. 이용안내 15
 16.  입주 >> 빅데이터 캠퍼스 홈페이지(bigdata.seoul.go.kr) 입주신청 후 방문 입주 입주/분석/퇴소 절차 2. 이용안내 16
 17.  입주/분석/퇴소 절차 폐쇄망의 가상화시스템 접속 01 02 03 04캠퍼스 데이터셋 활용 분석 분석지원 요청 분석결과 반출신청 및 결과공유 1. 데이터 이용 - 캠퍼스에서 제공하는 데이터셋 전체 활용 가능 - 공모전 주관기관에서 제공하는 데이터셋 전체 활용 가능 * 개인별 보유데이터의 캠퍼스 반입 : 가능(바이러스 등 침해요인 발견시 불가) 2. 분석솔루션 및 시스템자원의 이용 - 오픈소스 솔루션제공 및 파트너사의 분석솔루션 제공 - 시스템자원 추가 필요시 지원요청 * 개인별 보유소스코드 캠퍼스 반입 : 가능(바이러스 등 침해요인 발견시 불가) 3. 분석결과 반출 및 공유 - 분석결과의 반출신청 후 심의후 제공(적정한 수준의 가공결과에 대해 반출승인) - 분석결과 반출시 결과보고서의 공유 필수(시기조정 가능하나 최소한의 개요 공유) 입주 후 분석 진행 및 결과 공유 2. 이용안내 17
 18.  분석결과 반출 및 공유 처리완료 01 02 VDI시스템 자원 및 분석데이터 보존 필요시 요청 퇴소신청 퇴소 후 보존요청 없을 경우 모든 자원 및 데이터 삭제 1. 퇴소전 확인 필요사항 - 분석결과 반출 신청 - 분석결과 반출 승인 및 결과 공유여부 2. 시스템보존 여부 의사 확인 - DVI 시스템 이미지 보관 요청시 자원가용여부 확인 후 가능한 보관 조치 예정 - 보관기간의 제한 : 미정 - 공모전 참가자의 경우 최대한 보관지원 예정 3. 퇴소신청 및 승인 4. 퇴소후 자원 클리닝 - 보관신청이 없을 경우 전체 클리닝 퇴소 입주/분석/퇴소 절차 03 04 2. 이용안내 18
 19.  서울시 빅데이터 공유활용 플랫폼 및 상권분석시스템 데이터셋 •부동산 데이터, 유동인구 데이터, 대중교통 이용통계 데이터 등 42종 제공 ( ※ 추후 협력기관과의 협의를 통해 제공 가능 데이터 추가) 통합공간정보시스템(SDW) 공공데이터셋 •SDW 보유 공간정보, 정책지도.공간정보플랫폼 자료 등 473종 제공 열린데이터광장 데이터셋 •서울시 행정, 시설, 교통 등 위치 및 현황 정보 데이터 4천여종 제공 ( ※ 상세 내역 : data.seoul.go.kr 참조) 제공서비스 데이터 서비스 데 이 터 협 치 * 유료소싱 : 필요시 최소화 빅데이터 캠퍼스 공동구역파트너십 무료소싱 공공데이터 민간데이터 공개데이터 공개데이터 제3자권리 공개데이터 Raw data 집계단위 가공통계 가공통계 Raw data 집계단위 열린데이터광장 SDW BDW 기업 단체 2. 이용안내 19
 20.  파트너십을 통한 분석 서비스 제공/공유 제공서비스 데이터 서비스 KB국민카드/국민은행 제공 SKT 제공 나이스 지니데이타㈜ 제공 KT 제공 신한카드 제공 오픈메이트 제공 •부동산 데이터(아파트시세) •카드매출데이터 •부동산 데이터(아파트시세) •카드매출데이터 •부동산 데이터(아파트시세) •카드매출데이터 •부동산 데이터(아파트시세) •카드매출데이터 •소득수준데이터 •유동인구통계DB 2. 이용안내 20
 21.  제공서비스 분석솔루션 서비스 오픈소스 기반의 SW 제공 및 설치 서비스 • 오피스SW, DB작업SW, 데이터분석SW, 통계분석SW 등 384종 SW 확보 및 제공 파트너십을 통한 분석 서비스 제공/공유 솔 루 션 협 치 * 상용 유료소싱 : 필요시 최소화 빅데이터캠퍼스 공동구역 오픈소스S/W 상용S/W (파트너십) 무료소싱 클라우드 컴퓨팅 환경 분석솔루션 분산파일 분산DB 통계분석 S/W 비쥬얼라이제이션 S/W Office S/W 마이닝 S/W VDI VM 빅데이터 분석 모델링 2. 이용안내 21
 22.  제공서비스 분석솔루션 서비스 •오픈소스 기반의 분석SW 제공 리스트(예시) 2. 이용안내 22
 23.  분석솔루션 서비스 파트너십을 통한 분석 서비스 제공/공유 인텔&클라우데라 하둡 시스템(인텔&클라우데라 제공) 주소정제 솔루션(오픈메이트 제공) SAS Education Analytical Suite(SAS 제공) 방화벽 및 샌드박스 솔루션(포티넷 제공) 데이지 (뉴스젤리 제공) ○ 오픈소스 기반의 Hadoop 서비스 •서비스 설치 : 대상서버(인텔 5대) 설치 완료 •서비스 개시 : 7월중 개시 ○ SAS 통계분석용 패키지 솔루션, 데이터 마이닝, 텍스트 분석 솔루션 •서비스 설치 : SAS서버 설치 예정 •서비스 개시 : 7월중 개시 ○ 웹페이지 기반의 시각화 분석 서비스 •서비스 설치 : 내부포털서버 서버에 설치 예정 •서비스 개시 : 7월중 개시 ○ 텍스트 주소 데이터의 좌표변환 서비스 (DB서비스, 웹서비스) •서비스 설치 : 분석DB서버에 DB서비스(7월4일) 설치, 웹서비스 (7월 중 서비스 개시) • 서비스 개시 : DB서비스 7월 7일, 웹서비스 7월중 개시 ○ 내부 방화벽 및 샌드박스 솔루션 설치 •서비스 설치 : 폐쇄망 내 서버보안 및 데이터/소스의 바이러스 체크를위한 어플라이언스 장비 설치(7월) •서비스 개시 : 7월중 개시 제공서비스 2. 이용안내 23
 24.  VDI 개요 •가상화시스템은 빅데이터 캠퍼스에 입주하신 사용자분들께 안전하고 안정적인 분석환경을 제공하고, 오피스SW 부터 Toad, Python 등 다양한 오픈소스 분석Tool을 탑재하여 빅데이터 분석환경을 제공합니다. •빅데이터 캠퍼스 입주자분들께서 사용하실 수 있는 가상화시스템은 총 105명이 동시에 사용할 수 있습니다. • 가상화시스템 이용 프로세스 제공서비스 시스템자원 서비스 입주신청시 부여받은 ID/PW 접수 01 02 03 04해당 가상화시스템 생성 가상화시스템 ID/PW 입력 가상화시스템 이용 1 2. 이용안내 24
 25.  제공서비스 시스템자원 서비스 - 빅데이터 분석 및 과제 수행을 위한 입주자가 원격으로 사용할 수 있는 서버 시스템 - OS 환경 : Windows Server 2012 R2 - 분석지원서버 4대 + 교육용 지원서버 1대 분석지원서버 (windows) 2 - 빅데이터 분석 및 과제 수행을 위한 입주자가 원격으로 사용할 수 있는 서버 시스템 - OS 환경 : Linux CentOS v7.2 - 분석지원서버 4대 + 교육용 지원서버 1대 분석지원서버 (Linux) 3 - 빅데이터 분석을 위한 원본 데이터파일 및 다양한 공개SW 목록을 조회할 수 있는 서버 시스템 - OS 환경 : Windows Server 2012 R2 원본파일서버4 - 빅데이터 원본DB 조회 및 사용자 User 계정생성이 가능한 분석DB 서버 시스템 - OS 환경 : Linux CentOS v7.2 - DBMS : MariaDB 분석DB서버5 2. 이용안내 25
 26.  - 데이터 지원 : 서울연구원 제공 데이터이외의 캠퍼스내에서 활용가능한 데이터셋 전부 활용 2016 서울연구논문 공모전(서울연구원)– 빅데이터 캠퍼스 협력1 파트너십 협치 공모전 협력 공 모 전 협 치 공모 참여 빅데이터캠퍼스 공동구역 공모전 수행 분석 베드 제공 일반시민 대학생 연구원 시민단체 창업/기업 기업 공모전 연구소 공모전 대학 공모전 공공기관 공모전 2. 이용안내 26
 27.  파트너십 협치 파트너십 협력 아 카 데 미 협 치 * 유료소싱 : 배제 빅데이터 캠퍼스 공동구역 파트너십 무료소싱 오픈강의 폐쇄강의 전면오픈 혼합형 자체교육 분석솔루션 분석기법 빅데이터 커리큘럼 대학생 공모교육 분석실습 프로젝트 공공, 기업 대학, 연구소 대학강의 연구 기업교육 ○ 교육 프로그램 진행 및 일자리 창출 － 빅데이터 전문인력 양성을 위해 캠퍼스에서 협력기관의 교육 프로그램 진행 또는 운영 성균관대학교/국민대학교/세종대학교 - 교육 강의 및 과제분석 협력1 2. 이용안내 27
 28.  캠퍼스 데이터셋 서울시 공유활용플랫폼 및 상권분석시스템 데이터셋 목록 3. 데이터 설명 28
 29.  캠퍼스 데이터셋 서울시 공유활용플랫폼 및 상권분석시스템 데이터셋 목록 3. 데이터 설명 29
 30.  서울시 공유활용플랫폼 및 상권분석시스템 데이터셋 목록 캠퍼스 데이터셋 3. 데이터 설명 30
 31.  감사합니다