Giter Club home page Giter Club logo

bigportal's Introduction

BigPortal

Environment Big-data Platform model for DMP and RDMS

분석플랫폼 디자인 구체화 : ISP 및 설계 준비

  1. 비지니스 분석(BA) + 요구사항 정의를 바탕으로

  2. 규칙 -> 절차화 -> 프레임워크화 -> 플랫폼화

  3. 연구자는 PC, 노트북, 휴대폰 등을 통해 사용한다. 예) Jupyter Notebook, R Studio Server

데이터 수집-저장방법

1. 데이터 수집과정의 자동화

  1. 도메인 분류 학습 자동화(선택지에 따른 키워드 우선순위의 차별;개인화) => 연구자의 이용패턴 분석
  2. 포털, SNS, 주요 일간지, 환경관련 유관기관 및 법률 등
  3. 데이터를 업로드하거나 선택하면 여러가지 분석결과를 우선순위에 따라 표시(추천)
  4. 환경사전(가칭), 환경 데이터 분류체계

2. 고유 데이터 수집방법의 개발

  1. Intelligent Things 기술을 발굴(적용가능한 기술의 지속적인 탐구)
  2. 아두이노, 라즈베리파이 등 IoT 기기와 MS Azure 등 클라우드을 활용한 자체 데이터 수집방법 보유 => 최소 3년 이상의 고유 데이터 축적

3. 오픈소스를 활용한 대기질(환경질) 데이터 수집 자동화(논문화)

  1. 수정-저장 자동화(Elastic Stack, PostgreSQL)
  2. 대시보드 자동화(Elastic Stack, Splunk, PostgreSQL)
  3. 수집-저장플랫폼 설계(-구축)방법론

4. 데이터 수집(계속)

  1. 카테고링
  2. 데이터 소스 목록화
  3. 고유 데이터 수집-저장

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.