사례로보는사물인터넷 (iot)...

24
www.b2en.com 데이터로더좋은세상을만드는사람들-비투엔 Copyright © 2017 B2EN Co., Ltd. All rights reserved 사례로 보는 사물인터넷 (IoT) 데이터 품질관리 ㈜비투엔 김영석 수석 @데이터 그랜드 컨퍼런스 2017-11-07

Upload: others

Post on 23-May-2020

6 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

www.b2en.com 데이터로더좋은세상을만드는사람들-비투엔

Copyright © 2017 B2EN Co., Ltd. All rights reserved

사례로보는사물인터넷 (IoT) 데이터품질관리

㈜비투엔

김영석 수석 @데이터 그랜드 컨퍼런스

2017-11-07

Page 2: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

Contents

1. 들어가며

2. IoT 데이터 활용

3. IoT 데이터 품질관리

4. 데이터 분석 사례

5. 맺음말

Copyright © 2017 B2EN Co., Ltd. All rights reserved

Page 3: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

1. 들어가며가치있는것을찾는방식의변화

Page 4: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

2. IoT 데이터 활용토양분석센서데이터를활용하는기업 (Veris Technologies)

토양을분석하여

양분보유량(EC),

유기물(OM), 산도(pH)

지형(경사, 곡률) 를이미지화

EC OM pH

Page 5: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

2. IoT 데이터 활용토양분석데이터를활용사례

파종 비료

제초 개량

Page 6: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

빗물

지표수

지하수

pH조정

UV살균

영양분공급

디지털팬

기상관측

통합제어기

대시보드

측정상자

측정센서

증발분석모니터

측정센서

배지무게측정(성장지표)

배수분석기

2. IoT 데이터 활용시설원예솔루션수출기업 (PRIVA)

6

네덜란드 기업 PRIVA의 슬로건 [식물이 원하는 바를 해준다!]

Page 7: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

2. IoT 데이터 활용시설원예 스마트팜국내활용사례

Page 8: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

2. IoT 데이터 활용저장된 IoT 데이터는믿을만한가?

Page 9: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

3. IoT 데이터 품질관리기상관측 IoT 데이터품질관리사례

출처: 세계기상기구(WMO, World Meteorological Organization)

Page 10: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

3. IoT 데이터 품질관리자동기상관측시스템(AWS)의관측센서구성

자동기상관측시스템 (Automatic Weather System, AWS)

Page 11: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

3. IoT 데이터 품질관리IoT 데이터품질관리–유효범위진단

관측 값

1. 관측월이1월, 2월, 12월이면기온값이-30~25℃ 범위를벗어나면안된다.

2. 관측월이3월, 4월, 10월, 11월이면기온값이-20~35℃ 범위를벗어나면안된다.

3. 관측월이5월, 6월, 7월, 8월, 9월이면기온값이-3~40℃ 범위를벗어나면안된다.

관측일 점검결과

30℃ 오류데이터

2월1일

Page 12: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

3. IoT 데이터 품질관리IoT 데이터 품질관리 - 내적 일치성 진단

1. 풍속값이0.4㎧보다크거나같으면풍향값이0이면안된다.

2. 일조가0이면일사는3.35MJ/m2보다크거나같으면안된다.

3. 현지기압은해면기압보다크거나같으면안된다.

Page 13: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

3. IoT 데이터 품질관리IoT 데이터 품질관리 - 공간성 진단

Page 14: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

3. IoT 데이터 품질관리IoT 데이터 품질관리 – 관리 데이터 진단

사용자 관리항목 사용자 등록 데이터

모종수량 15,000주

정식일자 2017-02-14

품목명(코드) 대저토마토(080307)

농장위치(PNU)전남 화순

(PNU, 위도경도)

수확 시기 2017-03-24

수확량(단위) 1,000(ton)

Page 15: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

3. IoT 데이터 품질관리IoT 데이터 품질관리 – 시사점

Page 16: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

4. 데이터 분석 사례데이터 기반의 양파&날씨 관계 분석 사례

&

Page 17: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

4. 데이터 분석 사례양파&날씨 관계분석을 위한 분석대상 지역 선정

“ 날씨와양파생산량관계분석을위해통계청과농림부자료를기반으로분석대상지역을선정했습니다. ”

※ 도매시장양파출하량(’04년~ ‘13년)

- 출처 : 농림축산식품부공공데이터포털

- URL: http://data.mafra.go.kr

※ 양파생산량(‘04년~ ‘13년)

- 출처: 통계청- URL: http://kosis.kr/statHtml/statHtml.do?orgId=101&tblId=DT_1ET0291&conn_path=I3

52% 전라남도

대한민국생산량의

5%

5%

14%

21%

무안군

11%

함평군

전라남도

출하량의

61%

12%

해남군

Page 18: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

4. 데이터 분석 사례단위면적당 생산량 기준으로 분석대상 연도 선정

“ 최근10년간단위면적당양파의최대생산연도, 최소생산연도를찾았습니다. ”

0

50

100

150

200

250

300

350

400

2004년 2005년 2006년 2007년 2008년 2009년 2010년 2011년 2012년 2013년

재배면적(50ha) 생산량(5천t) 단위생산량(50m²당 생산kg)

※ 자료출처: 통계청

Page 19: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

4. 데이터 분석 사례주변 기상관측소 기준으로 평균 기온과 강수량 산정

“ 양파주산지를중심으로삼각점에있는관측소의평균기온과강수량을산정했습니다. ”

1. 주산지 주변 기상관측소※ 자료출처: 기상청

2. 무안/ 목포/ 광주 평균 기온(℃)

3. 무안/ 목포/ 광주 평균 강수량(mm)

관측월 2006년 2007년 2009년 2012년 2013년

11월 11.4 11.4 10.7 12.8 9.2

12월 1.1 4.7 5.3 3.5 1.9

1월 2.8 3.0 2.1 1.3 1.3

2월 2.3 5.6 5.3 0.9 2.4

3월 6.5 7.7 7.2 5.8 6.6

4월 10.9 11.6 12.3 12.1 10.5

5월 16.6 17.6 17.7 18.1 17.0

6월 20.9 21.2 21.3 22.0 22.0

관측월 2006년 2007년 2009년 2012년 2013년

11월 45.9 40.1 37.7 122.8 57.0

12월 51.6 34.8 13.4 21.5 80.3

1월 18.4 8.9 27.6 14.2 26.0

2월 36.9 76.4 52.2 24.1 46.8

3월 21.5 96.3 44.1 120.4 66.2

4월 103.9 32.4 45.2 111.9 46.0

5월 200.7 129.3 109.9 34.4 122.0

6월 190.8 47.5 135.6 65.1 83.7

광주무안

목포

Page 20: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

4. 데이터 분석 사례평균기온 변화로 본 양파 생산량과 기온의 상관관계

“ 분석결과양파생산량은월동기인12월과2월의평균기온이영상3도이하인경우영향을받습니다. ”

0.0

5.0

10.0

15.0

20.0

25.0

11월 12월 1월 2월 3월 4월 5월 6월

기온과 양파수확량 관계

2006년 2007년 2009년 2012년 2013년

Page 21: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

4. 데이터 분석 사례평균강수량 변화로 본 양파 생산량과 강수량의 상관관계

“ 또한, 2월~ 3월의가뭄과, 5월~6월에강수량이양파생산량에영향을줍니다. ”

0.0

50.0

100.0

150.0

200.0

250.0

11월 12월 1월 2월 3월 4월 5월 6월

강수량과 양파생산량 관계

2006년 2007년 2009년 2012년 2013년

Page 22: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

4. 데이터 분석 사례양파&날씨 데이터 분석 기반의 개선방안 도출

월동기간중평균기온을유지할수있도록보온처리를하고재배지에관수시설및배수로를갖춰

단위면적당양파생산량변동폭을최소화할수있습니다!

1.월동보온처리

2. 관수시설설치

3. 배수로작업

Page 23: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

데이터로더좋은세상을만드는사람들-비투엔

5. 맺음말IoT 데이터에서 고가치 정보를 캐내고 싶다면?

재료의 품질 데이터의 품질

Page 24: 사례로보는사물인터넷 (IoT) 데이터품질관리...데이터로더좋은세상을만드는사람들-비투엔 iot 데이터품질관리–관리데이터진단 3. iot 데이터품질관리

감사합니다!

B2EN becomes a main role player to make KOREA the best practice in Database as the first class Database

Solution provider and grows up with ensuring the realistic solutions for such problems of customers

본내용은저작권자나비투엔의승인없이본문의일부또는전부를무단으로복제하거나다른매체에기록할수없습니다