departamento nacional de planeación€¦ · política de explotación de datos: big data abril...

22
Departamento Nacional de Planeación www.dnp.gov.co

Upload: others

Post on 25-Jul-2020

11 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Departamento Nacional de Planeaciónwww.dnp.gov.co

Page 2: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Abril, 2018dnp.gov.co

Luis Fernando MejíaDirector General DNP

@LuisFerMejia

César Pabón CamachoCoordinador Mejora RegulatoriaDepartamento Nacional de Planeación

Page 3: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

@LuisFerMejia

AGENDA - Abril, 2018

1. MARCO DE LA

POLÍTICA DE

EXPLOTACIÓN DE

DATOS

BIG-DATA

César Augusto PabonCoordinador Mejora Regulatoria

Departamento Nacional de

Planeación

Page 4: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

“Datificación”: transformación del mundo en datosprocesables y cuantificablesLa “datificación” representa una oportunidad para generar mayor información y conocimiento, que se traduce en mayor valor social y económico para el país.

Fuente: IBM, *OCDE 2015. Internet Live Stats

241 mil millonestweets

2,2 billonesvideos vistos

25 mil millonesfotos subidas

1,9 billonesbúsquedas

89 mil millonesllamadas

32,2 millonespáginas

hackeadas

84,4 billonescorreos enviados

2017

0

50100

150

200

2010

2011

2012

2013

2014

2015

2016

2017

2018

2019

2020

2021

2022

2023

2024

2025Billo

nes

de g

igab

ytes

Crecimiento de datos en el mundo

Otros no estructuradosProductividad(estructurados)Imágenes/videoEntretenimiento

Page 5: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Política de explotación de datos: liderazgo regionalColombia será el primer país en América Latina y el octavo en el mundo en adoptar una política nacional de explotación de datos

* En otros países se hace referencia al uso de datos como parte de otras políticas, pero no son una política autónoma e integral.

Las políticas de explotación de datos buscan proveer condiciones habilitantes para lograr la generación de valor social y económico

2012 2013 2014 2015 2016 2017

La Comisión Europea emitió una comunicación al Parlamento Europeo para que sea adoptada por sus países miembros (COM 2014 442).

Page 6: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Explotación de datos con Big Data tiene impactos económicos positivosEn 2020, Big Data representará el 2,5% del PIB de la Unión Europea

Fuente: Comisión Europea (2017). *2020 estimado

Aporte al PIB de la Unión Europea

2,5 %2020

1,6 %2016

Ingresos empresas que ofrecen bienes y servicios basados en datos

10,4 %Valor agregado

(investigación e innovación)

7,5 %

Empleos especializados en uso de datos

6 %Empresas intensivas

en uso de datos

2,4 %

Tasa de crecimiento anual constante (2016-2020)

Page 7: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

La explotación de datos es el aprovechamiento de los mismos para generar valor social y económicoLa política aborda cuatro ejes estructurales

I. Datos digitales(insumos) III. Capital humano para la

explotación de datos(oferta)

II. Cultura de datos(demanda)

Valor social y económico(producto)

IV. Marco jurídico, ético e institucional

Page 8: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

@LuisFerMejia

AGENDA - Abril, 2018

2. APLICACIÓN DE LA

EXPLOTACIÓN DE

DATOS BIG-DATA EN LA

POLÍTICA DE MEJORA

REGULATORIA

César Augusto PabonCoordinador Mejora Regulatoria

Departamento Nacional de

Planeación

Page 9: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Problema: Falta de información sobre el inventario regulatorio en Colombia

Se requiere un inventario normativo unificado y sistematizado para la identificación del riesgo de inflación regulatoria

“El Gobierno de Colombia no hace uso sistemático de revisiones del inventarioregulatorio. No hay una base de datos única que contenga todo el acervo regulatorio,información sobre el avance de iniciativas legislativas o regulatorias, y un listado de lasenmiendas propuestas….. Dado que no se ha puesto en marcha un sistema de evaluaciónregulatoria ex ante como requisito para toda la administración pública, existe el riesgo deque haya inflación regulatoria y la necesidad de sistematizar y simplificar el acervo deregulaciones”.

OECD (2014), OECD Study on Regulatory Policy in Colombia: Beyond Administrative Simplification, OECDPublishing.

Page 10: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Fase 1: Big-data inventario normativo en ColombiaSe consolidó y estandarizó la información contenida en los resúmenes del Diario Oficial de la Imprenta Nacional de Colombia.

1.1 Recolección de la informaciónA través de un proceso

de Web-scraping se

extrajo la información

disponible de los

resúmenes de los Diarios

Oficiales de la Imprenta

Nacional

Page 11: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Page 12: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

¿Qué conocemos de la Regulación en Colombia?Piloto de Big Data regulatorio con base en información publicada en el Diario Oficial

PROCESO

Recolección de información

A través de un proceso de Web-Scraping se extrajo la

información disponible de los Diarios Oficiales de la Imprenta

Nacional.

Identificación de patrones

A través de un proceso de Data-mining se permite

explorar la base de datos con el objetivo de encontrar

patrones repetitivos, tendencias o reglas.

EstandarizaciónSe asoció la información de los diarios con las instituciones del orden nacional disponibles en el Sistema de Información y Gestión del Empleo Público

(SIGEP).

Base de datosPermite realizar

diferentes categorizaciones de la

información para la Rama Ejecutiva del orden

Nacional.

RESULTADOOfrece:• Información disponible desde el 2000• Datos con diferentes frecuencias: anuales,

mensuales, semanales e incluso diarias.• Categorizarlos• Restringir los datos geográficamente• Actualización tiempo real

Base de datosRama Ejecutiva Nacional (2000-2016)

94.748 observaciones (actos administrativos)4 clasificaciones de la información

25 Sectores administrativos

Sustancial No

Sustancial

21 tipos de normatividad

emitida

23 clases de naturaleza jurídica para instituciones

Page 13: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Tipo de normatividadEl 73% de la normatividad emitida los últimos años ha estado concentrado en resoluciones

Fuente: DNP con base en Diarios Oficiales de la Imprenta Nacional

Clasificación por tipo de normatividad 2000 - 2016

17.168

68.698

2.376 2.057 4.449 -

10.000

20.000

30.000

40.000

50.000

60.000

70.000

80.000

Decreto Resolución Circular Acuerdo Otros

Can

tidad

de

norm

ativ

idad

em

itida

Total Rama Ejecutiva: 94.748

Entre 2000 y 2016, los reguladores nacionales emitieron diariamente:

2,8 decretos11,2 resoluciones

0,3 circulares15,4 normatividades

Page 14: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Fase 1: Big-data inventario normativo en Colombia1.4 Consolidación base de datos

Page 15: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Fase 2: Big-data inventario normativo en Colombia

2.1 Recolección de la informaciónA través de un proceso de Web-scraping se extrajo la información disponible de los

PDF de los Diarios Oficiales de la Imprenta Nacional y se procesó el texto a través de un

Optical Character Recognition (OCR)

OCR

Page 16: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Fase 2: Big-data inventario normativo en Colombia

2.2 Estandarización de la informaciónDentro de cada PDF se identificó y se separó la información por cada acto

administrativo en particular. Con más información disponible, el proceso de

estandarización de la información con las entidades del SIGEP se refuerza

2.3 Herramienta de análisis y consulta

El análisis ex-ante del acervonormativo es la principal basepara el desarrollo de la MejoraRegulatoria como una políticabasada en evidencia.

Análisis Consulta

La herramienta garantizará la

transparencia y libre acceso a la

información a toda la población.

Page 17: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Fase 2: Big-data inventario normativo en Colombia2.3 Herramienta de análisis y consulta

BuscadorSe puede acceder a la página del Diario Oficial o consultar el texto procesado

Page 18: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Fase 2: Big-data inventario normativo en Colombia2.3 Herramienta de análisis y consultaEstadísticasSe cuenta con información disponible de resúmenes desde 1936 y de PDFs desde el

año 2000. Se presentan las estadísticas totales o relacionadas a búsquedas particulares

que el usuario puede realizar

-

2.000

4.000

6.000

8.000

10.000

12.000

14.000

16.000

18.000

20.000

193

9

194

1

194

3

194

5

194

7

194

9

195

1

195

3

195

5

195

7

195

9

196

1

196

3

196

5

196

7

196

9

197

1

197

3

197

5

197

7

197

9

198

1

198

3

198

6

199

7

200

0

200

2

200

4

200

6

200

8

201

0

201

2

201

4

201

6

201

8

Resolución Decreto Aviso Edicto

Auto Acuerdo Circular Otros

Fuente: Diario Oficial

Page 19: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

@LuisFerMejia

AGENDA - Abril, 2018

3. RETOS EN LA

APLICACIÓN DE

BIG-DATA EN LA

POLÍTICA DE

MEJORA

REGULATORIA César Augusto PabonCoordinador Mejora Regulatoria

Departamento Nacional de

Planeación

Page 20: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Proyecto Big-data: Inventario normativo en ColombiaA través de metodologías de big-data y desarrollos de web, se ha desarrollado una herramienta para la sistematización, análisis y consulta del inventario normativo en Colombia.

DNP Diario Oficial

Actos administrativos

Tablero interactivo

transparencia y libre acceso a la

información a toda la

población

Diagnósticos sectorialesBuscadorPalabras claves

Filtros+25

799.29

Orden nacional y

territorial

Datos desde

1939-2018

Page 21: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

SUCOP: sistema de actores, lineamientos y herramientas

1

2

3

4

5

6

Respaldo jurídico: el decreto de obligatoriedad de uso del AIN y del SUCOP esta en desarrollo de nuevas normas

Cultura: de participación y colaboración entre los funcionarios públicos, las entidades, y los ciudadanos

Aprendizaje: creación de curso virtual y materiales para capacitación en el AIN y la plataforma.

Infraestructura tecnológica:además del soporte y

mantenimiento, apoyar la interoperabilidad con otros

sistemas

Datos abiertos que alienten nuevos desarrollos públicos y

privados: i.e. dashboard de datos de regulación

Innovación: se debe tener una mejora continua de la

experiencia del ciudadano.

Sistema Único de Consulta

Pública.

Page 22: Departamento Nacional de Planeación€¦ · Política de Explotación de Datos: Big Data Abril 2018 “Datificación”: transformación del mundo en datos procesables y cuantificables

Política de Explotación de Datos: Big DataAbril 2018

Información a nivelsubnacional

Consolidar un tablerovirtual abierto a toda la

ciudadanía

Expandir el análisisa contenidos

específicos de la normatividad

Replicar el Proyecto a otras fuentes de

información disponibles

• PDF

• Fácil visualización• Abierto al público

• SUIN

• Alcaldías• Gobernaciones• Secretarías

¿En qué más debemos avanzar?¿Que viene luego del 2018?