tech talk live - itprosdc - big data con july
TRANSCRIPT
BIG DATA CON JULY
MI VISIÓN DE LA HISTORIA
Julián Castiblanco P.
http://www.azurecloud.la/
co.linkedin.com/juliancastiblancop
@jcastiblancop
Database Consultant- Synergy TPCMVP Data PlatformMiembro de PASS ITPros-DC Chapter
Generando la arquitectura para lograr los 5 nueves
15 de Junio (12 pm GMT -5)Jesús Gil
Resumen:
99.999 que significa?Cual es la arquitectura para logar estos números?Acompáñame en esta charla y aprende las características que tiene Microsoft SQL Server para apoyarnos en la alta disponibilidad.
Está por comenzar:
Moderador: Jose Luis Rivera
Próximos Eventos
Quiero aprender T-SQL22 de Junio
José Ahias Lopez
•Propósito
• Presentar mi punto de vista de la tendencia tecnológica hacía Big Data, inteligencia de negocios, Ciencia de datos.•Revisar algunas de las tecnología disponibles para hablar de este concepto
Realmente su organización toma decisiones basadas en los datos. Como estar seguros que son los datos correctos los que está analizando?
7
INNOVACIÓN TECNOLÓGIA
Tomado de la conferencia de Innovación. U. Externado de Colombia. Alejandro Boada 2016
8
INNOVACIÓN TECNOLÓGIA
Tomado de la conferencia de Innovación .U. Externado de Colombia. Alejandro Boada 2016
9
INNOVACIÓN TECNOLÓGIANuestro cerebro sólo puede innovar sobre las cosas que conoce, si no conocemos el fondo de las tecnologías, cómo podemos elegir las que realmente funcionarían en nuestra organización
Tomado de la conferencia de Innovación. U. Externado de Colombia. Alejandro Boada 2016
http://emergetech.com/wp-content/uploads/2015/04/bigdcropped3-820x400.png
http://www.nissigroup.com.ar/sites/default/files/images/content/software-development.jpg
VELOCIDAD
Con Infraestructura, dispositivos de estado sólido Con bases de datos NoSQLCon bases y/o tablas basadas en memoriaCambiar la estrategia de HW por SW
VARIEDAD Todos los orígenes de datos corporativos Arquitectura de información
http://emergetech.com/wp-content/uploads/2015/04/bigdcropped3-820x400.pnghttp://download.microsoft.com/download/5/0/1/5015a62e-06bf-4dec-b90a-37d52e279de5/sql_server_2012_parallel_data_warehouse_breakthrough_platform_white_paper.pdf
VOLUMEN
Los problemas los podemos resolverCon Fierros!!!
http://www.elespectador.com/files/imagecache/560_width_display/imagenprincipal/cc76967d813403f9a2a848415c0e6d24.jpg
VOLUMEN
Los problemas los podemos resolvercon talento!!!
VOLUMEN
Algunas veces necesitaremos ambos!!!
http://acom.azurecomcdn.net/80C57D/blogmedia/blogmedia/2015/07/09/image1.png
https://azure.microsoft.com/en-us/documentation/infographics/
http://image.slidesharecdn.com/dac4b-2015-polybase-151209131732-lva1-app6892/95/dac4b-2015-polybase-14-638.jpg?cb=1449667146
QUÉ ES INCREIBLE EN SQL SERVER 2016!!!
ALGUNAS APLICACIONES DE BIG DATA
https://courses.edx.org/courses/course-v1:Microsoft+DAT202.1x+3T2015/info
23
Prácticas
BPM TOGAF MDMINFORMATIO
N AS A SERVICE
DATA QUALITY
MANAGEMENT
24
Data Virtualization• Power BI• QlikSense• Tableu• Kabana
BI Self-Service
• Creado en 1996• Primer producto
basado en memoriaQlikView
25
Business Analytics• Regresión• Segmentación• Clasificación
Minería de datos
• Redes neuronales• Algoritmos
personalizados• Elastic net
Aprendizaje de
máquina
26
AlmacenamientoRelacional• DBMS: sql server,
Oracle,mysql• DWH• EDF (Enterprise data
Factory)• Qlikview
Dimensional• Data Mart• DWH
Multidimensional• OLAP• ROLAP• MOLAP
In-Memory/Caché files Data Lake Hadoop
27
Gestión de Proyectos• CRISP• KimballCascada
• Qlik Project Methodology
• Scrum for BIAgiles
Bill Inmon
Ralph Kimball
Bodegas de datos Corporativas
Inmon Model
Enterprise Data Factory Data Marts
Soy científico de datos y …
Lo quiero todo para mí!!!
https://channel9.msdn.com/Series/AzureDataLake
Si piensa en un “datamart” como una botella de agua, limpia, empacada y estructurada para su fácil consumo. Piense en “Data lake” como la masa de agua en su esta natural, con varios usuarios que vienen a examinarla, sumergirse y tomar muestras”.
James Dixon, CTO de Pentaho.
U-SQL
Donde empezar• https://azure.microsoft.com/en-us/documentation/articles/data-lake-analytics-
overview/
• https://courses.edx.org/courses/course-v1:Microsoft+DAT202.1x+3T2015/info• https://channel9.msdn.com/Series/AzureDataLake• https://voltdb.com/• http://www.business-insight.com/html/products/TIMi.html• https://msdn.microsoft.com/en-us/library/mt604845.aspx
•GRUPOS DE ESTUDIO ITPROS-DC 2016