3er Meetup - AWS User Group Dominicana

Data Lakes en AWS

Transcript

1. Data Lakes en AWS Víctor Pérez Pereira AWS User Group Dominicana @vperezpereira Santo Domingo, 2 de mayo 2020
2. Agenda • Que es un Data Lakes • Escenarios y casos de uso • Servicios en AWS • Revisando la consola un esquema existente • Mitos y Consejos Objetivo Obtener un BREVE conocimiento de las opciones disponibles en AWS para crear nuestro Data Lakes.
3. Que es un Data Lake • Data Lake te permite almacenar toda tu información estructurada y no estructurada de manera centralizada.
4. Diferencias entre un almacén de datos y un lago de datos
9. Componentes de Servicios Varios servicios disponibles en AWS permiten crear un Data Lake, inclusive: hibrido 1. OnPremise to AWS 2. XCloud to AWS 3. AWS to AWS 4. Y viceversa AWS Lake Formation Cree un lago de datos seguro en cuestión de días AWS Database Migration Service Migre y/o replique sus bases de datos a AWS con un tiempo de inactividad mínimo Amazon Athena Comience a consultar datos al instante. Amazon S3 Almacenamiento de objetos.
10. Componentes y servicios en AWS – Data Lake Amazon Kinesis Recopile, procese y analice transmisiones de datos y videos en tiempo real Amazon Redshift El almacén de datos en la nube más popular y más rápido AWS Glue Proceso de ETL sencillo, flexible y rentable Amazon Relational Database Service (RDS) Configure, use y escale una base de datos relacional en la nube con tan solo unos clics.
11. Componentes y servicios en AWS – Data Lake Hay más servicios de AWS poder construir mi Data Lake? Si, pero dependerá de los casos actuales de una empresa • Si tienes una base de datos NoSQL (Cassandra, DynamoDB, MongoDB, etc). • Si tengo implementaciones de Big Data o de datos (Amazon EMR, Cloudera, Informática, etc). • Software de ETL y BI (PowerBI, Tableu, SAP, Oracle, Informática, etc.)
12. A la consola
13. Mitos 1. Para tener un lago de datos necesito invertir mucho dinero por que también necesito hacer Big Data. 2. Si tengo un esquema conocido de BI o Data Warehouse no puedo migrarlo. 3. Tengo que ser un Gurú en el manejo de datos o DBA para crear un Data Lake. 4. Si tengo mi infraestructura hibrida estaré más expuesto a que mis datos se filtren. 5. Si quisiera hacer reportes solo puedo usar Amazon QuickSight y yo tengo PowerBI, Tableu, Qlik.
14. Consejos 1. No cree la rueda, enfóquese en saber para que requiere crear un Data Lake y cual es el valor del mismo. 2. Empiece por algo sencillo pero funcional. 3. Considere involucrar al departamento de seguridad de su organización. 4. Existe Ley de protección de datos personales en su País?, valide y justifique la manipulación del mismo para evitar multas. 5. Realice un estimado de presupuesto así evita gastos no contemplados. 6. Capacítese, existen laboratorios y cursos disponible. https://www.atlas.aws/
15. Gracias, totales! Víctor Pérez Pereira AWS User Group Dominicana @vperezpereira https://www.meetup.com/es/AWSUserGroupDominicana/