Resumen del curso

Procesamiento de datos en Shell

Susan Sun

Data Person

Descarga de datos en la línea de comandos

• Cómo descargar archivos con curl y wget
• Documentación y manuales (p. ej., man curl, wget --help)
• Descarga múltiple (p. ej., wget --limit-rate=200k -i url_list.txt)

Procesamiento de datos en la línea de comandos

• Introducción a csvkit (herramientas de datos en CLI)
• Convertir a CSV con in2csv
• Vista previa con csvlook, csvstat
• Filtrar con csvcut, csvgrep
• Unir varios archivos con csvstack

Manejo de bases de datos en la línea de comandos

• Manejo de bases de datos con sql2csv, csvsql
• Comandos ETL tipo SQL avanzados con csvkit

Creación de pipelines de datos en la línea de comandos

• Ejecutar Python en la línea de comandos
• Gestión de paquetes con pip
• Automatizar modelos y pipelines con cron

¡Gracias! ¡Hasta pronto!

Procesamiento de datos en Shell