Nombre:
Science_News_Scrapy
Santiagonk/Science_News_Scrapy
Descripción:
Este es un Scrapper, que tiene como objetivo extraer información de paginas de noticias de ciencia:
https://www.howstuffworks.com
https://www.muyinteresante.es
https://www.nature.com
https://noticiasdelaciencia.com
https://www.sciencenews.org
Se extraen las noticias, actuales en cada pagina, accediendo a las diferentes categorías.
Habilidades adquiridas
- Manejo de la librería Scrapy, para extracción de datos.
- Manejo de pipelines con Scrapy, permitan guardar la información en una base de datos.
- Implementación de Spider en Cloud.
- Conocimiento teórico en la integración del Scrapper y una aplicación con Django.
- Aplicación de una API sencilla con Flask, y su despliegue en Heroku.
Links de Deploy
Los Spiders se pueden, ejecutar y consumir en (es necesario crear cuenta):