Estuvo bueno el curso, aunque sigo pensando que fue muy basico para lo que nos podria aportar scrapy, pienso que deberian sacar uno “avanzado” y mas completo
Scrapy: el framework estrella
Qué aprenderás sobre el framework Scrapy
El framework asíncrono: Scrapy
Instalación de Scrapy en Mac OS
Instalación de Scrapy en Linux
Instalación de Scrapy en Windows
Nuestro primer Hello World
Recordando generadores e iteradores
Trabajando con Scrapy
Scrapy Shell
Nuestro primer proyecto: estructura de carpetas
Spiders
Usando XPath para extraer datos
Guardando los datos
Seguir links: response.follow
Múltiples callbacks
Pasando argumentos a nuestro spider
Configuraciones útiles
Proyecto: Platzi Intelligence Agency
Platzi Intelligence Agency
Inicializando el repositorio local
Utilizando XPath en el sitio de la CIA
Spider: CIA
Finalizando la creación del spider
Creando el frontend de nuestra aplicación
Deploy a GitHub Pages
Deploy en Scrapy Cloud
Bonus: automatizar procesos con la API
Conclusiones
Evitar meterse en problemas
El siguiente paso en tu camino
No tienes acceso a esta clase
¡Continúa aprendiendo! Únete y comienza a potenciar tu carrera
Aportes 28
Preguntas 5
Estuvo bueno el curso, aunque sigo pensando que fue muy basico para lo que nos podria aportar scrapy, pienso que deberian sacar uno “avanzado” y mas completo
Like si quieres un Curso de Scrappy Avanzado 🤭
yo estoy trabajando en un proyecto grande de scrapy y selenium, podriamos crear un grupo si quieren compartir codigos de proyectos y ayudarnos, podriamos hacerlo en slack, o discord, respondan a este post si estan de acuerdo y si somos mas de 5 , creamos el grupo.
De nuevo lo repito, con Facundo, de los mejores cursos que he tomado.
Me gustaría un curso un poco más avanzado de scrapy donde presentes el sistema de Items de scrapy y si se puede integrar con Selenium o otra de esas librerías que simulen js en el navegador!
Muy buen curso facundo. Me gustaría una versión 2.0 del mismo. Scrapy tiene muchas funcionalidades interesantes que estaría bueno aprender a usar.
Se requiere un curso de scrapy mas avanzado para poder ocultar ip
muchas gracias por el curso excelente!, como proyecto, quiero tomar datos de una pagina que me pide loggearme con google pero no he podido y no encuentro informacion para poder loggearme y luego si acceder a los datos como lo aprendimos en este curso.
Gracias por el curso, gracias a esto pude ayudar al equipo comercial!! increiblemente versatil esta herramienta
Grande Facu! muy buen curso
Hay algo que creo no mencionaron en el curso y es lo que ve scrapy. Con scrapy view “url” pueden revisar como scrapy está viendo la pagina web para que puedan hacer su xpath de forma mas acertada. Fue muy frustrante porque en una búsqueda por consola no me salía igual a lo que deseaba ver y con el “view” de scrapy me dí cuenta que en realidad scrapy no veía esa parte del codigo.
Saludos,
buen curso…
Como respuesta al desafío, he dejado en la zona de “tutoriales de estudiante” un mini manual de enmascaramiento de requests con servidores proxy para scrapy, por si a alguien le interesa.
Excelente curso
Excelente curso. Facundo gran profesor.
El curso es muy bueno, no es muy basico , esta cool, pero es cierto que falto tocar los middlewares y pipeline para guardar los datos en el database, y unir scrapy y selenium para sitios web dinamicos.
Excelente curso
Muy buen curso, aprendi hacer scrapy pero no lo puedo aplicar a la lo que requiero ya que las web que quiero scrapear tienen el robot bloqueado para scrapear.
Les dejo mi aporte
En este ejemplo extraigo los ticker symbols de las acciones que se muestran en una página
Para esto uso Scrapy y Selenium combinados porque si no no puedo extraer todos, solo los primeros 500
Con esto extraigo los miles que hay
Les dejo el repositorio
No lo publico aún porque aún voy a extraer todos los estados financieros de los mismos. Entonces ahí los publicaré
Al final quiero obtener el Fair Value de acciones
El potencial incumplimiento de la normativa en protección de datos y la vulneración de los derechos de los titulares de los datos personales objeto de scraping, ya que debemos recordar que la Ley Orgánica 15/1999, de 13 de diciembre de Protección de Datos de Carácter Personal (en adelante, LOPD), exige que se cuente con el consentimiento del titular de los datos a la hora de proceder al almacenamiento y tratamiento de los mismos, debiendo, por otra parte, estar este informado de las finalidades del mencionado tratamiento, ya que en caso contrario nos enfrentaríamos a una sanción grave en los términos establecidos por el artículo 44.3, apartado b, de la LOPD.
Excelente curso.
⭐️
Excelente curso profe Facundo!!!
Facundo: crea tu propio proyecto y súbelo, estaré pendiente
yo: ¿en donde estará guardada la pagina de la KGB?
Hace falta algo más avanzado, quedé con gusto a poco
buen curso
Genial el curso! Muchas gracias, Facundo! … Ojalá como lo sugieren los demás compañeros puedan hacer otro curso avanzado de Scrapy y una ruta especializada en Web Scraping! Este tema es apasionante!!! ❤️ ❤️ ❤️
¿Quieres ver más aportes, preguntas y respuestas de la comunidad?
o inicia sesión.