¿Por qué aprender web scraping hoy?

Clase 2 de 21 • Curso de Fundamentos de Web Scraping con Python y Xpath

Juan Manuel Arango Cuadros

student•

He trabajado en Upwork por dos años como ingreso extra, lo recomiendo totalmente como un ingreso extra, no como un trabajo de tiempo completo. Es verdad que pueden ganar muy bien pero pagando seguridad social les quietaría una gran parte. Empiecen cobrando 3 dolares la hora y con experiencia en la pagina podrían cobrar 10 o mucho más dependiendo en lo que se dediquen.

Alexis Leonel Altamirano Barrera

student•

Buena data! Estuve viendo tal página. En qué área trabajaste? Quiero dedicarme al data science de manera freelance porque tengo mi otro empleo. Te agradecería la información. Saludos!

David Amador Morales

student•

Gracias por el consejo, Juan Manuel.

Gisell Alexandra Arango Jaramillo

student•

Nota: Python es el lenguaje que tiene la comunidad más grande para implementar web scraping.

Moisés Manuel Morín Hevia

student•

Somos unos hackers xD

Alejandro Giraldo Londoño

student•

RESUMEN

■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■

Las agencias de seguridad, aplicaciones que comparan precios más baratos entre hoteles, apliaciones de ecommerce que comparan precios entre diferentes competidores usan web scraping. Las agencias de marketing para analziar el contenido de tweets que se vuelven virales. En general el web scraping es una habilidad muy valiosa para cuando no tienes acceso a una API.

Es posible realizar web scraping con diferentes lenguajes de programación, como R o Js ( y sus respectivas librerías) sin embargo Py es por excelencia el lenguaje de programación para esta tarea. Cuenta con la comunidad más grande para implementarlo.

Héctor Soto Huamaní

student•

Gracias, capo.

Jeinfferson Bernal G

student•

Gracias!

JUAN SEBASTIAN ZAPATA AVENDAÑO

student•

El web scraping lo utilizan agencias de seguridad, empresas de comercio electrónico, marketing digital y reclutadores.

Moisés Manuel Morín Hevia

student•

Yo lo usare para mi agencia de seguros.

Cesar Hernández Ramírez

student•

@Moises me dió curiosidad tu caso, ¿cómo fue que implementaste web scrapping para una agencia de seguros, qué te facilitó?

José Manuel Piña Rodríguez

student•

Facundo transmite demasiada motivacion en cada capitulo.

Juan R. Vergara M.

student•

Así es, llevo tomados 5 cursos con el y transmite mucha confianza y seguridad en lo que hace 🥇

Jorge David Duque Agudelo

student•

Genial, la posibilidades de encontrar un nicho de datos para trabajar son inmensas.

Moisés Manuel Morín Hevia

student•

Demasiadas, venga ! con todo.

Juan R. Vergara M.

student•

Las posibilidades se hace infinitas 😎

Alejandro Giraldo Londoño

student•

RESUMEN ■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■■

Es posible realizar web scraping con diferentes lenguajes de programación, como R o Js ( y sus respectivas librerías) sin embargo Py es por excelencia el lenguaje de programación para esta tarea. Cuenta con la comunidad más grande para implementarlo.

Luis Mojica

teacher•

[2:28] Por favor compartan aquí sus experiencias con workana y upwork.

Gabriel Salvador

student•

NO.

Luis Mojica

teacher•

@gabriel-salvador estás triunfando!

Alex Sierra Rodriguez

student•

Super bien! Sospechaba que plataformas como Trivago lo hacía así, pero también pensaba que tenían algún tipo de acceso por API a los precios de los Hoteles

Jorge David Duque Agudelo

student•

Yo igual pensaba lo mismo, la aplicabilidad del scraping lo veía más para temas e-commerce.

Israel Yance

student•

Muchas empresas no son de compartir sus APIs, así que el scraping es la mejor opción.

Moisés Manuel Morín Hevia

student•

Por qué todavía no somos millonarios ? xD Vamos a impulsar América Latina mis hermosos colegas !

Facundo Nicolás García Martoni

teacher•

Esa es la actitud!! ;)

Jean Franco Cadillo Carranza

student•

Go!

Carlos Britto Cañas

student•

Genial me ha gustado mucho el tema de web scraping, y ahora con el profe facundo si que mas, muy bien platzi!

Juan de Dios Marcos Gomez

student•

Las agencias de inteligencias del mundo como la CIA o la NASA hacen para seguirte el paso cada dìa , utilizan el web scrapìng, aplicaciones para hacer comparaciones, sobre precios, sobre información, También es utilizando por las empresas de e-comerce como amazon, ebuy, mercado libre, etc, para comparar precios del mercado. Los reclutadores en el mundo utilizan esta técnica para verlos perfiles mas adecuado para contratarlos. El web scraping se utilizan para analizar contenidos en tweets, palabras que hacen que los twets sean virales o trending tipic. Es una habilidad básica que se utiliza cuando no se tiene una API publica para consumir.

Carlos Javier Guevara Contreras

student•

Interesante y Facundo Excelente Instructor

Ernesto Jose Gabriel Lopez Bravo

student•

Un blog interesante sobre web scrapping y las implicaciones de seguridad que puede tener: https://www.antevenio.com/blog/2019/03/que-es-el-web-scraping-y-para-que-sirve/

Uno de los que me pareció más interesantes fue el uso del archivo .htaccess para defendernos contra el web scrapping malicioso.

Wilson Delgado

student•

Gracias, me parece también muy interesante ver la perspectiva e implicaciones ilegales o su mal uso que podría traer, ejemplo extraer datos sin permiso de los propietarios. Bueno sería Por ejemplo que los robots legítimos se identifican en el encabezado http, repestan el archivo robot.txt

Maslov Viloria

student•

Se busca:

Automatización de precios. Web scrapping + Bases de datos

Necesito desarrollar un módulo que descargue automaticamente las bases de datos de precios de proveedores de internet y las transforme en las requeridas para ser cargados en otro sistema. Preferentemente en python, con manejo de SQL.

Juan Fernando Moyano Ramírez

student•

Hola a todos, os dejo mis apuntes de esta clase, sin embargo, he creado un respositorio en github donde estan todos los apuntes de este curso: https://github.com/fer2002743/web-scraping

<h2>¿Por qué aprender web scraping hoy?</h2>

El web scraping es utilizado por todo tipo de instituciones, desde agencias de inteligencia para seguirnos el paso hasta tiendas online para recolectar informacion de sus competidores y de esta manera tomar las mejores decisiones. Es por ello que dominar esta tecnica es de gran relevancia para poder conseguir empleo en estas instituciones que usan web scraping. Ademas de esto, hay gran demanda de freelance web scrapers en todo el mundo