Description :
Practice your Python Pandas data science skills with problems on StrataScratch! https://www.stratascratch.com/?via=keith In this video we walk through web scraping in Python using the beautiful soup library. We start with a brief introduction to HTML & CSS and discuss what web scraping is. Next we start getting into the basics of the beautiful soup library. This includes how to load a webpage, the basic commands you need to know such as find & find_all, grabbing strings from an HTML elements, etc. The final section of this tutorial is a series of exercises where you can practice your skills. In this section we scrape a webpage for links, we learn how to scrape a table and load it into a pandas dataframe, and we see how you can scrape & download a web image. Hope you enjoy! I’m looking into making future videos on more complex things you can do with web scraping as well as other libraries that are helpful such as Selenium & ScraPy. Subscribe to not miss those. Join the Python Army to get access to perks! YouTube - https://www.youtube.com/channel/UCq6XkhO5SZ66N04IcPbqNcw/join Patreon - https://www.patreon.com/keithgalli --------------------- Resources used in this video Simple webpage: https://keithgalli.github.io/web-scraping/example.html Example webpage: https://keithgalli.github.io/web-scraping/webpage.html Link to source code: https://github.com/KeithGalli/web-scraping Beautiful Soup Documentation: https://www.crummy.com/software/BeautifulSoup/bs4/doc/ CSS Selector Reference: https://www.w3schools.com/cssref/css_selectors.php --------------------- Learn more about HTML/CSS @Traversy Media HTML Crash Course: https://www.youtube.com/watch?v=UB1O30fR-EE @Traversy Media CSS Crash Course: https://www.youtube.com/watch?v=yfoY53QXEnI Codecademy: https://www.codecademy.com/catalog/language/html-css --------------------- Video timeline! 0:00 - Intro & Video Overview 1:09 - What is web scraping? 3:51 - Introduction to HTML Using the beautiful soup library (5:29) 6:31 - Loading in a webpage (requests library) 8:21 - Starting to scrape 9:18 - find & find_all methods 16:00 - Finding specific text/strings in our HTML (regex) 18:38 - Select method (CSS path selections) 25:55 - Grabbing the string/text from an HTML element 28:17 - Getting a property of HTML element (href, src, id, class, etc) 29:41 - Code navigation (parents, children, siblings) Let’s practice our skills! (33:57) 35:53 - Exercise #1: Grab all social links on webpage in 3 different ways 42:09 - Exercise #2: Scrape an HTML table into a Pandas Dataframe 53:09 - Exercise #3: Grab all fun facts that contain the word “is” 57:59 - Exercise #4: Use beautiful soup to help download an image from a webpage 1:04:20 - Exercise #5: Solve the mystery challenge!!! --------------------- Follow me on social media! Instagram | https://www.facebook.com/unsupportedbrowser Twitter | https://twitter.com/keithgalli --------------------- If you are curious to learn how I make my tutorials, check out this video: https://www.youtube.com/watch?v=LEO4igyXbLs *I use affiliate links on the products that I recommend. I may earn a purchase commission or a referral bonus from the usage of these links.
Préparation des options de chargement
Le site web http://unidownloader.com/ est le meilleur moyen de télécharger une vidéo ou une piste audio séparée si vous souhaitez éviter d'installer des programmes et des extensions.
L'extension UDL Helper est un bouton pratique qui s'intègre parfaitement aux sites YouTube, Instagram et OK.ru pour un téléchargement rapide du contenu.
Le programme UDL Client (pour Windows) est la solution la plus puissante qui supporte plus de 900 sites web, réseaux sociaux et sites d'hébergement vidéo, ainsi que toute qualité vidéo disponible dans la source.
UDL Lite est un moyen très pratique d'accéder à un site web depuis votre appareil mobile. Avec son aide, vous pouvez facilement télécharger des vidéos directement sur votre smartphone.
Les formats offrant la meilleure qualité sont les suivants : FullHD (1080p), 2K (1440p), 4K (2160p) et 8K (4320p). Plus la résolution de votre écran est élevée, plus la qualité de la vidéo doit être élevée. Toutefois, il faut aussi tenir compte d'autres facteurs : la vitesse de téléchargement, l'espace disponible et les performances de l'appareil pendant la lecture.
Le navigateur/l'ordinateur ne doit pas se bloquer complètement ! Si cela arrive, veuillez le signaler en ajoutant un lien vers la vidéo. Parfois, les vidéos ne peuvent pas être téléchargées directement dans un format approprié, c'est pourquoi nous avons ajouté la possibilité de convertir le fichier au format souhaité. Dans certains cas, ce processus peut utiliser activement les ressources de l'ordinateur.
Vous pouvez télécharger une vidéo sur votre smartphone en utilisant le site web ou l'application pwa UDL Lite. Il est également possible d'envoyer un lien de téléchargement via un code QR à l'aide de l'extension UDL Helper.
Le moyen le plus pratique est d'utiliser le programme UDL Client, qui permet de convertir les vidéos en MP3. Dans certains cas, le format MP3 peut également être téléchargé grâce à l'extension UDL Helper.
Cette fonctionnalité est disponible dans l'extension UDL Helper. Veuillez vous assurer que l'option "Afficher le bouton d'instantané de la vidéo" est cochée dans les paramètres. Une icône de caméra devrait apparaître dans le coin inférieur droit du lecteur, à gauche de l'icône "Paramètres". Lorsque vous cliquez dessus, l'image actuelle de la vidéo est enregistrée sur votre ordinateur au format JPEG.
Cela ne coûte rien. Nos services sont absolument gratuits pour tous les utilisateurs. Il n'y a pas d'abonnement PRO, ni de restriction sur le nombre ou la durée maximale des vidéos à télécharger.