Suplimente pentru Firefox
  • Extensii
  • Teme
    • pentru Firefox
    • Dicționare și pachete lingvistice
    • Site-uri pentru alte browsere
    • Suplimente pentru Android
Autentifică-te
Previzualizare get-set, Fetch! web scraper

get-set, Fetch! web scraper de Sabau Andrei

Open source data scraper with csv, zip export capabilities. Provides scraping scenarios for fast, minimal configuration scraping.

5 (3 revizuiri)5 (3 revizuiri)
246 de utilizatori246 de utilizatori
Descarcă Firefox și obține extensia
Descarcă fișierul

Metadate extensie

Capturi de ecran
Quickly create a scraping projects from the available examples.Available scraping scenarios. You can install / uninstall additional ones.Settings available for a scraping project.List of created scraping projects. On an individual level you can start / resume scraping,  view scraping results, export project configuration.Result list from a scraping project. You can export the text data as csv, binary data (images, pdf files ..) as zip.
Despre această extensie
Open source data scraper with csv and zip export capabilities.
With a modular architecture, this extension provides a series of scraping scenarios with predefined default values for fast, minimal configuration scraping.
Binary data (images, pdf files, ...) can be exported as zip archives. Text based data can be exported as csv files.
Take a look at the "Examples" section within the extension to see what's possible.

Create a new project
  • Fill in project name, start URL, scrape scenario and various plugins options.
  • There are two builtin scenarios: scrape-static-content and scrape-dynamic-content responsible for scraping regular and javascript based html pages respectively.
  • You can install additional community based scenarios from the scenario list page.

Start scraping
  • Click the corresponding "scrape" button from the project list.
  • Urls to be scraped will sequentially open in a new tab with a delay defined at project creation.
  • You can end the scraping process at any time by closing the newly opened tab. Next time you start scraping, the process will resume from where it was interrupted.

Export the results
  • Depending on the project settings, you can export text data as csv and binary data as zip.

Troubleshooting
  • Look for warning or error entries in the logs page.
  • You can adjust the log level from the settings page.
  • If you find a bug, please open an issue on github and attach in the comment any relevant log entries.
Comentarii de la dezvoltator
https://github.com/get-set-fetch/extension
Evaluat cu 5 de către 3 recenzori
Intră în cont pentru a evalua această extensie
Nu există încă evaluări

Evaluarea prin stele a fost salvată

5
3
4
0
3
0
2
0
1
0
Citește toate cele 3 recenzii
Permisiuni și dateAflă mai multe

Permisiuni necesare:

  • Să acceseze activitatea browserului în timpul navigării
  • Să îți acceseze datele pentru toate site-urile web
Mai multe informații
Linkurile suplimentului
  • Pagină de start
  • Site pentru asistență
  • E-mail pentru asistență
Versiune
0.4.1
Mărime
775,89 KB
Ultima actualizare
5 ani în urmă (26 sept. 2020)
Categorii conexe
  • Gestionare descărcări
Licență
Licență MIT
Istoricul versiunilor
  • Vezi toate versiunile
Adaugă în colecție
Raportează acest supliment
Note privind versiunea 0.4.1
Added
  • Firefox support
  • Redirect support
  • New FetchPlugin option: maxStabilityWaitingTime
  • Current version is now visible in Front-end
  • Scraping examples update

Fixed
  • When exporting binary resources name fragments no longer repeat

Security
  • Fixed moderate and higher severity vulnerabilities from npm audit
Du-te pe pagina de start Mozilla

Suplimente

  • Despre
  • Blog suplimente Firefox
  • Atelier de extensii
  • Centrul dezvoltatorilor
  • Politicile dezvoltatorilor
  • Blogul comunității
  • Forum
  • Raportează o defecțiune
  • Ghid pentru recenzii

Browsere

  • Desktop
  • Mobile
  • Enterprise

Produse

  • Browsers
  • VPN
  • Relay
  • Monitor
  • Pocket
  • Bluesky (@firefox.com)
  • Instagram (Firefox)
  • YouTube (firefoxchannel)
  • Confidențialitate
  • Cookie-uri
  • Mențiuni legale

Cu excepția cazurilor când se specifică altfel, conținutul de pe acest site este licențiat sub licența Creative Commons cu atribuire și distribuire în condiții identice v3.0 sau orice versiune ulterioară.