Wild Spider
web pages are crawled by being loaded into browser using multiple tabs parallelly
Τι είναι το Wild Spider;
Το Wild Spider είναι ένα πρόσθετο Chrome που αναπτύχθηκε από τον Xuan Wu, και η κύρια λειτουργία του είναι "web pages are crawled by being loaded into browser using multiple tabs parallelly".
Στιγμιότυπα Επέκτασης
Λήψη αρχείου CRX της επέκτασης Wild Spider
Λήψη αρχείων επέκτασης Wild Spider σε μορφή crx, εγκατάσταση των επεκτάσεων Chrome μη αυτόματα στον περιηγητή ή κοινοποίηση των αρχείων crx με φίλους για εύκολη εγκατάσταση των επεκτάσεων Chrome.
Οδηγίες Χρήσης της Επέκτασης
WATCH OUT: more tabs you use, more computer resources (CPU, memory) will be used, and each page costs a bit disk to save the content (in IndexedDb, accessible from extensions -> Inspect views: background page). The "spider" works in this way: 1) The current url is used as the starting point, and it's loaded again in a new tab. 2) After this page is loaded, fetch all the links on the page. 3) Get all the links on the page, including relative urls. 4) Open the extracted link parallelly in all the tabs used (by default 3, set in eventPage). 5) repeat 2-4 All source code at: https://github.com/nobodxbodon/ChromeCrawlerWildSpider
Βασικές Πληροφορίες Επέκτασης
Όνομα | Wild Spider |
ID | aanpchnfojihjddlocpgoekffmjkhbbe |
Επίσημο URL | https://chromewebstore.google.com/detail/wild-spider/aanpchnfojihjddlocpgoekffmjkhbbe |
Περιγραφή | web pages are crawled by being loaded into browser using multiple tabs parallelly |
Μέγεθος Αρχείου | 121 KB |
Αριθμός Εγκαταστάσεων | 44 |
Τρέχουσα Έκδοση | 0.0.3 |
Τελευταία Ενημέρωση | 2019-03-08 |
Ημερομηνία Δημοσίευσης | 2019-03-08 |
Αξιολόγηση | 1.00/5 Συνολικά 1 Αξιολογήσεις |
Προγραμματιστής | Xuan Wu |
Τύπος Πληρωμής | free |
Ιστότοπος Επέκτασης | https://github.com/nobodxbodon/ChromeCrawlerWildSpider |
Διεύθυνση URL της Σελίδας Βοήθειας | https://github.com/nobodxbodon/ChromeCrawlerWildSpider/issues |
Υποστηριζόμενες Γλώσσες | en-US |
manifest.json | |
{ "update_url": "https:\/\/clients2.google.com\/service\/update2\/crx", "name": "Wild Spider", "short_name": "demo web crawler that's still in experimenting", "description": "web pages are crawled by being loaded into browser using multiple tabs parallelly", "version": "0.0.3", "browser_action": { "default_icon": "icon.png" }, "permissions": [ "tabs", "activeTab", "webNavigation" ], "background": { "scripts": [ "Dexie.js", "eventPage.js" ], "persistent": false }, "content_scripts": [ { "matches": [ "*:\/\/*\/*" ], "js": [ "htmlparser2.js", "content.js" ] } ], "manifest_version": 2 } |