Wild Spider

web pages are crawled by being loaded into browser using multiple tabs parallelly

Τι είναι το Wild Spider;

Το Wild Spider είναι ένα πρόσθετο Chrome που αναπτύχθηκε από τον Xuan Wu, και η κύρια λειτουργία του είναι "web pages are crawled by being loaded into browser using multiple tabs parallelly".

Στιγμιότυπα Επέκτασης

screenshot

Λήψη αρχείου CRX της επέκτασης Wild Spider

Λήψη αρχείων επέκτασης Wild Spider σε μορφή crx, εγκατάσταση των επεκτάσεων Chrome μη αυτόματα στον περιηγητή ή κοινοποίηση των αρχείων crx με φίλους για εύκολη εγκατάσταση των επεκτάσεων Chrome.

Οδηγίες Χρήσης της Επέκτασης

                        WATCH OUT: more tabs you use, more computer resources (CPU, memory) will be used, and each page costs a bit disk to save the content (in IndexedDb, accessible from extensions -> Inspect views: background page).

The "spider" works in this way:
1) The current url is used as the starting point, and it's loaded again in a new tab.
2) After this page is loaded, fetch all the links on the page.
3) Get all the links on the page, including relative urls.
4) Open the extracted link parallelly in all the tabs used (by default 3, set in eventPage).
5) repeat 2-4

All source code at: https://github.com/nobodxbodon/ChromeCrawlerWildSpider                    

Βασικές Πληροφορίες Επέκτασης

Όνομα Wild Spider Wild Spider
ID aanpchnfojihjddlocpgoekffmjkhbbe
Επίσημο URL https://chromewebstore.google.com/detail/wild-spider/aanpchnfojihjddlocpgoekffmjkhbbe
Περιγραφή web pages are crawled by being loaded into browser using multiple tabs parallelly
Μέγεθος Αρχείου 121 KB
Αριθμός Εγκαταστάσεων 44
Τρέχουσα Έκδοση 0.0.3
Τελευταία Ενημέρωση 2019-03-08
Ημερομηνία Δημοσίευσης 2019-03-08
Αξιολόγηση 1.00/5 Συνολικά 1 Αξιολογήσεις
Προγραμματιστής Xuan Wu
Τύπος Πληρωμής free
Ιστότοπος Επέκτασης https://github.com/nobodxbodon/ChromeCrawlerWildSpider
Διεύθυνση URL της Σελίδας Βοήθειας https://github.com/nobodxbodon/ChromeCrawlerWildSpider/issues
Υποστηριζόμενες Γλώσσες en-US
manifest.json
{
    "update_url": "https:\/\/clients2.google.com\/service\/update2\/crx",
    "name": "Wild Spider",
    "short_name": "demo web crawler that's still in experimenting",
    "description": "web pages are crawled by being loaded into browser using multiple tabs parallelly",
    "version": "0.0.3",
    "browser_action": {
        "default_icon": "icon.png"
    },
    "permissions": [
        "tabs",
        "activeTab",
        "webNavigation"
    ],
    "background": {
        "scripts": [
            "Dexie.js",
            "eventPage.js"
        ],
        "persistent": false
    },
    "content_scripts": [
        {
            "matches": [
                "*:\/\/*\/*"
            ],
            "js": [
                "htmlparser2.js",
                "content.js"
            ]
        }
    ],
    "manifest_version": 2
}