Wild Spider

web pages are crawled by being loaded into browser using multiple tabs parallelly

ما هو Wild Spider؟

Wild Spider هو إضافة Chrome تم تطويرها بواسطة Xuan Wu، والميزة الرئيسية لها هي "web pages are crawled by being loaded into browser using multiple tabs parallelly".

لقطات شاشة التمديد

screenshot

تحميل ملف CRX للإضافة Wild Spider

قم بتنزيل ملفات الامتداد Wild Spider بتنسيق crx ، وقم بتثبيت الامتدادات يدويًا في متصفح Chrome ، أو شارك ملفات crx مع الأصدقاء لتثبيت الامتدادات بسهولة.

تعليمات استخدام التمديد

                        WATCH OUT: more tabs you use, more computer resources (CPU, memory) will be used, and each page costs a bit disk to save the content (in IndexedDb, accessible from extensions -> Inspect views: background page).

The "spider" works in this way:
1) The current url is used as the starting point, and it's loaded again in a new tab.
2) After this page is loaded, fetch all the links on the page.
3) Get all the links on the page, including relative urls.
4) Open the extracted link parallelly in all the tabs used (by default 3, set in eventPage).
5) repeat 2-4

All source code at: https://github.com/nobodxbodon/ChromeCrawlerWildSpider                    

معلومات أساسية عن التمديد

الاسم Wild Spider Wild Spider
ID aanpchnfojihjddlocpgoekffmjkhbbe
عنوان URL الرسمي https://chromewebstore.google.com/detail/wild-spider/aanpchnfojihjddlocpgoekffmjkhbbe
الوصف web pages are crawled by being loaded into browser using multiple tabs parallelly
حجم الملف 121 KB
عدد التثبيتات 44
النسخة الحالية 0.0.3
آخر تحديث 2019-03-08
تاريخ النشر 2019-03-08
تقييم 1.00/5 مجموع تقييمات 1
المطور Xuan Wu
نوع الدفع free
موقع الإضافة https://github.com/nobodxbodon/ChromeCrawlerWildSpider
عنوان صفحة المساعدة https://github.com/nobodxbodon/ChromeCrawlerWildSpider/issues
اللغات المدعومة en-US
manifest.json
{
    "update_url": "https:\/\/clients2.google.com\/service\/update2\/crx",
    "name": "Wild Spider",
    "short_name": "demo web crawler that's still in experimenting",
    "description": "web pages are crawled by being loaded into browser using multiple tabs parallelly",
    "version": "0.0.3",
    "browser_action": {
        "default_icon": "icon.png"
    },
    "permissions": [
        "tabs",
        "activeTab",
        "webNavigation"
    ],
    "background": {
        "scripts": [
            "Dexie.js",
            "eventPage.js"
        ],
        "persistent": false
    },
    "content_scripts": [
        {
            "matches": [
                "*:\/\/*\/*"
            ],
            "js": [
                "htmlparser2.js",
                "content.js"
            ]
        }
    ],
    "manifest_version": 2
}