Wild Spider

web pages are crawled by being loaded into browser using multiple tabs parallelly

Wild Spiderคืออะไร?

Wild Spider เป็นส่วนขยายของ Chrome ที่พัฒนาโดย Xuan Wu และคุณลักษณะหลักของมันคือ "web pages are crawled by being loaded into browser using multiple tabs parallelly"

ภาพหน้าจอของส่วนขยาย

screenshot

ดาวน์โหลดไฟล์ CRX ของส่วนขยาย Wild Spider

ดาวน์โหลดไฟล์ส่วนขยาย Wild Spider ในรูปแบบ crx และติดตั้งส่วนขยาย Chrome ด้วยตนเองในเบราว์เซอร์หรือแชร์ไฟล์ crx กับเพื่อนๆ เพื่อติดตั้งส่วนขยาย Chrome อย่างง่ายดาย

คำแนะนำในการใช้ส่วนขยาย

                        WATCH OUT: more tabs you use, more computer resources (CPU, memory) will be used, and each page costs a bit disk to save the content (in IndexedDb, accessible from extensions -> Inspect views: background page).

The "spider" works in this way:
1) The current url is used as the starting point, and it's loaded again in a new tab.
2) After this page is loaded, fetch all the links on the page.
3) Get all the links on the page, including relative urls.
4) Open the extracted link parallelly in all the tabs used (by default 3, set in eventPage).
5) repeat 2-4

All source code at: https://github.com/nobodxbodon/ChromeCrawlerWildSpider                    

ข้อมูลพื้นฐานของส่วนขยาย

ชื่อ Wild Spider Wild Spider
ID aanpchnfojihjddlocpgoekffmjkhbbe
URL อย่างเป็นทางการ https://chromewebstore.google.com/detail/wild-spider/aanpchnfojihjddlocpgoekffmjkhbbe
คำอธิบาย web pages are crawled by being loaded into browser using multiple tabs parallelly
ขนาดไฟล์ 121 KB
จำนวนการติดตั้ง 44
เวอร์ชันปัจจุบัน 0.0.3
อัปเดตครั้งล่าสุด 2019-03-08
วันที่เผยแพร่ 2019-03-08
คะแนน 1.00/5 รวมทั้งหมด 1 คะแนน
ผู้พัฒนา Xuan Wu
ประเภทการชำระเงิน free
เว็บไซต์ส่วนขยาย https://github.com/nobodxbodon/ChromeCrawlerWildSpider
URL หน้าช่วยเหลือ https://github.com/nobodxbodon/ChromeCrawlerWildSpider/issues
ภาษาที่รองรับ en-US
manifest.json
{
    "update_url": "https:\/\/clients2.google.com\/service\/update2\/crx",
    "name": "Wild Spider",
    "short_name": "demo web crawler that's still in experimenting",
    "description": "web pages are crawled by being loaded into browser using multiple tabs parallelly",
    "version": "0.0.3",
    "browser_action": {
        "default_icon": "icon.png"
    },
    "permissions": [
        "tabs",
        "activeTab",
        "webNavigation"
    ],
    "background": {
        "scripts": [
            "Dexie.js",
            "eventPage.js"
        ],
        "persistent": false
    },
    "content_scripts": [
        {
            "matches": [
                "*:\/\/*\/*"
            ],
            "js": [
                "htmlparser2.js",
                "content.js"
            ]
        }
    ],
    "manifest_version": 2
}