Wild Spider

web pages are crawled by being loaded into browser using multiple tabs parallelly

Wild Spider란 무엇입니까?

Wild Spider은(는) Xuan Wu에 의해 개발된 Chrome 확장 프로그램으로, 주요 기능은 "web pages are crawled by being loaded into browser using multiple tabs parallelly"입니다.

확장 프로그램 스크린샷

screenshot

Wild Spider 확장 프로그램 CRX 파일 다운로드

크롬 확장 프로그램을 crx 형식으로 다운로드하여 브라우저에 수동으로 설치하거나 crx 파일을 친구들과 공유하여 쉽게 크롬 확장 프로그램을 설치하세요.

확장 프로그램 사용 설명서

                        WATCH OUT: more tabs you use, more computer resources (CPU, memory) will be used, and each page costs a bit disk to save the content (in IndexedDb, accessible from extensions -> Inspect views: background page).

The "spider" works in this way:
1) The current url is used as the starting point, and it's loaded again in a new tab.
2) After this page is loaded, fetch all the links on the page.
3) Get all the links on the page, including relative urls.
4) Open the extracted link parallelly in all the tabs used (by default 3, set in eventPage).
5) repeat 2-4

All source code at: https://github.com/nobodxbodon/ChromeCrawlerWildSpider                    

확장 프로그램 기본 정보

이름 Wild Spider Wild Spider
ID aanpchnfojihjddlocpgoekffmjkhbbe
공식 URL https://chromewebstore.google.com/detail/wild-spider/aanpchnfojihjddlocpgoekffmjkhbbe
설명 web pages are crawled by being loaded into browser using multiple tabs parallelly
파일 크기 121 KB
설치 횟수 44
현재 버전 0.0.3
최근 업데이트 2019-03-08
출시 날짜 2019-03-08
평점 1.00/5 총 1 개의 평점
개발자 Xuan Wu
결제 유형 free
확장 프로그램 웹 사이트 https://github.com/nobodxbodon/ChromeCrawlerWildSpider
도움말 페이지 URL https://github.com/nobodxbodon/ChromeCrawlerWildSpider/issues
지원되는 언어 en-US
manifest.json
{
    "update_url": "https:\/\/clients2.google.com\/service\/update2\/crx",
    "name": "Wild Spider",
    "short_name": "demo web crawler that's still in experimenting",
    "description": "web pages are crawled by being loaded into browser using multiple tabs parallelly",
    "version": "0.0.3",
    "browser_action": {
        "default_icon": "icon.png"
    },
    "permissions": [
        "tabs",
        "activeTab",
        "webNavigation"
    ],
    "background": {
        "scripts": [
            "Dexie.js",
            "eventPage.js"
        ],
        "persistent": false
    },
    "content_scripts": [
        {
            "matches": [
                "*:\/\/*\/*"
            ],
            "js": [
                "htmlparser2.js",
                "content.js"
            ]
        }
    ],
    "manifest_version": 2
}