Wild Spider
web pages are crawled by being loaded into browser using multiple tabs parallelly
Co to jest Wild Spider?
Wild Spider to rozszerzenie Chrome opracowane przez Xuan Wu, a jego główną funkcją jest „web pages are crawled by being loaded into browser using multiple tabs parallelly”.
Zrzuty ekranu rozszerzenia
Pobierz plik CRX rozszerzenia Wild Spider
Pobierz pliki rozszerzeń Wild Spider w formacie crx, zainstaluj ręcznie rozszerzenia Chrome w przeglądarce lub udostępnij pliki crx znajomym, aby łatwo zainstalować rozszerzenia Chrome.
Instrukcja Użytkowania Rozszerzenia
WATCH OUT: more tabs you use, more computer resources (CPU, memory) will be used, and each page costs a bit disk to save the content (in IndexedDb, accessible from extensions -> Inspect views: background page).
The "spider" works in this way:
1) The current url is used as the starting point, and it's loaded again in a new tab.
2) After this page is loaded, fetch all the links on the page.
3) Get all the links on the page, including relative urls.
4) Open the extracted link parallelly in all the tabs used (by default 3, set in eventPage).
5) repeat 2-4
All source code at: https://github.com/nobodxbodon/ChromeCrawlerWildSpider Podstawowe informacje o rozszerzeniu
| Nazwa |  Wild Spider |
| ID | aanpchnfojihjddlocpgoekffmjkhbbe |
| Oficjalny URL | https://chromewebstore.google.com/detail/wild-spider/aanpchnfojihjddlocpgoekffmjkhbbe |
| Opis | web pages are crawled by being loaded into browser using multiple tabs parallelly |
| Rozmiar pliku | 121 KB |
| Liczba instalacji | 44 |
| Aktualna Wersja | 0.0.3 |
| Ostatnia Aktualizacja | 2019-03-08 |
| Data Publikacji | 2019-03-08 |
| Ocena | 1.00/5 Łącznie 1 Oceny |
| Deweloper | Xuan Wu |
| Typ Płatności | free |
| Strona Rozszerzenia | https://github.com/nobodxbodon/ChromeCrawlerWildSpider |
| Adres URL Strony Pomocy | https://github.com/nobodxbodon/ChromeCrawlerWildSpider/issues |
| Obsługiwane Języki | en-US |
| manifest.json | |
{
"update_url": "https:\/\/clients2.google.com\/service\/update2\/crx",
"name": "Wild Spider",
"short_name": "demo web crawler that's still in experimenting",
"description": "web pages are crawled by being loaded into browser using multiple tabs parallelly",
"version": "0.0.3",
"browser_action": {
"default_icon": "icon.png"
},
"permissions": [
"tabs",
"activeTab",
"webNavigation"
],
"background": {
"scripts": [
"Dexie.js",
"eventPage.js"
],
"persistent": false
},
"content_scripts": [
{
"matches": [
"*:\/\/*\/*"
],
"js": [
"htmlparser2.js",
"content.js"
]
}
],
"manifest_version": 2
} | |
