Crawlab est une puissante plate-forme de gestion des chenilles Web (WCMP) qui peut ex?cuter des chenilles et des araign?es web d?velopp?es dans divers langages de programmation, y compris Python, Go, Node.js, Java, Cz ainsi que des frameworks incluant Scrapy, Colly, Selenium, Puppeteer. Il est utilis? pour l'exploitation, la gestion et la surveillance des chenilles du web, en particulier dans les environnements de production o? la tra?abilit?, l'?volutivit? et la stabilit? sont les principaux facteurs pris en compte.

Téléchargement, Configuration et Lancement

Téléchargement de Crawlab

Saisir la commande pour télécharger la source

git clone https://git.tips-of-mine.fr/Tips-Of-Mine/Docker.git

Saisir la commande pour vous rendre dans le dossier

cd Productivite\Crawlab

Modifier la configuration de Crawlab

Saisir la commande pour vous rendre dans le dossier

cd Productivite\Crawlab

Nous éditons le fichier de configuration

nano .env

Nous modifions les variables dont nous avons besoin.

Lancement de Crawlab

Pour utiliser Crawlab tout seul

docker compose up -d

Pour utiliser Crawlab avec Traefik

docker compose -f docker-compose-traefik.yml up -d

Utilisation

Accueil

Ouvrir une page web avec l'url : Pour une utilisation tout seul

http://10.0.4.29:3000

Pour une utilisation avec Traefik

https://Crawlab.10.0.4.29.traefik.me`)"

More info

more information on the website Tips-Of-Mine

README.md

Crawlab