1.8 KiB
URL : https://github.com/lovasoa/whitebophir
Crawlab
Crawlab est une puissante plate-forme de gestion des chenilles Web (WCMP) qui peut ex?cuter des chenilles et des araign?es web d?velopp?es dans divers langages de programmation, y compris Python, Go, Node.js, Java, Cz ainsi que des frameworks incluant Scrapy, Colly, Selenium, Puppeteer. Il est utilis? pour l'exploitation, la gestion et la surveillance des chenilles du web, en particulier dans les environnements de production o? la tra?abilit?, l'?volutivit? et la stabilit? sont les principaux facteurs pris en compte.
Téléchargement, Configuration et Lancement
Téléchargement de Crawlab
Saisir la commande pour télécharger la source
git clone https://git.tips-of-mine.fr/Tips-Of-Mine/Docker.git
Saisir la commande pour vous rendre dans le dossier
cd Productivite\Crawlab
Modifier la configuration de Crawlab
Saisir la commande pour vous rendre dans le dossier
cd Productivite\Crawlab
Nous éditons le fichier de configuration
nano .env
Nous modifions les variables dont nous avons besoin.
Lancement de Crawlab
Pour utiliser Crawlab tout seul
docker compose up -d
Pour utiliser Crawlab avec Traefik
docker compose -f docker-compose-traefik.yml up -d
Utilisation
Accueil
Ouvrir une page web avec l'url : Pour une utilisation tout seul
http://10.0.4.29:3000
Pour une utilisation avec Traefik
https://Crawlab.10.0.4.29.traefik.me`)"
More info
- more information on the website Tips-Of-Mine