Limiter l'aspiration de site par logiciel - CMS KwsPHP

Colonne de gauche

Espace membre

Masquer le formulaire de connexion

S’enregistrer

Forum

Poser vos Candidatures sur forum : (11 réponses)
Musicgroove le 16/10 14:16
Mise à jour de vos thèmes et modules personnels (0 réponse)
Musicgroove le 13/09/25 20:24
[R] Module Menu (2 réponses)
Cece12 le 12/09/25 20:50
[R] Theme Fushwin (5 réponses)
Musicgroove le 09/09/25 20:49
Problème et errreur lors de l'installation (7 réponses)
Musicgroove le 05/09/25 13:37
comment choisir un hébergement sur planethoster (0 réponse)
Musicgroove le 25/02/25 17:42
Attaque ou pas attaque (1 réponse)
σJfrPro le 02/09/24 23:04
Fonctionnement de KwsPHP sous php V8.0 (15 réponses)
Musicgroove le 30/05/24 03:14
01-71 - Presentation du cours (0 réponse)
Musicgroove le 20/02/24 22:49
02-71 - Pourquoi apprendre a coder (0 réponse)
Musicgroove le 20/02/24 22:48

Sujets Importants

[A] A lire si : Vous ne recevez pas le mail d'inscription ou celui du nouveau mdp (0 réponse)
σmike007 le 02/08/11 10:00
[A] Au revoir KwsPHP !!! (69 réponses)
Musicgroove le 11/06/21 23:04
[A] Historique du CMS KwsPHP V1.6 (51 réponses)
absinthe25000 le 07/11/11 23:37
[A] Install et Update du CMS KwsPHP (263 réponses)
Musicgroove le 05/02/23 14:40
[A] KwsPHP 1.7 bêta (Tests pour tous ouvert) (36 réponses)
Musicgroove le 05/09/17 11:08
[AV] [bugs-erreurs-astuces] A faire soi-même (1 réponse)
σmike007 le 29/08/17 10:57
[A] [officiel] Topic officiel du thème (13 réponses)
Ancien membre le 17/12/12 19:10

Javascript désactivé ou non supporté !!!
Certaines fonctionnalités secondaires sont donc inaccessibles.

Forum : Masquer l’entête

Accès rapide :

Effectuer une Recherche avancée OU

[Annonce] Limiter l'aspiration de site par logiciel [12 réponses]

Index du Forum » Divers » Webmastering

Répondre

♦ 1 2

σmike007

Dieu Supreme

Nombre de posts: 7551 (1.02/Jour)
Inscrit(e) le: 05 juillet 2006

lundi 16 février 2009 à 19:37

Un événement récent m'amène à poster ce sujet

pour éviter qu'un aspirateur de site vienne pomper vos pages, a priori (car si quelqu'un pouvait tester ça me le confirmerai), il faut créer un .htaccess à la racine de votre site

et y mettre ceci (attention chez free pas possible voir seconde solution plus bas)

Citation :

# RewriteEngine On n'est à mettre que si vous ne l'avez pas déjà d'écrit ds votre htaccess
RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} "BackWeb" [OR]
RewriteCond %{HTTP_USER_AGENT} "eCatch" [OR]
RewriteCond %{HTTP_USER_AGENT} "HTTrack" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "teleport" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "webcopier"
RewriteRule !^interdit.*$ /interdit.php [L]

et bien sur créer un fichier interdit.php ou .html mais a ce moment là changez l'extension aussi ds le htaccess sur la dernière ligne

Voilà s'ils y en a qui veulent par exemple installer HTTrack et tester après avoir mis en place le htaccess sur leur site et me donner leur retour, ça serait sympa.

autre solution a tester aussi, je pense que ça devrait fonctionner

ds votre config juste après le include_once 'connect.php'; en ligne 12
mettre ceci

Code PHP :

Pour copier le contenu exact du code,
Veuillez citer le message

<?php
#####!!!#####
$liste_aspi = array('BackWeb','eCatch','HTTrack','teleport','webcopier');
if (in_array($_SERVER['HTTP_USER_AGENT'],$liste_aspi))
{
header('Location: ./interdit.html');
exit();
}
#####!!!#####
?>

voila, ds le cas de la seconde soution, doit-on l'intégrer ? et doit-on la rendre paramétrable ? genre autoriser l'aspiration de site ou pas

Vous êtes satisfait de l'aide apportée !! Vous avez l'âme généreuse !!

Un petit don (même de 1 euro) de chaque personne satisfaite permet de témoigner de votre reconnaissance pour le temps passé. merci

Mes Modules ou ceux que j'ai repris en V1.6 : ICI. Module Humour
bbcode_sup => Voir le forum dédié (youtube, daily, zoomimg, deezer, divx, clearbox, apostrophe word, etc...)

Infos CMS KwsPHP

Informations : Avant de poster un sujet sur le forum

Veuillez avant tout vérifiez la comparaison de vos fichiers sur votre site
Mon compte / Outils / Comparaison

La recherche avancée du forum (en ciblant au mieux les options de la recherche)
La Faq - La documentation - La documentation en vidéo - Le sujet "Install et Mise à jour"
Vous devez lire en priorité le topic de la 1.6 pour en découvrir ses fonctionnalités

Afficher

Ancien membre

avatar

lundi 16 février 2009 à 19:52

Slt,

On doit integrer la Deuxième solution et la mettre à on par défaut. Enfin c'est mon avis..!

σjack

Dieu

Nombre de posts: 1624 (0.22/Jour)
Inscrit(e) le: 24 juin 2006

lundi 16 février 2009 à 20:40

C'est ineressant, mais effectivement, il faudait que ce soit paramétrable, moi ça ne me dérangerais pas qu'on aspire mon site, j'en serais même flatté smiley sg3agp.gif

Tech-radiotherapie.info, Le site des techniciens et dosimétristes de radiothérapie

Ancien membre

avatar

lundi 16 février 2009 à 21:10

Ben moi quand je vois tous les webm'habbo'ster, bein je me dit que c'est pas un mal, si on les écoute, ils pompent tout

σricky

Dieu Supreme
Vérouilleur

Nombre de posts: 2900 (0.4/Jour)
Inscrit(e) le: 12 janvier 2007

mardi 17 février 2009 à 07:08

Hello,

je pense qu'il faut l'intégrer. Car pomper sans demander par mail, je trouve cela lamentable.

"Deux choses sont infinies : l'univers et la bêtise humaine. En ce qui concerne la 1 ère on en a pas encore la certitude absolue..."

Motoweb29

Habitué

Nombre de posts: 222 (0.03/Jour)
Inscrit(e) le: 09 novembre 2007

mardi 17 février 2009 à 11:46

hello,

une petite précision, le USER_AGENT est configurable dans presque tous les aspirateurs de sites, c'est donc très simple de les faire passer pour ie ou ff, cette solution ne fonctionnera pas dans ce cas là.

une autre méthode est souvent utilisée :

les aspirateur de site (tout comme les robots indexeur qui ne respectent pas les standards ) font un très grand nombre de requêtes en même temps et accèdent a des 10ene de pages en quelques seconde, le principe est de détecter ses connexion a répétition pour les bloquer.

il existe de nombreux srcipts faisant cela.

Thierry

σfoupoudave

Dieu Supreme
Ultra Méchant

Nombre de posts: 2006 (0.27/Jour)
Inscrit(e) le: 24 septembre 2006

mardi 17 février 2009 à 12:45

Donc bloquer aussi les robots et adieu le référencement !

Indisponible pour raison professionnelle

Motoweb29

Habitué

Nombre de posts: 222 (0.03/Jour)
Inscrit(e) le: 09 novembre 2007

mardi 17 février 2009 à 12:57

Citation de foupoudave :

Donc bloquer aussi les robots et adieu le référencement !

pas du tout, gogole yahoo et autre référenceurs serieux ne font pas des dizaines d'appels de pages a la seconde. il suffis de regarder les stats pour constater leur degré d'agressivité.

Thierry

σfoupoudave

Dieu Supreme
Ultra Méchant

Nombre de posts: 2006 (0.27/Jour)
Inscrit(e) le: 24 septembre 2006

mardi 17 février 2009 à 13:01

Ca doit être jouable avec le module espion... mais une requête en plus...

Indisponible pour raison professionnelle

ΦOtocinclus
Administrateur

Nombre de posts: 3163 (0.43/Jour)
Inscrit(e) le: 02 septembre 2006

mardi 17 février 2009 à 15:50

mais ça ne fonctionnera pas forcement non plus car sur HTTrack par exemple (les autres aussi peut-être mais je ne les connais pas) on peut aussi paramétrer le nombre de requêtes max par secondes.

Donc en se faisant passer pour un navigateur 'normal' et avec un nombre de requêtes raisonnable, plus rien ne le distingue d'un visiteur lamba, sauf peut-être le fait qu'il va aller lire toutes les pages lors de la même session. Mais à partir de combien de page vu tu va considérer que c'est un aspirateur, sans pour autant pénaliser tes visiteurs ?

Donc en clair, difficile de réellement bloquer les aspirateurs. J'ai vu un truc une fois avec une histoire de lien caché, mais je ne l'ai jamais testé car comme le dit Jack, je n'ai jamais jugé utile d'empêcher l'aspiration de mon site.

LES C0NS, ÇA OSE TOUT. C'EST MÊME À ÇA QU'ON LES RECONNAÎT.

Michel Audiard