Chez oim, forum libre

Discuter => C'est chez oim ! => Discussion démarrée par: alex le lundi 03 juin 2013, 18:09

Titre: Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 18:09
Vous le savez tous, le fichier robots.txt (https://chez-oim.org/robots.txt) interdit l'indexation de chez oim par les moteurs de recherche.
Cependant, à un moment de l'existence de chez oim, ce fichier a été modifié et une erreur de syntaxe c'est glissée là.
Google c'est engouffré dans la brèche en commençant à indexer le site...

Environ 200 pages ont été indexées. (un peu moins)
Etant propriétaire du site, je suis en droit de demander la destruction de ces pages de l'index et du cache Google.

Si quelqu'un ce sent de répertorier dans un fichier texte toutes les URL détenues par Google afin que je puisse faire une demande d'effacement des index et du cache, j'apprécierais beaucoup !

Afin de vous rendre compte de l'ampleur du travail, entrez dans Google la requête suivante :
" " site:chez-oim.org
725 résultats de recherche apparaissent.
Parmi ces résultats, certains ne font que dire "le fichier robots.txt ne permet pas d'en dire plus"... Ces résultats sont donc à ignorer.

D'autre résultats appartiennent au même topic d'origine.
Au final, moins de 200 pages ont été indexées. (164 si mes souvenirs sont bons)
Le travail consiste donc à relever les URL affichées par Google afin que j'en demande la suppression.
Ce travail a déjà commencé, mais au compte goutte.
Une personne motivée serait la bienvenue !
(https://static.chez-oim.org/imageshack/googlecc.jpg)

Tout travail méritant salaire, il va de soit que je serais prêt à négocier avec la personne désirant ce lancer dans cette aventure peu attrayante.
ATTENTION ! Pas d'histoire d'argent entre nous ! Des faveurs, des droits occasionnels, etc... Cela demande négociation.
Aucun passe droit ne sera accordé ! Il s'agit de rester éthique, n'est-ce pas ?

A votre santé !
Et surtout à la santé de la personne qui posera sa candidature !
Par MP ou ici même...

Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: néco le lundi 03 juin 2013, 18:31
j'ai déjà du boulot à faire chez moi ! :aa


:-*
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 18:37
C'est pour ça que tu te déplaces ? :gc:

Tu sais que c'est un travail très gratifiant ! O:-)
Ton boulot aura conduit à la destruction de tout ce que Google possède sur le forum !
C'est synonyme de pouvoir !
Si tu as le contrôle sur Google, tu as le contrôle sur tout ! :))

Ensuite, sur DTT, tu passeras pour la reine qui détient le pouvoir ! C:-)
Hein ? Non ? Oui ? Un tout petit peu quand même, non ? Oui ?
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: néco le lundi 03 juin 2013, 18:50
je comprend pas pourquoi tu ne veux pas être dans google ... c'est ça qui attire du monde hein ! ;)

et ensuite , chez moi , je cherche pas a être la reine qui détiens le pouvoir , pour preuve , tu sais bien que j'ai envie de filler le pouvoir à tous le monde ! ;)

j'en ai ras le bol de tout ces forums où tout le monde rale contre les modos qui ne font pas leur taf de façon impartiale , si tout le monde est modo , le problème est résolu ! non ? oui ? peut-être ? faut voir ?
:D

:-*
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 19:01
Google est pratique, je ne nie pas.
Mais Google est une arme à double tranchant. Dans 5 ans, je peux te ressortir ce que tu avais dit à machin ou bidule.

La politique de Google est en train de changer.
Ils veulent tout indexer.
Du simple forum familial à la bibliothèque départementale, ils veulent tout indexer !
Leur système d'indexation est très opaque.
Je suis pour une diffusion sans restriction de l'info et des connaissances, mais pas pour un monopole de la connaissance.
Voilà pourquoi je refuse que Google reluque chez oim.
Les humains le font très bien ! Pas besoin de robots !
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 19:06
1/4 d'heure à tout casser, et tu as besoin de sous-traiter ?  :gk:

Il n'y a qu'une soixantaine de lignes, je le mets là où je te l'envoie par mail, ou sur cjoint, ou ailleurs ?
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 19:11
Un quart d'heure ???
Tu as lancé la requête que je donne ? :-\

Cette requête doit te donner au moins 700 résultats....
Quelque chose me dit que tu as couillé quelque part.... :aa

Sinon, je veux les URL dans un fichier texte.
Libre à toi de les transmettre par tout moyen de communication à ta disposition...
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 19:17
Merci, v'là qu'j'ai couillé maintenant.  :ga:
Ben oui, j'ai lancé la requête, 10 pages, 723 résultats

(http://i.imgur.com/zTyqfCo.png)

Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 19:22
Ça j'ai pas fait par contre, probablement des doublons.
Mais j'ai éliminé les pages interdites par robot.txt.

(http://i.imgur.com/F5NQyyw.png)
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 19:26
Impec !

Maintenant, il faut noter les URL dans un fichier texte.

Tu vas rencontrer deux types d'URL :
1) https://chez-oim.org/index.php?topic=xxx   <--- Ca, tu notes !

2) https://chez-oim.org/index.php?topic=xxx#.......... Tout ce qui suit la dièse, on s'en fout. Seul le N° de topic est important.
C'est là qu'il faut faire gaffe ! Google indexe chaque réponse. Si le topic de départ est bien désigné, les réponses derrière la dièse "#" ne sont pas nécessaires.
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 19:36
C'est déjà tout copié, trié, mais je n'ai pas trouvé de #.

En incluant les pages ignorées, il y a l'air d'y en avoir un peu plus.
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 19:40
Il faut que je regarde sur mon compte Google pour savoir combien de pages exactement sont indexées.

Comment ça tout est copié, trié ?
Tu as déjà toutes les URL ? :ge:
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 19:57
Ben oui, je te l'ai dit, 1/4 d'heure à tout casser.
Suffit d'un peu de technique et d'organisation.  :aa
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 20:01
Ben merde alors ! :ge:

Ben écoute, si tu te sens, vas-y !
J'ai du mal à voir comment tu vas faire, mais bon ! Place aux pros ! :gp:
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 20:06
C'est fait.
Tu ne veux que les topics ?
Il y a aussi quelques pages action=login, help, et bord.
Je les enlève ?
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 20:09
Je veux toutes les pages !
Surtout les URL qui contiennent des actions !

Comment tu as fait ? :-\
Montre voir ton fichier texte...
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 20:18
http://kl1p.com/gDzb

Je t'expliquerai après comment j'ai fait.
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 20:27
(ne fait pas attention au pseudo, je suis sur mon compte membre)

Tu as utilisé un "aspirateur" de site ? C'est ça ?
Le souci, c'est que ton fichier ne va pas... :gk:

Quand on réclame la suppression d'une page à Google, il faut lui donner le chemin complet (ce que tu as fait)et le nom de la page... Par exemple : chez-oim.org ~~ topic=753 ~~ msg1583.html
Pour désigner une page, il faut son extension en .htm ou .html

Ca m'emmerde de te dire ça, mais je ne peux rien faire avec ton fichier... :gk:

En tout cas, je tiens à te remercier chaleureusement ! :P
Je ne sais pas comment tu as fait, mais j'espère que tu vas me le dire vite ! :blank:

PS :
Si tu as besoin de quoi que ce soit sur ce site, demande... ;)
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 20:37
Tu boudes ? :gk:
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 20:58
C'est pas moi qui  boude, c'est ton serveur
S'il n'y a que ça pour te faire plaisir, j'ajoute des html partout.
Les liens que j'ai copiés sont ceux fournis par Google, même dans la barre d'adresse, il n'y a pas l'extension.
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 21:01
C'est pas moi qui boude, c'est ton serveur.  :ga:
S'il n'y a que ça pour te faire plaisir, j'ajoute des html partout.
Les liens que j'ai copiés sont ceux fournis par Google, même dans la barre d'adresse, il n'y a pas l'extension.
Retourne voir le lien que j'ai mis au dessus, j'ai fait la modif.

J'avais pas vu quue le post était déjà parti.  :gk:
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 21:02
Ouaip ! J'ai vu. Il y a eu un passage à vide... :gk:

Oulala !
Fais gaffe ! Faut pas mettre du .html de partout !
Par exemple, board désigne un forum, pas une page. ;)

Et si tu m'expliquais comment tu fais, hein ?

Si je pouvais automatiser ma demande de suppression de pages à Google, ça m'arrangerait bien, vois tu ? ;)
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 21:08
Pour les topics, ça marche, j'ai testé, enfin, quand le serveur n'était pas busy et que MySQL server n'était pas gone away
Les board, tu n'as qu'à mettre toi même ce qu'il faut, c'est pas la mère à boire.
C'est trop galère pour venir sur ton forum ce soir.
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 21:10
Et tu ne veux toujours pas me dire comment tu as fais ? :gk:

Je sais, ce soir, il y a de gros problèmes d'accès database...
Ici, tout est ok.
Hormis un "événement" extérieur, tout va bien chez oim... Auquel cas, l'hébergeur ce charge de "l'événement extérieur".
J'ai causé avec l'hébergeur pendant 3 jours pour avoir la paix, j'espère que je peut l'avoir.... (en anglais !)
Les emmerdeurs, dorénavant, l'hébergeur "s'en occupe"...

Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 21:16
Laisse moi le temps de te répondre.  :aa

L'adresse des présentations, c'est bien https://chez-oim.org/index.php/board,1.0.html  :D

Je te dis vite fait comment j'ai fait.
Chaque page de Google :
Ctrl +A, clic droit copier les liens .....
Je colle tout dans textpad.
A nouveau sur la page de Google, ouvrir les liens ..... dans des onglets, pour vérifiés ceux qui sont bloqués par robot.txt.
Je les supprime dans mon éditeur.
Je fais ça pour chaque page.
Dans textpad, je classe tout par ordre alphanumérique pour vérifier les éventuels doublons.
Après, j'ai ajouté les .html

Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 21:22
Oh merde !
En sélectionnant tout, on peut juste prendre des liens avec un clic droit ?!! :??

Ben merde alors !
Celle là, je connaissais pas ! :ge:

Ah oui ! Du coup, ça simplifie les choses ! ;)
Cool ! :))

Je te dois combien du coup ? :aa
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 21:24
Attend, faut que je vérifie que ce n'est pas une extension de Firefox.
J'en soupçonne une que j'emploie depuis si longtemps qu'elle fait partie des meubles.
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 21:29
Oui, c'est bien cette extension.
C'est text link.
https://addons.mozilla.org/fr/firefox/addon/text-link/
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 21:30
Ah oui !
Effectivement...
Si je sélectionne tout, je ne peux que copier tout, pas les liens...

C'est quoi comme extension firefox ?

EDIT
Ok !
Merci ! Je viens de lire ta réponse. :))
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 21:32
Bon !
Je te dois combien ? :gk:
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 21:38
C'est cadeau.  O:-)
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 21:40
Oooooh !
Même pas une faveur sexuelle ? O:-)
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 21:51
 ;D

https://www.youtube.com/watch?feature=player_embedded&v=CodmlmxpZeQ




Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 22:00
Roooh ! Ben quoi ?
Tu veux même pas négocier ? :D

Ben tant pis.... :gk:


PS :
Quand tu as l'adresse de la vidéo :
http://www.youtube.com/watch?v=CodmlmxpZeQ/

Vire le "watch?" et remplace le "=" par "/" ;)
http://www.youtube.com/v/CodmlmxpZeQ
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 22:10
Fallait me laisser le temps de le faire, je l'avais modifiée., et j'y étais arrivé.
quand j'ai envoyé, le post, la vidéo s'est affichée, et il n'y avait pas « Modifié: Aujourd'hui à 21:55 par alex » .
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 22:15
Oups ! :-[
Désolé, je recommencerai plus... :gf:

Tu m'en veux ? :gk:
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 22:19
Autant que tu le saches, je ne supporte pas qu'on fasse quelque chose à ma place.  :gk:
Si j'ai des difficultés, je recommence jusqu'à ce que j'y arrive par moi-même.
C'est ma façon à moi d'apprendre.

Alors tout à l'heure, tu as dit que je pouvais te demander quelque chose, j'ai trouvé.
S'il te plait, Alex, ne modifie plus mes posts.  :gf:
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 22:28
Ok ma chérie ! Pardon ! :blank:

Mais t'as pas vu ?
Sous chaque tuto, la place est réservée à des posts d'essai ou de questions...
 :gf:


EDIT
J'ai retiré mon "justificatif" de ton post... ;)
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 22:32
Non, ça, je n'ai pas vu, mais j'avais déjà réussi à mettre une vidéo, et la prévisualisation ne marche pas.

J'oubliais, je ne t'en veux pas.  :-*
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 22:36
Si tu regardes bien chaque tuto de vidéo ou audio, tu peux répondre pour faire des essais ou poser des questions, c'est ce que je voulais dire... ;)

Si, la prévisualisation marche. :gj:

C'est vrai ? Tu m'en veux pas ? YES ! :gq:
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 22:39
Non, la prévisualisation ne marche pas chez moi, sous Firefox.
Elle marchait avec IE.

(http://i.imgur.com/PraHs8y.png)

Et rien ne se passe.
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 22:49
Ah merde !
J'ai juste testé sous Opera et Internet Explorer.... :-[

Pourtant, ça devrait marcher sur tous les navigateurs. J'ai la certification W3C...
A la création du forum, j'avais mis un point d'honneur à une compatibilité tous navigateurs ! (certification W3C XHTML 1.0 & CSS 3)
Quoi que.... Quand on se lance dans le flash, le W3C ne suit pas..... :gk:
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le lundi 03 juin 2013, 22:53
Je viens d'essayer avec IE, la prévisualisation marche.
C'est Firefox qui merdouille, pourtant, tout est autorisé dans noscript.

Te casse pas la têt, ça vient surement de moi, une extension peut-être.
Je chercherai plus tard, je vais me coucher, je dois me lever tôt demain.
Bonne nuit.
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le lundi 03 juin 2013, 23:01
Avec les applications flash, c'est possible que ça merde.... Ca dépend du contenu....
Sinon, je n'aurais pas la certification W3C.
Avec cette certification, je suis certain que mon forum tourne sur tous les navigateurs et aussi bien sur PC que sur Mac....
C'est pour ça que je ne me suis pas emmerdé à tester le forum sur tous les navigateurs existant.
A partir du moment où tu es reconnu W3C, tu es compatible de partout. :gq:

Tu vas au lit ?
Toute seule ? :gk:
Bon !
Ben bonne nuit ma chérie ! :-*
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le jeudi 06 juin 2013, 10:01
Pfiou ! Boulot de merde ! :(

Après vérifications, Google possédait 113 pages "racines" indexées.
Avec les sous pages (les topics de plusieurs pages, le cache, etc...), cela représentait plus de 700 pages.

Grâce à Paglop, j'ai pu demander la destruction de 91 de ces pages "racines" de l'index Google ainsi que du cache. Boulot de fou ! :ge:
Mais bon ! Enfin, c'est fait ! :))

De toute évidence, il manquerait 22 pages. (113-91)
On verra bien quand ces 91 pages auront été détruites de l'index et du cache...

Je relancerai une recherche et, ce n'est pas 22 pages qui me feront reculer après tout ça ! ;)
Il est possible que ces pages ne révèlent rien en vertu du fichier robots.txt (https://chez-oim.org/robots.txt).
Auquel cas, tout serait parfait ! :)

Je tiens quand même à remercier chaleureusement Paglop pour le gros, gros, gros dépannage ! :go:
 :-*
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le jeudi 06 juin 2013, 20:14
Voilà !
Non mais ! ;)

(https://static.chez-oim.org/imageshack/googlebotoo.jpg)


Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le jeudi 06 juin 2013, 20:34
Les autres moteurs de recherche, tu ne les bloque aussi ?

Ils sont moins intrusifs, mais on te trouve quand même chez bing.

(http://i.imgur.com/DOczGB4.png)


Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le jeudi 06 juin 2013, 20:53
Le problème, c'est que je ne sais pas comment faire avec les autres moteurs de recherche....
Google, je sais.
Les autres, ils ne proposent rien pour effacer les pages indexées....
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: paglop le jeudi 06 juin 2013, 21:05
Vois avec leur Webmaster Tool
Chez Yahoo, il y a les mêmes résultats que chez Bing, c'est normal, ils sont potes.
Ils ont fusionné leur Webmaster Tool.

J'ai trouvé ça :
http://blog.userland.fr/comment-supprimer-un-site-des-moteurs-de-recherche/

Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le jeudi 06 juin 2013, 21:39
Ben en attendant, c'est quand même plus facile chez Google !
Ils savent que je suis proprio du site et ne me font pas chier ! ;)
Titre: Re : Cherche bénévole pour un petit boulot gentil...
Posté par: alex le mercredi 12 juin 2013, 19:46
Ah ben voilà !
Je viens de faire une recherche, ça va déjà mieux ! :gq:

Encore quelques adresses et on sera bon ! :))

Pfff !
Va encore falloir que j'écoute Paglop en jetant un oeil sur les autres robots... :gh: