Recuperer les donnees de plusieurs matchs

Bon je voudrai recuperer les donnes (buteur, possession par exemple) de plusieurs matchs mais vu le nombre j'ai pas vraiment envie de le faire a la main. Je sais il y a ca dans le reglement :

De scanner le site ou de créer, d'utiliser ou de distribuer des programmes qui automatisent le fonctionnement du jeu (sauf dans le cas de programmes explicitement autorisés par les développeurs du jeu). Il est aussi interdit d'inclure des pages du site dans d'autres sites ou programmes.

mais je sais pas si la methode suivante rentre dans cette categories

• creer un HTML sur son ordi avec des liens sur les matchs ( http://www.hattrick.org/Club/Matches/Match.aspx?matchID=212035940 par exemple)
  
• ouvrir tous les liens dans des onglets (un peu de javascript dans la barre du navigateur ca devrai etre bon
  
• se servir d'add-on firefox pour creer une macro qui extrait les infos de ces onglets (je viens de regarder et il y a visiblement moyen de faire des trucs sympa exporte apres en CSV ou fichier text)
  

Apres quand on a les donnees dans un ou des fichiers sur son PC un peu de script et c'est facile de generer des fichiers Excel rapidement. Ca m'etonnerait que certain (dans le CORS par exemple) se soit pas deja poser ce genre de question

ben à part Yll, ya pas d'informaticien dans le CORS et comme Yll est un peu pris .....

C'est clair que c'est beaucoup trop compliquer pour quasiment nous tous... AU CORS on relève toute nos stats à la main...

nerico_9 a écrit:Bon je voudrai recuperer les donnes (buteur, possession par exemple) de plusieurs matchs mais vu le nombre j'ai pas vraiment envie de le faire a la main. Je sais il y a ca dans le reglement :

De scanner le site ou de créer, d'utiliser ou de distribuer des programmes qui automatisent le fonctionnement du jeu (sauf dans le cas de programmes explicitement autorisés par les développeurs du jeu). Il est aussi interdit d'inclure des pages du site dans d'autres sites ou programmes.

mais je sais pas si la methode suivante rentre dans cette categories

• creer un HTML sur son ordi avec des liens sur les matchs ( http://www.hattrick.org/Club/Matches/Match.aspx?matchID=212035940 par exemple)
  
• ouvrir tous les liens dans des onglets (un peu de javascript dans la barre du navigateur ca devrai etre bon
  
• se servir d'add-on firefox pour creer une macro qui extrait les infos de ces onglets (je viens de regarder et il y a visiblement moyen de faire des trucs sympa exporte apres en CSV ou fichier text)
  

Apres quand on a les donnees dans un ou des fichiers sur son PC un peu de script et c'est facile de generer des fichiers Excel rapidement. Ca m'etonnerait que certain (dans le CORS par exemple) se soit pas deja poser ce genre de question

Alors pour te répondre Nerico, c'est exactement ce qu'il s'appelle scanner un site. Maintenant, si tu n'as pas énormément de matchs, tu peux faire en sortes que ton script soit assez lent (mettre des pauses) pour laisser croire à une intervention humaine et tu ne te feras pas chopper. Par contre, si tu as beaucoup de matchs à relever, tu ne pourras pas te permettre de mettre beaucoup de temps et du coup, ton script sera plus facile à repérer. A toi de voir si le risque en vaut le coup.

Maintenant, si tu ne veux prendre aucun risque, il y a la solution HO. (Hattrick Organiser) Apparemment, tu as un minimum de connaissance en informatique. HO te permet de télécharger la totalité des données de n'importe quel match juste en lui donnant l'id. Après, il ne te reste plus qu'à exploiter les données qu'il a dans sa base. Tu peux générer des fichiers si tu préfères travailler par fichier.

Dans l'idéal, si tu sais programmer en java, tu fais un plugin pour HO te permettant de faire exactement ce dont tu as besoin.

Yll93 a écrit:

nerico_9 a écrit:Bon je voudrai recuperer les donnes (buteur, possession par exemple) de plusieurs matchs mais vu le nombre j'ai pas vraiment envie de le faire a la main. Je sais il y a ca dans le reglement :

De scanner le site ou de créer, d'utiliser ou de distribuer des programmes qui automatisent le fonctionnement du jeu (sauf dans le cas de programmes explicitement autorisés par les développeurs du jeu). Il est aussi interdit d'inclure des pages du site dans d'autres sites ou programmes.

mais je sais pas si la methode suivante rentre dans cette categories

• creer un HTML sur son ordi avec des liens sur les matchs ( http://www.hattrick.org/Club/Matches/Match.aspx?matchID=212035940 par exemple)
  
• ouvrir tous les liens dans des onglets (un peu de javascript dans la barre du navigateur ca devrai etre bon
  
• se servir d'add-on firefox pour creer une macro qui extrait les infos de ces onglets (je viens de regarder et il y a visiblement moyen de faire des trucs sympa exporte apres en CSV ou fichier text)
  

Apres quand on a les donnees dans un ou des fichiers sur son PC un peu de script et c'est facile de generer des fichiers Excel rapidement. Ca m'etonnerait que certain (dans le CORS par exemple) se soit pas deja poser ce genre de question

Alors pour te répondre Nerico, c'est exactement ce qu'il s'appelle scanner un site. Maintenant, si tu n'as pas énormément de matchs, tu peux faire en sortes que ton script soit assez lent (mettre des pauses) pour laisser croire à une intervention humaine et tu ne te feras pas chopper. Par contre, si tu as beaucoup de matchs à relever, tu ne pourras pas te permettre de mettre beaucoup de temps et du coup, ton script sera plus facile à repérer. A toi de voir si le risque en vaut le coup.

Maintenant, si tu ne veux prendre aucun risque, il y a la solution HO. (Hattrick Organiser) Apparemment, tu as un minimum de connaissance en informatique. HO te permet de télécharger la totalité des données de n'importe quel match juste en lui donnant l'id. Après, il ne te reste plus qu'à exploiter les données qu'il a dans sa base. Tu peux générer des fichiers si tu préfères travailler par fichier.

Dans l'idéal, si tu sais programmer en java, tu fais un plugin pour HO te permettant de faire exactement ce dont tu as besoin.

J'ai pense aussi a fire un plugin HO, je suis justement entrain de regarder ca Bon le plus gros probleme avec cette solution ces ont mes (tres) faible connaissance en java. Mais bon j'ai du temps au boulot cette semaine je pense et je trouverai bien des cours de java sur le net

Juste pour etre sur de pas avoir louper un truc. Il est pas mis explicitement sur le site qu'il est interdit de scanner Alltid ?

nerico_9 a écrit:Juste pour etre sur de pas avoir louper un truc. Il est pas mis explicitement sur le site qu'il est interdit de scanner Alltid ?

Alltid et Hattrick sont 2 sites totalement différents. Le règlement du site Alltid doit se trouver sur Alltid, Hattrick n'a aucun droit sur ce site. Donc si Alltid ne dit pas qu'il est interdit de le scanner, là oui tu peux.

Perso, je m'étais intéressé à FranceStats pour faire ça, mais manque de bol au moment où je m'y suis mis, le site a eu un problème d'hébergeur et du coup est devenu inaccessible. Je ne m'y suis pas remis depuis sa réouverture.

Pour moi l'avantage de FranceStats était de pouvoir pomper toutes les infos nécessaires facilement sans avoir besoin d'un compte pour s'y connecter. (Accès direct, simple et rapide)

Yll93 a écrit:

nerico_9 a écrit:Juste pour etre sur de pas avoir louper un truc. Il est pas mis explicitement sur le site qu'il est interdit de scanner Alltid ?

Alltid et Hattrick sont 2 sites totalement différents. Le règlement du site Alltid doit se trouver sur Alltid, Hattrick n'a aucun droit sur ce site. Donc si Alltid ne dit pas qu'il est interdit de le scanner, là oui tu peux.

Perso, je m'étais intéressé à FranceStats pour faire ça, mais manque de bol au moment où je m'y suis mis, le site a eu un problème d'hébergeur et du coup est devenu inaccessible. Je ne m'y suis pas remis depuis sa réouverture.

Pour moi l'avantage de FranceStats était de pouvoir pomper toutes les infos nécessaires facilement sans avoir besoin d'un compte pour s'y connecter. (Accès direct, simple et rapide)

Je savais deja que c'etait deux site differents Ma question etait plus "j'ai rien vu sur Alltid interdisant de scanner, corrigez moi si vous savez que je me trompe". Apres l'avantage d'Alltid sur FranceStats c'est que tu peux voir les notes des deux equipes et que tu as plus de stats deja calculees.

Autre question: il est possible de calculer au moins approximativement la possession avec les notes AH-points pour le milieu des deux equipes ?

nerico_9 a écrit:

Yll93 a écrit:

nerico_9 a écrit:Juste pour etre sur de pas avoir louper un truc. Il est pas mis explicitement sur le site qu'il est interdit de scanner Alltid ?

Alltid et Hattrick sont 2 sites totalement différents. Le règlement du site Alltid doit se trouver sur Alltid, Hattrick n'a aucun droit sur ce site. Donc si Alltid ne dit pas qu'il est interdit de le scanner, là oui tu peux.

Perso, je m'étais intéressé à FranceStats pour faire ça, mais manque de bol au moment où je m'y suis mis, le site a eu un problème d'hébergeur et du coup est devenu inaccessible. Je ne m'y suis pas remis depuis sa réouverture.

Pour moi l'avantage de FranceStats était de pouvoir pomper toutes les infos nécessaires facilement sans avoir besoin d'un compte pour s'y connecter. (Accès direct, simple et rapide)

Je savais deja que c'etait deux site differents Ma question etait plus "j'ai rien vu sur Alltid interdisant de scanner, corrigez moi si vous savez que je me trompe". Apres l'avantage d'Alltid sur FranceStats c'est que tu peux voir les notes des deux equipes et que tu as plus de stats deja calculees.

Autre question: il est possible de calculer au moins approximativement la possession avec les notes AH-points pour le milieu des deux equipes ?

Je n'ai rien vu interdisant de scanner Alltid, mais j'avoue ne pas avoir trop cherché, donc je te conseille de le faire.


Pour la possession :
PossEqA = AH-P_Milieu_EqA / (AH-P_Milieu_EqA + AH-P_Milieu_EqB)
PossEqB = AH-P_Milieu_EqB / (AH-P_Milieu_EqA + AH-P_Milieu_EqB)
Tout simplement...

nerico_9 a écrit:Mais bon j'ai du temps au boulot cette semaine je pense et je trouverai bien des cours de java sur le net

Le site du zéro

nerico_9 a écrit:

Yll93 a écrit:

nerico_9 a écrit:Juste pour etre sur de pas avoir louper un truc. Il est pas mis explicitement sur le site qu'il est interdit de scanner Alltid ?

Alltid et Hattrick sont 2 sites totalement différents. Le règlement du site Alltid doit se trouver sur Alltid, Hattrick n'a aucun droit sur ce site. Donc si Alltid ne dit pas qu'il est interdit de le scanner, là oui tu peux.

Perso, je m'étais intéressé à FranceStats pour faire ça, mais manque de bol au moment où je m'y suis mis, le site a eu un problème d'hébergeur et du coup est devenu inaccessible. Je ne m'y suis pas remis depuis sa réouverture.

Pour moi l'avantage de FranceStats était de pouvoir pomper toutes les infos nécessaires facilement sans avoir besoin d'un compte pour s'y connecter. (Accès direct, simple et rapide)

Je savais deja que c'etait deux site differents Ma question etait plus "j'ai rien vu sur Alltid interdisant de scanner, corrigez moi si vous savez que je me trompe". Apres l'avantage d'Alltid sur FranceStats c'est que tu peux voir les notes des deux equipes et que tu as plus de stats deja calculees.

Autre question: il est possible de calculer au moins approximativement la possession avec les notes AH-points pour le milieu des deux equipes ?

Roooh ! T'as pas honte de poser des questions comme ça...

Fabinou_2001 a écrit:

nerico_9 a écrit:

Yll93 a écrit:

nerico_9 a écrit:Juste pour etre sur de pas avoir louper un truc. Il est pas mis explicitement sur le site qu'il est interdit de scanner Alltid ?

Alltid et Hattrick sont 2 sites totalement différents. Le règlement du site Alltid doit se trouver sur Alltid, Hattrick n'a aucun droit sur ce site. Donc si Alltid ne dit pas qu'il est interdit de le scanner, là oui tu peux.

Perso, je m'étais intéressé à FranceStats pour faire ça, mais manque de bol au moment où je m'y suis mis, le site a eu un problème d'hébergeur et du coup est devenu inaccessible. Je ne m'y suis pas remis depuis sa réouverture.

Pour moi l'avantage de FranceStats était de pouvoir pomper toutes les infos nécessaires facilement sans avoir besoin d'un compte pour s'y connecter. (Accès direct, simple et rapide)

Je savais deja que c'etait deux site differents Ma question etait plus "j'ai rien vu sur Alltid interdisant de scanner, corrigez moi si vous savez que je me trompe". Apres l'avantage d'Alltid sur FranceStats c'est que tu peux voir les notes des deux equipes et que tu as plus de stats deja calculees.

Autre question: il est possible de calculer au moins approximativement la possession avec les notes AH-points pour le milieu des deux equipes ?

Roooh ! T'as pas honte de poser des questions comme ça...

Je pensai bien que ca devai marche comme ca et mes tests avec mes deux derniers matchs validaient le truc mais je preferai etre sur avant de mettre ca dans Excel ou dans le script

c'est bon j'ai rcupere toutes les donnes Alltid pour le matchs CDR de l'IDF Par contre maintenant que j'ai tout ca dans un fichier Excel si vous avez un lien sur un cours Excel je suis preneur

Bah qu'est ce que tu veux en faire de tes données?

Au passage, si tu as un petit programme pour récupérer tes données sur Alltid, je le veux bien si ça ne te dérange pas.

Yll93 a écrit:
Bah qu'est ce que tu veux en faire de tes données?

j'avais pense a ca

• BP/BC
  
• % V/N/D
  
• max Hatstats (total, def, mil, att)
  
• moyenne Hatstats (total, def, mil, att)
  
• max étoiles (total, def, mil, att)
  
• moyenne étoiles (total, def, mil, att)
  
• max loddarstat
  
• moyenne loddarstat
  
• correlation entre possession et victoire
  
• formation utilisées
  
• tactique utilises et niveaux
  
• .....
  

le tout en globale (toutes les equipes d'IDF), par div et par équipe. Ce sont les idées que j'ai eu au fur et a mesure que j'ai commence a regarde ça mais ça dépendra aussi beaucoup du temps que j'aurai de dispo (j'ai même pas encore mise a jour le sujet sur la conf IDF et la la priorité ça va être l'organisation du 1/8eme). Apres pour en revenir a la generation des stats j'ai toutes les donnees necessaires dans ma feuille excel mais j'ai juste fait un peu de stats au boulot (les chefs ca aime bien une feuille Excel avec des stats pour voir la progression ) et je pense meme avoir plus de connaissance en macro VB

Yll93 a écrit:Au passage, si tu as un petit programme pour récupérer tes données sur Alltid, je le veux bien si ça ne te dérange pas.

Non pas de problème. La c'est pas encore très "propre" donc je préfère le mettre a disposition quand je l'aurai un peu amélioré. Pour l'instant ca marche comme ca:

• j'ai récupéré la liste des matchs sur le site de la CDR (d'où les remarques fait dans l'autre sujet) et j'ai tous mis dans un fichier texte
  
• un premier script perl me génère un fichier Excel avec la liste des matchs et aussi un fichier iim (macro firefox http://wiki.imacros.net/Main_Page) qui va aller scanner alltid (j'ai reverifier mais j'ai rien vu l'interdisant) pour récupérer l'historique complet des matchs pour chaque equipe (sauvée dans un fichier html par équipe <équipe_id>.htm)
  
• un deuxieme script perl qui parse les html et la fauille excell avec la liste des matchs pour tout resortir dans un fichier excel
  

ca fait un peu complique mais j'ai pas trop eu le temps de faire mieux J'ai vu que imacros doit pouvoir interagir avec perl, tcl et autres donc il doit y avoir moyen de faire qqch de plus simple quand j'aurai plus de temps

:bave:

nerico_9 a écrit:

Yll93 a écrit:
Bah qu'est ce que tu veux en faire de tes données?

j'avais pense a ca

• BP/BC
  
• % V/N/D
  
• max Hatstats (total, def, mil, att)
  
• moyenne Hatstats (total, def, mil, att)
  
• max étoiles (total, def, mil, att)
  
• moyenne étoiles (total, def, mil, att)
  
• max loddarstat
  
• moyenne loddarstat
  
• correlation entre possession et victoire
  
• formation utilisées
  
• tactique utilises et niveaux
  
• .....
  

le tout en globale (toutes les equipes d'IDF), par div et par équipe. Ce sont les idées que j'ai eu au fur et a mesure que j'ai commence a regarde ça mais ça dépendra aussi beaucoup du temps que j'aurai de dispo (j'ai même pas encore mise a jour le sujet sur la conf IDF et la la priorité ça va être l'organisation du 1/8eme). Apres pour en revenir a la generation des stats j'ai toutes les donnees necessaires dans ma feuille excel mais j'ai juste fait un peu de stats au boulot (les chefs ca aime bien une feuille Excel avec des stats pour voir la progression ) et je pense meme avoir plus de connaissance en macro VB

Yll93 a écrit:Au passage, si tu as un petit programme pour récupérer tes données sur Alltid, je le veux bien si ça ne te dérange pas.

Non pas de problème. La c'est pas encore très "propre" donc je préfère le mettre a disposition quand je l'aurai un peu amélioré. Pour l'instant ca marche comme ca:

• j'ai récupéré la liste des matchs sur le site de la CDR (d'où les remarques fait dans l'autre sujet) et j'ai tous mis dans un fichier texte
  
• un premier script perl me génère un fichier Excel avec la liste des matchs et aussi un fichier iim (macro firefox http://wiki.imacros.net/Main_Page) qui va aller scanner alltid (j'ai reverifier mais j'ai rien vu l'interdisant) pour récupérer l'historique complet des matchs pour chaque equipe (sauvée dans un fichier html par équipe <équipe_id>.htm)
  
• un deuxieme script perl qui parse les html et la fauille excell avec la liste des matchs pour tout resortir dans un fichier excel
  

ca fait un peu complique mais j'ai pas trop eu le temps de faire mieux J'ai vu que imacros doit pouvoir interagir avec perl, tcl et autres donc il doit y avoir moyen de faire qqch de plus simple quand j'aurai plus de temps

Alors... Perl, jamais essayé, je ne connais que de nom...
Firefox ne me sert qu'à vérifier qu'il ne me saccage pas les sites web que je développe, donc les macros Firefox, connais pas non plus...

Autant dire que si je veux y regarder, va d'abord falloir que je me mette au Perl et aux macros Firefox...


Ne sachant pas comment Perl fait pour générer un fichier Excel, ça va m'être difficile de t'aider pour tes stats. Peux-tu écrire des formules Excel ou es-tu limité à écrire des valeurs dans les cellules d'Excel?

Ah non, au secours, pas de Perl

N'empêche, j'ai hâte de voir ce que tu vas faire de toutes ces données Eric (si besoin je dois pouvoir me débrouiller en Java)

Touffy a écrit:Ah non, au secours, pas de Perl

N'empêche, j'ai hâte de voir ce que tu vas faire de toutes ces données Eric (si besoin je dois pouvoir me débrouiller en Java)

Perso, j'aurais largement préféré qu'il le fasse en java...

Yll93 a écrit:

Touffy a écrit:Ah non, au secours, pas de Perl

N'empêche, j'ai hâte de voir ce que tu vas faire de toutes ces données Eric (si besoin je dois pouvoir me débrouiller en Java)

Perso, j'aurais largement préféré qu'il le fasse en java...

Je pense toujours a faire le plugin HO (tu n'as pas toutes les données sur Alltid) mais déjà que ça va être plus que tendu de sortir les stats avant les 1/8eme en java c'était même pas pensable (je suis pas un débutant mais presque). Et puis perl c'est très bien tu peux faire plein de trucs avec Il y a plein de package qui existent pour faire du html, du MySQL, écrire et lire des .xls (oui Yll je peux faire des formules, même au boulot j'ai pas trouver de limite au package WriteExcel sauf le dimensionement automatique des colonnes ou des lignes)

nerico_9 a écrit:

Yll93 a écrit:

Touffy a écrit:Ah non, au secours, pas de Perl

N'empêche, j'ai hâte de voir ce que tu vas faire de toutes ces données Eric (si besoin je dois pouvoir me débrouiller en Java)

Perso, j'aurais largement préféré qu'il le fasse en java...

Je pense toujours a faire le plugin HO (tu n'as pas toutes les données sur Alltid) mais déjà que ça va être plus que tendu de sortir les stats avant les 1/8eme en java c'était même pas pensable (je suis pas un débutant mais presque). Et puis perl c'est très bien tu peux faire plein de trucs avec Il y a plein de package qui existent pour faire du html, du MySQL, écrire et lire des .xls (oui Yll je peux faire des formules, même au boulot j'ai pas trouver de limite au package WriteExcel sauf le dimensionement automatique des colonnes ou des lignes)

Je ne suis pas du tout contre le Perl, loin de là... C'est juste que je ne connais pas donc pour le moment, je ne peux pas vraiment t'aider...

Il y a des trucs que ke trouve louche avec Alltid

si on prend l'historique complet des matchs de clairefontaine (http://alltid.org/team/291359/matchhistory/) on a

• Nicae Clairefontaine (ext)
  
• Clairefontaine Foix Foot Club (dom)
  
• CTFC Clairefontaine (ext)
  
• P.I.M.P.S. Clairefontaine (ext)
  
• Clairefontaine Le spartag (dom)
  

et la liste des matchs sur Hattrick:

• Clairefontaine - Nicae 5 - 0 (dom)
  
• Clairefontaine - Foix Foot Club 4 - 3 (dom)
  
• Clairefontaine - CTFC 6 - 2 (dom)
  
• P.I.M.P.S. - Clairefontaine 1 - 5 (ext)
  
• Clairefontaine - Le spartag (dom)
  

j'ai loupe un truc ou il y a bien un souci ? Bon la je me dit que ca fait rien que j'ai la liste des matchs avec le bon ordre dans un fichier Excel donc je pourrai me debrouiller

Maintenant on passe au stats avec pour exemple le match Nicae- Clairefontaine. Bon comme on peut s'en douter les buts marques sont eux aussi inverse entre alltid et hattrick. La je regrade les stats pour voir si c'est pareil et je trouve ca:
Nicae: 211 47 39 35
clairefontaine: 121 62 87 62

Alors je suis assez specialiste des erreurs d'etourderie en maths mais vu que le premier chiffre c'est la AH total ca devrai bien etre la some des trois autres (def, milieu et attaque), non ? A moins que je sois vraiment tres fatigue 47+39+35 ca fait 121 et pas 211. Idem pour 62+87+32 qui font 211 et pas 121

Si un de vous peut regarder ca serai sympa

J'ai regardé ca pour mon match (CTFC):

Alors il se trouve qu'alltid m'affiche à domicile, alors que cest clairefontaine qui a recu... Sinon le AH total est en face de la bonne équipe, le Loddar et les AH secteurs sont en face de la mauvaise équipe !

j'ai déjà remarquer pas mal de "bugs" sur alltid.
J'ai un pote IRL qui joue et je suis son équipe et ses performances et une fois il a réussi à jouer contre lui même avec une note de 0

autrement dit avec des bugs comme ca il est impossible de faire des stats en recuperant les donnees de alltid