[GEx] Gatherer Extractor v7.3 – Database & Pics Assistant

Le 26/09/2016 à 17:58, Zorian avait écrit ...

Sans blagues, je trouve que tous les sites ou l'on peut consulter les cartes, et faire des decks sont a chier graphiquement et ergonomiquement. J'ai l'impression de voir des sites des années 90... Du coup je me lance avec des technologie plus actuelles.
 

Hey, note que tu n'es probablement pas le seul à avoir fait ce constat... et à essayer de concevoir, voire créer quelque chose de mieux.
Mais ca prend du temps. Depuis combien de temps tu travailles sur ton projet ?
 

Bah disons que pour l'instant j'y ai déjà passé quelques jours de DEV. Mais comme je refais tout from scratch, ça risque de me prendre du temps Je me base sur du PHP/MySQL et Backbone JS, Stylus, Bootstrap + des librairies à foison, les meilleures que j'ai pu croiser dans mon boulot.

Le site existe déjà (http://www.anim-magic.org) mais il tourne sur un Wordpress. Là je recommence tout, il faut donc que je gère le backoffice et pour le front : les articles, un calendrier, un forum, la collection des cartes avec filtrage, un deckbuilder innovant, un classement, etc...

Je vous ferais signe lorsque j'aurais terminé et qu'il sera en ligne ! Faut compter fin d'année je pense :p

Le 26/09/2016 à 17:58, Zorian avait écrit ...
Bonjour !

Je suis développeur web, et joueur de Magic a mes heures perdues.
Je joue en association dans le Nord de la France (on est une 40aine chez AnimMagic), et je me lance dans la création de leur site pour leur donner plus de visu et mieux communiquer en interne.
La petite cerise sur le gâteau, ça serait d'avoir la collection de carte entière, avec scans, en FR ET MEME soyons fou, un deck builder.
Oui oui, je veux concurrencer Magic Ville
Sans blagues, je trouve que tous les sites ou l'on peut consulter les cartes, et faire des decks sont a chier graphiquement et ergonomiquement. J'ai l'impression de voir des sites des années 90... Du coup je me lance avec des technologie plus actuelles.

Alors tout ça pour dire que vous avez fait et faite encore un travail de ouf avec cette extractor, qui je dois l'avouer est la meilleure solution que j'ai trouvé jusque là pour remplir ma BDD et récupérer les scans.
Export SQL, choix du rangement des images, etc... sont des outils vraiment très pratique pour un mec comme moi ^^ Bref, chapeau bas a toute la team.

Ceci dit j'ai quelques remarques interrogations :

1/ Pour Kaladesh, pas moyen de récupérer les textes/scans Français, j'ai beau manipulé toutes les options, changer de serveurs, rien n'y fait. Quelqu'un a une idée ? C'est peut être normal car l'extension est récente, mais sur les deux serveurs en direct, j'ai pourtant bien les infos en FR.

2/ Les scans, si j'ai bien compris soit on veut les images en 312*445px il faut aller les prendre sur magiccards.info, mais elles sont en Anglais. Si je veux du FR, alors je choisi gatherer, mais les images sont limitées en 223*310px.
Je doute qu'on me dise oui, mais y a-t-il un moyen pour avoir le beurre et l'argent du beurre ?

3/ Lorsque je vais dans les options, on peut choisir les noms de colonnes et de tables pour un export SQL. Je laisse les valeurs par défaut, pas envie de me péter la rondelle, mais lorsque j'exporte, les enregistrements de la table Nset comporte plus d'une dizaine de colonne, alors que dans les options j'en vois beaucoup moins. Y e t-il une explication logique à ça ? Est ce que j'ai loupé un truc dans la conf ?

4/ Je reviens sur magic ville, je n'ai pas l'impression qu'ils utilisent votre extractor pour récupérer leur cartes, quelqu'un a une idée de leur technique ?

Pour infos, j'utilise la nouvelle version de votre logiciel, à savoir la 4.0c.

Je m'excuse d'avance, car je risque fort de vous les briser ces prochains jours en vous tabassant de questions...

A bientôt o/
 

Salut Zorian,

Pour répondre directement à tes questions :

1/ Les infos des cartes en langues étrangères (comprendre non-anglais) sont extraites de magiccards.info. Tant que l'édition ne sera pas dispo sur ce site, aucune donnée ne sera extraite. Généralement, la MaJ de magiccards.info intervient quelques jours suivants la release officielle du set. Kaladesh n'est même pas encore sorti, donc oui, c'est normal de ne pas pouvoir tout extraire. C'est encore un peu trop tôt.

2/ Oui, les Low quality scans (LQ scans) sont issus du gatherer. Les High quality scan (HQ scans) de magiccards.info. Pour info se sont en fait des Mid Quality car ce sont les HQ de la team slightlymagic redimensionné. Tu ne pourras pas avoir des HQ ou Mid-Q en langues étrangères car il n'existe pas. Les scans FR par ex proposés sur magiccards.info sont les scans du gatherer agrandis, avec une perte notable de qualité.

3/ Il faut bien comprendre que l'item "Légalité" dans les options d'export SQL cache en fait 8 colonnes : une colonne de légalité par format. Idem pour "Capacité en langue étrangère", tu as derrière une colonne pour chacune des langues étrangères dans laquelle Magic est éditée (FR, DE, IT, ES, PT, RU, JP, TW, ZH)

4/ Je ne sais pas d'où viennent les scans de Magic Ville.

Tu peux poser autant de questions que tu veux tu sais, tu seras toujours le bienvenu. J'ai pas toujours le temps de répondre, mais je fais mon possible.

Un truc important concernant l'extractor, c'est qu'il est adapté à un type de format de page du gatherer de wizards et de magiccards.info. Quand ceux-ci changent des choses sur la mise en page etc. généralement, l'extraction ne se passe pas si bien. J'essaie de corriger aussi vite que possible.

Je vous ferais signe lorsque j'aurais terminé et qu'il sera en ligne ! Faut compter fin d'année je pense

Par expérience (Gatherer Extractor, The Vault, mon appli d'Astronomie et un livre associé etc.), il faut multiplier le temps initialement prévu par un facteur 3x ou 4x... si c'est pas 10x. Je suis du genre persévérant et je n'abandonne jamais un projet commencé, mais il y a plein de facteurs extérieurs qui peuvent significativement augmenter le temps de développement/debuggage. La motivation peut aussi un peu retomber quand on pense à la montagne de boulot qui reste à faire. Perso, si je développe ces codes et que je les offre à la communauté, c'est vraiment par passion pour MtG et la programmation, car je n'en tire aucun profit...

J'ai une petite question, tant que t'es là Chaudakh. Quand tu récupères un scan en français sur le site du gatherer, alors que le scan de la carte n'existe pas en français (genre une carte du Pacte des Guildes par exemple), ça récupère, à la place, un dos de carte. 
D'où vient ce dos de carte, c'est une image par défaut que tu as mises, ou bien le scan concret que tu récupères du gatherer ?

Le 29/09/2016 à 12:07, Tsurugi-Aisuhino avait écrit ...
J'ai une petite question, tant que t'es là Chaudakh. Quand tu récupères un scan en français sur le site du gatherer, alors que le scan de la carte n'existe pas en français (genre une carte du Pacte des Guildes par exemple), ça récupère, à la place, un dos de carte. 
D'où vient ce dos de carte, c'est une image par défaut que tu as mises, ou bien le scan concret que tu récupères du gatherer ?

Oui, c'est un scan HQ du dos des cartes Magic, ressource interne dans le logiciel. A noter qu'aucun fichier n'est créé, c'est juste de l'affichage.
 

Mais du coup, quand tu sors un scan supposé FR, alors qu'il n'existe pas, c'est possible de le sortir EN à la place ? (genre une option cochable qui permettrait ça).

Genre un "Scan FR ou EN si non trouvé" 

Oui, je peux ajouter l'option dans les prochaines versions si vous en avez l'utilité

J'adorerai 

Merci Chaudakh pour les réponses a mes questions !

J'ai déjà extrait toute la BDD avec les légalités et j'ai tout intégré a ma BDD. Mise a part le changement de structure pour donner un vrai typage aux champs (INT, VARCHAR au lieu de TEXT, sinon les index je me les mets ou je pense ^^)

Vraiment un très grand bravo pour ce travail que tu fais, je mesure l'ampleur du travail quand je vois les possibilités de ton logiciel d'extract.

Et pour infos, j'ai déjà multiplié par 2 le temps que j'avais estimé , après, c'est la disponibilité en perso qui n'est pas constante, je vous tiendrais quand meme au jus o/

Tchou

Ca c'est cadeau du teasing de la partie consultation des cartes.

http://imgur.com/a/h4UBW

C'est propre, Zorian, j'aime bien. J'aurais mis les vrais logos de mana (ainsi que le mana incolore). De toute façon, tu auras un disclaimer qui dira que toutes les images, logos de sets, noms de sets, etc. sont copyright WotC.

Yes c'est vrai, je me disais ça aussi au départ, mais en tombant sur celle ci je me suis dis qu'elle était carrément plus jolie. Il va falloir que je conserve une unité dans mes icônes de toutes façons, car dans mon parser de texte/manacost, j'utilise un sprite qui lui me fourni les bonnes icônes.

Enfin ça reste un détail On verra ça a la fin, pour l'instant, je finalise le forum et après j'attaque le deckbuilder comme ça je pourrais travailler mes decks paysans OKLM o/

C'est moi qui déraille, ou il n'y a pas Conspiracy 1 ? 

Le 19/10/2016 à 00:37, Tsurugi-Aisuhino avait écrit ...
C'est moi qui déraille, ou il n'y a pas Conspiracy 1 ? 

Le nom officiel (ou du moins c'est comme ça que l'édition est référencée sur le gatherer) est "Magic the Gathering - Conspiracy", avec comme abréviation officielle CNS.
A bientôt!

Ouais mais du coup, la vraie question c'est, est-ce qu'il faut suivre le gatherer à 100%, ou avoir une convention de nommage cohérente ? -- parceque le gatherer, ils changent d'idée tous les 4 matins..