Himura Fucking Scraper

Modérateur : Modérateurs

Avatar de l’utilisateur
himura95
Maître
Maître
Messages : 3177
Inscription : 05 mars 2015 - 20:13
Localisation : Pontoise
A remercié : 911 fois
A été remercié : 562 fois

Himura Fucking Scraper

Message par himura95 » 24 déc. 2020 - 23:09

Himura Fucking Scraper

En guise de cadeau de Noël, voici la version publique de la pré-alpha 0.2.4 de mon petit scraper maison.
Comme indiqué il s'agit d'une version de test pré-alpha, codée avec le cul, donc ne vous attendez pas à un logiciel pro :roll:

Petit tour rapide du propriétaire :

Options
Image
On indique son compte sur la db (seulement la première fois) et on choisit le répertoire ou sont nos roms, le frontend cible et la langue qui nous intéresse sur la db ainsi que le répertoire de destination.

Traitement
Image
Onglet un peu brouillon ^^ :
On commence par scanner le répertoire de roms.
Ensuite on lance la recherche de correspondances.
Une liste des médias disponibles selon nos roms apparait, on choisit ce qu'on souhaite récupérer (ex : logo et vidéo) et on lance le téléchargement.

Visualisation
Image
Image
Cet onglet permet de visualiser le contenu de la db pour chaque rom une fois la recherche effectuée (voir ci-dessus), si on clique sur un média, on peut le visualiser (images, pdf, vidéo)

Générateur de Wheels
Image
Dans cet onglet vous indiquer un répertoire de logos et le template à utiliser et pouf des chocapik wheels !
Si vous avez des templates à intégrer, vous pouvez me les fournir sur le trello ;)

Suivi des chantiers
Image
Cet onglet liste tous les systèmes présents dans la db et permet d'afficher la progression du remplissage pour chaque système, notamment de voir combien de hash sont présents et combien il en manque par système.

Pour fermer l'application c'est en haut à droite : Liens > Quitter

Le trello pour reporter les bugs (qui sont sûrement par milliers :lol: ) et les propositions d'évolutions (si c'est codable avec le cul uniquement :? ) : ICI

Le discord pour en parler tranquilou : https://discord.gg/m7uVfTmfBZ

Bon allez, le lien :!: : ICI
JOYEUX NOEL !
Dernière modification par himura95 le 02 avr. 2022 - 18:36, modifié 8 fois.
Image

Avatar de l’utilisateur
Ukogans
Guide
Guide
Messages : 1829
Inscription : 19 nov. 2014 - 23:43
Localisation : Prinquiau
A remercié : 576 fois
A été remercié : 473 fois

Re: Himura Fucking Scraper

Message par Ukogans » 25 déc. 2020 - 00:07

Merci et joyeux Noël

Envoyé de mon SM-G950F en utilisant Tapatalk


Avatar de l’utilisateur
snuf69
Modérateur
Modérateur
Messages : 2577
Inscription : 31 déc. 2013 - 00:00
Localisation : 38200
A remercié : 181 fois
A été remercié : 406 fois

Re: Himura Fucking Scraper

Message par snuf69 » 25 déc. 2020 - 00:16

Super Himura
Bien ouej!
Et joyeux Noël :)
Image

Avatar de l’utilisateur
Meth
Administrateur
Administrateur
Messages : 4541
Inscription : 19 oct. 2012 - 01:00
Localisation : Conflans-en-Jarnisy
A remercié : 989 fois
A été remercié : 2179 fois
Contact :

Re: Himura Fucking Scraper

Message par Meth » 25 déc. 2020 - 08:14

Putain ce plus beau cadeau de Noël de l'histoire

Avatar de l’utilisateur
wildpumpk1n
Virtuose
Virtuose
Messages : 1292
Inscription : 04 févr. 2018 - 19:01
Localisation : Région Parisienne
A remercié : 283 fois
A été remercié : 261 fois

Re: Himura Fucking Scraper

Message par wildpumpk1n » 25 déc. 2020 - 17:49

Mais ça c'est du cadeau sympa!
En réponse sympa, tu vas te bouger le click pour le finir oui 😅😅😅

Merci pour le cadeau, c'est top 😎
Image-Image-Image
#Cid2nice"Mais y'a la planche Naomi en sakura véritable et vénérable du Japon"

Avatar de l’utilisateur
DarkTrooper
Modérateur
Modérateur
Messages : 1133
Inscription : 05 mai 2015 - 17:57
Localisation : 93330
A remercié : 89 fois
A été remercié : 244 fois

Re: Himura Fucking Scraper

Message par DarkTrooper » 25 déc. 2020 - 19:33

Bravo Himura. Même si c'est codé avec le cul, c'est codé, et pour ça : un grand MERCI

Envoyé de mon Redmi Note 6 Pro en utilisant Tapatalk


lejedi62
Connaisseur
Connaisseur
Messages : 244
Inscription : 13 juil. 2013 - 01:00
Localisation : Calais
A remercié : 279 fois
A été remercié : 16 fois

Re: Himura Fucking Scraper

Message par lejedi62 » 26 déc. 2020 - 08:43

Bravo! Un grand merci !!!!

Avatar de l’utilisateur
Marsupio714
Connaisseur
Connaisseur
Messages : 469
Inscription : 13 févr. 2018 - 02:36
Localisation : Haute Savoie
A remercié : 112 fois
A été remercié : 60 fois

Re: Himura Fucking Scraper

Message par Marsupio714 » 26 déc. 2020 - 12:17

Génial ! Merci.

Avatar de l’utilisateur
lankou910
Gourou
Gourou
Messages : 724
Inscription : 16 mai 2013 - 01:00
Localisation : Bordeaux
A remercié : 76 fois
A été remercié : 107 fois

Re: Himura Fucking Scraper

Message par lankou910 » 26 déc. 2020 - 18:30

bonsoir

un grand merci pour notre himura95 beau boulot mec ;)
Image

Avatar de l’utilisateur
lankou910
Gourou
Gourou
Messages : 724
Inscription : 16 mai 2013 - 01:00
Localisation : Bordeaux
A remercié : 76 fois
A été remercié : 107 fois

Re: Himura Fucking Scraper

Message par lankou910 » 24 avr. 2021 - 06:45

bonjour @himura95

juste pour prévenir que le lien est mort.
Image

Avatar de l’utilisateur
himura95
Maître
Maître
Messages : 3177
Inscription : 05 mars 2015 - 20:13
Localisation : Pontoise
A remercié : 911 fois
A été remercié : 562 fois

Re: Himura Fucking Scraper

Message par himura95 » 24 avr. 2021 - 11:24

ah oui, en même temps y a du monde qui s'en sert de ce truc ? :P
Je referai un lien dans la journée.
Image

Avatar de l’utilisateur
Angelfred
Gourou
Gourou
Messages : 561
Inscription : 11 juil. 2014 - 01:00
Localisation : Cannes (06)
A remercié : 253 fois
A été remercié : 120 fois

Re: Himura Fucking Scraper

Message par Angelfred » 24 avr. 2021 - 21:44

Moi j’ai essayé mais essai non concluant 🤪

Avatar de l’utilisateur
himura95
Maître
Maître
Messages : 3177
Inscription : 05 mars 2015 - 20:13
Localisation : Pontoise
A remercié : 911 fois
A été remercié : 562 fois

Re: Himura Fucking Scraper

Message par himura95 » 25 avr. 2021 - 11:47

En même temps vu qu'il n'y avait aucun retour sur le trello j'y ai pas touché depuis des mois...
Image

Avatar de l’utilisateur
Angelfred
Gourou
Gourou
Messages : 561
Inscription : 11 juil. 2014 - 01:00
Localisation : Cannes (06)
A remercié : 253 fois
A été remercié : 120 fois

Re: Himura Fucking Scraper

Message par Angelfred » 25 avr. 2021 - 19:31

Mon souci était surtout du à l’absence de hashes sur la db concernant mon set de roms.

Avatar de l’utilisateur
phenix14000
Connaisseur
Connaisseur
Messages : 392
Inscription : 03 mai 2016 - 06:34
Localisation : val d'izé
A remercié : 127 fois
A été remercié : 104 fois

Re: Himura Fucking Scraper

Message par phenix14000 » 26 avr. 2021 - 08:57

moi je t'ai déjà dit lol
Ca tourne en boucle on ne sait jamais quand ce se fini, jamais eu la création du fichier xml, faut ajouter la recherche par nom et système dû au manque de hash

Avatar de l’utilisateur
serviettzky62
Gourou
Gourou
Messages : 558
Inscription : 29 juin 2018 - 10:36
Localisation : Divion, Pas-De-Calais
A remercié : 84 fois
A été remercié : 69 fois

Re: Himura Fucking Scraper

Message par serviettzky62 » 03 mai 2021 - 21:27

Hello Petit retour de ma part :D
Après avoir testé cette version que j'avais pas vu passé," j'avais eu l'honneur de testé la précédente", ca fonctionne bien mieux en tout cas avec un système bien renseigné, comme j'avais fais le début de la liste PS2 sur la DB.

j'ai pu scraper correctement sur des isos PS2 sans trop attendre, j'ai juste pas retrouver le XML, avec les infos. J'avais cliqué sur Attract Mode, peut être que ca le sort qu'avec un des autres frontend.

Bravo Himura, t'as bien bossé ;)
Image

Avatar de l’utilisateur
camarade35
Maître
Maître
Messages : 4230
Inscription : 05 sept. 2013 - 01:00
Localisation : Chevaigné
A remercié : 619 fois
A été remercié : 739 fois
Contact :

Re: Himura Fucking Scraper

Message par camarade35 » 05 mai 2021 - 05:57

Salut, j'avoue que je n'avais pas re-testé?

Test du matin : comme @phenix14000 --> pas de fin DL (enfin on a toujours le message : annuler le téléchargement)
Second point : pouvoir écraser les medias si identiques, là il se re-DL en ajoutant "-Altx" (j'avoue les wheels se sont mieux passées que les vidéos^^)
P.S : trello rempli ;)
préservation du patrimoine vidéoludique et de notre planète

Avatar de l’utilisateur
himura95
Maître
Maître
Messages : 3177
Inscription : 05 mars 2015 - 20:13
Localisation : Pontoise
A remercié : 911 fois
A été remercié : 562 fois

Re: Himura Fucking Scraper

Message par himura95 » 05 mai 2021 - 11:29

rempli pas le trello malheureux, si je vais dessus un jour je risque de le lire :lol:
Image

Avatar de l’utilisateur
himura95
Maître
Maître
Messages : 3177
Inscription : 05 mars 2015 - 20:13
Localisation : Pontoise
A remercié : 911 fois
A été remercié : 562 fois

Re: Himura Fucking Scraper

Message par himura95 » 11 mai 2021 - 17:45

Nouvelle version 0.2.2 :shock:

changelog (pour faire pro 8-) ) :

- Correction au niveau de la génération des xml..., ça devrait être plus ou moins bon pour chaque FE :roll:
- Ajout de la possibilité de ne choisir qu'un sous-type de média à dl (par exemple que les screenshots in game)
- A la fin du téléchargement, le répertoire de sorti des médias vous poppera à la gueule :!:
- Ajout de bugs divers et variés :?:

Lien mis à jour sur le 1er post.
Image

Avatar de l’utilisateur
wildpumpk1n
Virtuose
Virtuose
Messages : 1292
Inscription : 04 févr. 2018 - 19:01
Localisation : Région Parisienne
A remercié : 283 fois
A été remercié : 261 fois

Re: Himura Fucking Scraper

Message par wildpumpk1n » 11 mai 2021 - 18:29

Ahhh c'est chouette de te voir reprendre le projet 😎

On peut le.mettre en fenêtré maintenant ? 😁
Image-Image-Image
#Cid2nice"Mais y'a la planche Naomi en sakura véritable et vénérable du Japon"

Répondre

Revenir à « Discussions »