Sito web Arcade Database

[motoschifo]

Trovato nella documentazione di Skyscraper

Screen Shot 2020-05-02 at 17.27.32.png

[motoschifo]

Questo è quello generato da mamescraper.exe , per recuperare immagini e descrizioni per il romset 0.78

Codice: Seleziona tutto

<gameList>
	<game>
		<path>./88games.zip</path>
		<name>'88 Games</name>
		<desc>Export release. Game developed in Japan by Konami. For more information, please see the original Japanese release entry: "Hyper Sports Special [Model GX861]".</desc>
		<image>./images/88games.png</image>
		<rating>0.64</rating>
		<releasedate>1988</releasedate>
		<developer>Konami</developer>
		<genre>Sports / Track & Field</genre>
		<players>4</players>
	</game>
	</gameList>
	

Una cosa che ho visto è che mamescraper mi ha messo "images" come path immagini , ma da quello che ho visto quando fai "scraping" direttamente da Recalbox viene usato "downloaded_images".

In base alle informazioni che vedi, fatti un'idea. Io se vuoi ti faccio da betatester

Dopo parecchio tempo, oggi ho pubblicato l'export per EmulationStation, quindi supportato anche in RecalBox.
Ecco un esempio di quello che si vede a video:

export_mame.png

Troverai due parametri aggiuntivi (percorso giochi e percorso immagini) con i valori di default comunemente utilizzati. Lo slash finale viene aggiunto in automatico se non indicato.
Ovviamente ha senso usarli solo per quanto riguarda il Mame, non ho fatto nulla su software list dato che differiscono molto dagli altri emulatori.
Fammi sapere se sono a posto come nomi e descrizioni, specialmente per quanto riguarda i ritorni a capo nell'xml (in teoria usando il cdata dovrebbe farlo il programma, ma non sono sicuro che ES supporti pienamente questo formato).

[cybermat]

Ottimo! Devo capire se rgbpiOS si appoggia a emulationstation per lo scraping, dato che non usano più recalbox.
Comunque sia dovrei far partire il progetto del PC to CRT e mi piacerebbe usare recalbox come distro e dunque potrò testare questa nuova feature quanto prima.

[Domino]

Porca vacca che lavorone, dal 2015! me lo sto spulciando per bene il sito e devo dire che hai fatto un lavoro pazzesco, niente da dire, complimenti motoschifo... capeau.

[Centurion_78]

Cavolo che bel progetto! Appena mi arrivano i pezzi e soprattutto il Raspberry lo guarderò di sicuro! C'è tanta roba da scaricare! Complimenti!

[pucci]

Stasera ho fatto una modifica ai filtri della ricerca Mame.

Ho cambiato il flag "solo giochi" con un migliore "solo mamecab", che in aggiunta a prima filtrerà anche per generi e mechanical.
I generi che ho trovato non adatti ad un cabinato sono:

• - Casino
  - BIOS
  - Electromechanical
  - Electromechanical - PinMAME
  - Fruit Machines
  - Misc. Betting
  - Not Classified
  - Print Club
  - Quiz
  - System
  - Unplayable
  - Utilities

Questi valori arrivano da tutti i file catlist.ini di tutte le versioni uscite, quindi alcuni di questi non sono più usati dalle ultime versioni del Mame. Ma visto che la ricerca può essere filtrata anche per versioni precedenti, li devo includere ugualmente.
Quando questo flag è attivato (di default) allora oltre a questi generi rimuovo anche i bios, i device, i mechanical ed i sistemi ex-Mess.

Se invece il flag viene tolto, si possono utilizzare i filtri nelle opzioni avanzate e quindi rimuovere selettivamente alcune tipologie di file:

• - bios
  - device
  - mechanical
  - slot, casino, fruit machine, poker
  - giochi che usano chd
  - giochi che usano sample

Non sono ancora soddisfatto comunque ora è meglio di prima. E' probabile che aggiunga qualche altro flag per ulteriori filtri particolari.

@motoschifo puoi indicarci ad oggi (2020) quali filtri imposta il flag "mamecab only"?

[motoschifo]

Rispetto a quanto indicato non è cambiato nulla di quella gestione.
Se vedi giochi inclusi che non lo dovrebbero, allora mi sono dimenticato di mettere le categorie/generi. Dato che cambiano in continuazione, qualcosa potrebbe sfuggire.

[pucci]

ok, ma quello che ti chiedevo è la regola logica che ha inserito nel sito.
quale filtro usi?

ho provato a seguire quello che tu hai scritto ma i conti non tornano

[motoschifo]

Quello che vedi indicato è corretto, ora non ricordo tutti i flag ma la regola è "tutto ciò che in un mamecab non ha senso avere".
Per es. le categorie e i generi vengono aggiornati in quanto escono sempre nuovi giochi. Se "Print Club" viene cambiato nell'ini in "Print Club" con il doppio spazio in mezzo, per me è una categoria nuova quindi devo includerla in quelle che devo ignorare.
Se vedi giochi che non dovrebbero esserci, o si tratta di un errore o di una svista (nel db, nell'ini, nel Mame, ecc).

Dammi la lista dei giochi che non ti tornano che poi controllo.
Attento che in questo momenro sto importanto la versione 225 quindi i conteggi potrebbero non essere corretti (ad esempio, fino a quando non arriverà il mess.ini, i nuovi giochi mess aggiunti nella 225 compariranno come "arcade").
Lo vedi perchè nel box "ultima versione" ci sono i due numeri 224/225, appena finito tra mezz'oretta comparirà solo 225.

[motoschifo]

Ti giro l'sql così ci sono tutte le condizioni indicate.
L'array dei generi è quello del server quindi aggiornato alle ultime disponibili.
Il primo giro toglie il flag mamecab, il secondo lo imposta (quindi eventuali giochi speciali marcati come mamecab vengono mantenuti). Era stato pensato per ospitare altri tipi di Mame per questo i due passaggi, poi alla fine non ho fatto nulla perchè non ho avuto risposte e consensi vari... dopo un paio di anni, ho smesso di chiedere.

Codice: Seleziona tutto

UPDATE adb_mame 
SET game_ismamecab_sn=0 
WHERE game_ismamecab_sn=1 AND NOT(
	game_isarcade_sn=1 AND game_isbios_sn=0 AND game_isdevice_sn=0 
	AND game_ismechanical_sn=0 AND display_screens<>0 AND NOT EXISTS(
		SELECT * FROM adb_mame_data WHERE adb_mame_data.id_mame = adb_mame.id 
		AND genre IN (implode($settings->GENRES_IGNORE_MAMECAB,",").")
	))";
	
UPDATE adb_mame 
SET game_ismamecab_sn=1 
WHERE game_ismamecab_sn=0 AND 
game_isarcade_sn=1 AND game_isbios_sn=0 AND game_isdevice_sn=0 
AND game_ismechanical_sn=0 AND display_screens<>0 AND NOT EXISTS(
	"SELECT * FROM adb_mame_data WHERE adb_mame_data.id_mame = adb_mame.id 
	"AND genre IN (implode($settings->GENRES_IGNORE_MAMECAB,",").")
)


public $GENRES_IGNORE_MAMECAB = array(
    152,    // Unplayable
    159,    // Tabletop
    161,    // Casino
    162,    // BIOS
    167,    // Quiz
    171,    // Misc. Betting
    831,    // Electromechanical - PinMAME
    832,    // Fruit Machines
    833,    // System
    834,    // Not Classified
    900,    // Print Club 
    901,    // Electromechanical
    902,    // Utilities
    27249,  // Home Systems
    27250,  // Portable Systems
    27251,  // Professional Systems
    27252,  // Development Systems
    27253,  // Synth
    28188,  // Calculator
    28189,  // Chess Machine
    28190,  // Computer
    28191,  // Game Console
    28192,  // Handheld
    28193,  // Printer
    30175,  // Board Game
    30176,  // Medal Game
    30177,  // Music
    30178,  // Telephone
    30406,  // Medical Equipment
    31769,  // Coin Pusher
    31770,  // Slot Machine
    34078   // Computer Graphic Workstation
  );

[pucci]

non ho capito questa parte della query di update che usi per togliere il flag mamecab only

Codice: Seleziona tutto

WHERE game_ismamecab_sn=1 AND NOT(
	game_isarcade_sn=1 AND game_isbios_sn=0 AND game_isdevice_sn=0 
	AND game_ismechanical_sn=0 AND display_screens<>0 AND NOT EXISTS(
		SELECT * FROM adb_mame_data WHERE adb_mame_data.id_mame = adb_mame.id 
		AND genre IN (implode($settings->GENRES_IGNORE_MAMECAB,",").")
	))";

l'update a "non mamecab" avviene solo se attualmente è considerato mamecab ed è vera questa condizione

Codice: Seleziona tutto

NOT(
	game_isarcade_sn=1 AND game_isbios_sn=0 AND game_isdevice_sn=0 
	AND game_ismechanical_sn=0 AND display_screens<>0 AND NOT EXISTS(
		SELECT * FROM adb_mame_data WHERE adb_mame_data.id_mame = adb_mame.id 
		AND genre IN (implode($settings->GENRES_IGNORE_MAMECAB,",").")
	))";

essendoci un NOT deve essere falsa questa condizione

Codice: Seleziona tutto

game_isarcade_sn=1 AND game_isbios_sn=0 AND game_isdevice_sn=0 
	AND game_ismechanical_sn=0 AND display_screens<>0 AND NOT EXISTS(
		SELECT * FROM adb_mame_data WHERE adb_mame_data.id_mame = adb_mame.id 
		AND genre IN (implode($settings->GENRES_IGNORE_MAMECAB,",").")

essendoci tanti AND perchè sia falsa basta che uno degli elementi sia falso:

game_isarcade_sn=1 --> se non è arcade (quindi se è MESS)
game_isbios_sn=0 --> se è un BIOS
isdevice_sn=0 --> se è un device
game_ismechanical_sn=0 --> se è mechanical
display_screens<>0 --> se è screenless
NOT EXISTS(
SELECT * FROM adb_mame_data WHERE adb_mame_data.id_mame = adb_mame.id
AND genre IN (implode($settings->GENRES_IGNORE_MAMECAB,",").") --> se il genere è tra quelli non mamecab

non capisco a cosa serva non resettare a tutti i giochi il flag mamecab se tanto poi lo vai a reimpostare con la prossima query

perchè non ti sei limitato ad un

Codice: Seleziona tutto

UPDATE adb_mame 
SET game_ismamecab_sn=0 
WHERE game_ismamecab_sn=1

?

[pucci]

la seconda query è più semplice.
cosa è gioco da MAMEcab?

ogni gioco che abbia tutte queste caratteristiche:

• deve essere Arcade
• non deve essere un BIOS
• non deve essere un device
• non deve essere mechanical
• non deve essere screenless
• il suo genere non deve essere nella lista dei generi non adatti ai mamecab (qui metto solo quelli attualmente usato da genre.ini)

Codice: Seleziona tutto

    30175,  // Board Game
    28188,  // Calculator
    161,    // Casino
    31769,  // Coin Pusher
    28190,  // Computer
    34078   // Computer Graphic Workstation
    901,    // Electromechanical
    28191,  // Game Console
    28192,  // Handheld
    30176,  // Medal Game
    30406,  // Medical Equipment
    30177,  // Music
    28193,  // Printer
    167,    // Quiz
    31770,  // Slot Machine
    833,    // System
    159,    // Tabletop
    30178,  // Telephone
    902,    // Utilities

[pucci]

forse ho capito la prima query, serve per caso ad evitare l'informazione "è adatto a mamecab" per le versioni più vecchie di MAME?
usando la mia query semplificata tutti i giochi non più presenti nell'ultimo MAME (ma presenti nelle versioni precedenti) risulterebbero non adatti ad un mamecab

è così?

[motoschifo]

Il caso di update manuale non è più gestito quindi le query modificano di fatto tutti i giochi sempre, anche quelli non più attuali. Un tempo non era così, ma per velocizzare le operazioni ho sdoppiato le query.
Sostanzialmente metto a 0 tutto ciò che non è per cab, poi mette a 1 tutto ciò che è per cab negando la stessa condizione.

Facendo indistintamente l'update otterrei la data di ultima modifica del record sempre valorizzata ad oggi, cosa che non è vera in quanto il record potrebbe non aver subito reali modifiche.
In principio non esisteva un campo su db ma un campo calcolato in funzione di altri, poi ho voluto metterlo per semplificare le ricerche.

Ma con queste indicazioni, hai ancora giochi errati nella selezione del Mame?

[pucci]

Il caso di update manuale non è più gestito quindi le query modificano di fatto tutti i giochi sempre, anche quelli non più attuali. Un tempo non era così, ma per velocizzare le operazioni ho sdoppiato le query.
Sostanzialmente metto a 0 tutto ciò che non è per cab, poi mette a 1 tutto ciò che è per cab negando la stessa condizione.

Facendo indistintamente l'update otterrei la data di ultima modifica del record sempre valorizzata ad oggi, cosa che non è vera in quanto il record potrebbe non aver subito reali modifiche.
In principio non esisteva un campo su db ma un campo calcolato in funzione di altri, poi ho voluto metterlo per semplificare le ricerche.

Ma con queste indicazioni, hai ancora giochi errati nella selezione del Mame?

quindi il fatto di non usare una query semplice come la mia è solo dovuto a questo? "Facendo indistintamente l'update otterrei la data di ultima modifica del record sempre valorizzata ad oggi, cosa che non è vera in quanto il record potrebbe non aver subito reali modifiche."

mi sfugge il problema dell'avere una data di ultima modifica "recente"

adesso provo con le tue indicazioni a vedere se c'è qualcosa di strano.

Sto testando ora

[motoschifo]

La data di ultimo aggiornamento indica quando il gioco ha subito modifiche. La trovi nelle schede di dettaglio e serve anche in alcuni casi per capire quali record sono stati aggiornati (e magari lanciare elaborazioni solo su quelli).
Aggiornare sempre tutto non è nelle mie intenzioni, anzi la maggior parte delle query non "sporca" i dati se deve metterli uguali a quelli che ci sono già.
Un esempio di questa tecnica è quando occorre capire se il gioco ha subito cambiamenti, ad esempio dopo l'importazione.

In ogni caso, se si tratta di una data di ultima modifica, ha senso averla valorizzata solo nel caso di effettivi cambi. Altrimenti non serve a nulla e tanto vale toglierla.
Ah giusto per curiosità, quella data viene aggiornata in automatico quindi non sono io che lo faccio, ed è anche una verifica per capire se "qualcuno" ha cambiato cose. Tutte le mie tabelle hanno quel campo.

[pucci]

Ma con queste indicazioni, hai ancora giochi errati nella selezione del Mame?

ora sembrerebbe a posto

ti mando a breve alcuni suggerimenti di modifiche al filtro arcade cab

[motoschifo]

Su richiesta di AntoPisa, ho aggiunto il filtro software list anche nella parte "Giochi", che è quindi in grado di cercare i sistemi che utilizzano una particolare lista software.
Accetta anche più valori contemporaneamente e supporta l'autocompletamento, come molti dei filtri del sito.

Schermata del 2021-05-06 22-54-40.png

[Gothrek]

ottimo!!!!

[motoschifo]

Ho aggiunto un tasto per avere subito le ricerche salvate, utile per fare tutto con un paio di click anzichè passare dal menu apposito.
Non è perfetto, nel senso che le nuove ricerche salvate non compaiono subito, ma comunque lo sto trovando comodo.
Aggiornato per le pagine ita/eng, mame/mess e tutti i temi gestiti... al netto di errori ovviamente

Screenshot_2021-05-08 Giochi MAME.png