Ciao a tutti,
sono accidentalmente capitato su un file che ho caricato su dropbox: https://dl.dropboxusercontent.com/u/37725196/sbndump.7z
Si tratta di un database mysql da 1.7Gb. Il file scompattato pesa circa 17Gb e il database risultante pesa circa 25Gb. Quindi state attenti quando lo ripristinate.
Contiene 3 tabelle con vari esperimenti, una di queste contiene circa 14.000.000 di record in formato UNIMARC, estratti via z39.50 da SBN circa due anni fa. Ci sono un paio di colonne, una per il BID, una per l'UNIMARC.
In sostanza è tutto il catalogo SBN (solo materiale moderno, senza le authority) di 2 anni fa.
Attenzione! L'UNIMARC prodotto dall'uscita z39.50 è un po' misterioso. Soprattutto due anni fa, quando mi pare ancora non ci fosse il nuovo OPAC, per il quale dovrebbero aver sistemato alcune cosette.
Che dire, se uno trova per caso una cosa del genere, cosa deve fare? Tenersela tutta per sè? Tra l'altro è prodotto utilizzando i legittimi mezzi di interrogazione dall'esterno di SBN.
Francamente non so cosa ci si possa fare, magari anche solo un po' di analisi dei dati. Oppure niente. Tanto sono sicuro che a breve l'ICCU pubblicherà questi stessi dati più aggiornati :)
Ciao a tutti e buon weekend Giulio
Figo! Cosa intendi per misterioso? Io ricordo che con z39.50 non si richiamava il record completo, ma solo una porzione - mi sbaglio? A parte questo, direi che mancherebbere soltanto gli authority (autori, ma anche soggetti e classi immagino) e i legami fra record (o è possibile ripristinarli attraverso l'unimarc? il marc contiene tutti i legami previsti da SBN?) Poi certo, avremmo un catalogo bibliografico non aggiornato e privo delle indicazioni di posseduto, quindi bisognerebbe porsi il problema "che farne". Però io sono davvero curioso di vedere questi dati, e rifletterci un po' su. Lunedì ci do un'occhiata. L'istinto - per non saper leggere né scrivere - sarebbe caricarli su wikidata senza se e senza ma, ma non so valutarne la fattibilità e il peso dell'operazione.
Il 24 maggio 2013 21:04, Giulio Bonanome gbonanome@gmail.com ha scritto:
Ciao a tutti,
sono accidentalmente capitato su un file che ho caricato su dropbox: https://dl.dropboxusercontent.com/u/37725196/sbndump.7z
Si tratta di un database mysql da 1.7Gb. Il file scompattato pesa circa 17Gb e il database risultante pesa circa 25Gb. Quindi state attenti quando lo ripristinate.
Contiene 3 tabelle con vari esperimenti, una di queste contiene circa 14.000.000 di record in formato UNIMARC, estratti via z39.50 da SBN circa due anni fa. Ci sono un paio di colonne, una per il BID, una per l'UNIMARC.
In sostanza è tutto il catalogo SBN (solo materiale moderno, senza le authority) di 2 anni fa.
Attenzione! L'UNIMARC prodotto dall'uscita z39.50 è un po' misterioso. Soprattutto due anni fa, quando mi pare ancora non ci fosse il nuovo OPAC, per il quale dovrebbero aver sistemato alcune cosette.
Che dire, se uno trova per caso una cosa del genere, cosa deve fare? Tenersela tutta per sè? Tra l'altro è prodotto utilizzando i legittimi mezzi di interrogazione dall'esterno di SBN.
Francamente non so cosa ci si possa fare, magari anche solo un po' di analisi dei dati. Oppure niente. Tanto sono sicuro che a breve l'ICCU pubblicherà questi stessi dati più aggiornati :)
Ciao a tutti e buon weekend Giulio
Bibliotecari mailing list Invio messaggi in lista: Bibliotecari@wikimedia.it Configurazione utente: http://mailman.wikimedia.it/listinfo/bibliotecari
2013/5/24 Enrico Francese efrancese@gmail.com
L'istinto - per non saper leggere né scrivere - sarebbe caricarli su wikidata senza se e senza ma, ma non so valutarne la fattibilità e il peso dell'operazione.
Al momento, come detto, questa cosa non si può fare. Ma tienili lì, che male non fanno. Sai mai che quando si partirà a mettere le bibliografie delle voci di Wikipedia su Wikidata il dump non risulti utile :-)
Aubrey
Giulio Bonanome, 24/05/2013 21:04:
Ciao a tutti,
sono accidentalmente capitato su un file che ho caricato su dropbox: https://dl.dropboxusercontent.com/u/37725196/sbndump.7z
Capitato come?
Si tratta di un database mysql da 1.7Gb. Il file scompattato pesa circa 17Gb e il database risultante pesa circa 25Gb. Quindi state attenti quando lo ripristinate.
Contiene 3 tabelle con vari esperimenti, una di queste contiene circa 14.000.000 di record in formato UNIMARC, estratti via z39.50 da SBN circa due anni fa. Ci sono un paio di colonne, una per il BID, una per l'UNIMARC.
In sostanza è tutto il catalogo SBN (solo materiale moderno, senza le authority) di 2 anni fa.
Attenzione! L'UNIMARC prodotto dall'uscita z39.50 è un po' misterioso. Soprattutto due anni fa, quando mi pare ancora non ci fosse il nuovo OPAC, per il quale dovrebbero aver sistemato alcune cosette.
Che dire, se uno trova per caso una cosa del genere, cosa deve fare? Tenersela tutta per sè? Tra l'altro è prodotto utilizzando i legittimi mezzi di interrogazione dall'esterno di SBN.
Caricalo su archive.org.
Francamente non so cosa ci si possa fare, magari anche solo un po' di analisi dei dati. Oppure niente. Tanto sono sicuro che a breve l'ICCU pubblicherà questi stessi dati più aggiornati :)
Davvero lo farà? In che formato, con che licenza?
Nemo
Sì, comunque l'espressione "sono accidentalmente capitato su un dump di SBN" fa ridere :D
Il 25 maggio 2013 10:50, Federico Leva (Nemo) nemowiki@gmail.com ha scritto:
Giulio Bonanome, 24/05/2013 21:04:
Ciao a tutti,
sono accidentalmente capitato su un file che ho caricato su dropbox: https://dl.dropboxusercontent.com/u/37725196/sbndump.7z
Capitato come?
Si tratta di un database mysql da 1.7Gb. Il file scompattato pesa circa 17Gb e il database risultante pesa circa 25Gb. Quindi state attenti quando lo ripristinate.
Contiene 3 tabelle con vari esperimenti, una di queste contiene circa 14.000.000 di record in formato UNIMARC, estratti via z39.50 da SBN circa due anni fa. Ci sono un paio di colonne, una per il BID, una per l'UNIMARC.
In sostanza è tutto il catalogo SBN (solo materiale moderno, senza le authority) di 2 anni fa.
Attenzione! L'UNIMARC prodotto dall'uscita z39.50 è un po' misterioso. Soprattutto due anni fa, quando mi pare ancora non ci fosse il nuovo OPAC, per il quale dovrebbero aver sistemato alcune cosette.
Che dire, se uno trova per caso una cosa del genere, cosa deve fare? Tenersela tutta per sè? Tra l'altro è prodotto utilizzando i legittimi mezzi di interrogazione dall'esterno di SBN.
Caricalo su archive.org.
Francamente non so cosa ci si possa fare, magari anche solo un po' di analisi dei dati. Oppure niente. Tanto sono sicuro che a breve l'ICCU pubblicherà questi stessi dati più aggiornati :)
Davvero lo farà? In che formato, con che licenza?
Nemo
Bibliotecari mailing list Invio messaggi in lista: Bibliotecari@wikimedia.it Configurazione utente: http://mailman.wikimedia.it/listinfo/bibliotecari
Ohibò, ma è partita una mail per sbaglio? Ad ogni modo ecco un po' di informazioni aggiuntive:
Cosa intendi per misterioso?
Intendo dire che nessuno conosce esattamente come avviene la conversione SBN-MARC -> UNIMARC. Per la precisione, i dati originariamente forniti dallo z39.50 erano solo in formato SUTRS, mentre lo scarico UNIMARC venne realizzato grazie ad un progetto europeo e non forniva gli stessi record scaricati dall'Indice per alimentare l'OPAC. Potremmo dire che l'UNIMARC dello z39.50 era "di seconda mano", con delle imprecisioni che nessuno conosce.
Io ricordo che con z39.50 non si richiamava il record completo, ma
solo una porzione - mi sbaglio?
No, mi pare ci sia tutto il record.
A parte questo, direi che mancherebbere soltanto gli authority
(autori, ma anche soggetti e classi immagino) e i legami fra record (o è possibile ripristinarli attraverso l'unimarc? il marc contiene tutti i legami previsti da SBN?)
Non ho mai fatto un'analisi dei legami contenuti nell'unimarc dello z39.50. Il formato in sè prevede che sia possibile ricostruire tutto.
Sai mai che quando si partirà a mettere le bibliografie delle voci di
Wikipedia su Wikidata
Per i coraggiosi che proveranno ad aprire il db, c'è una tabella con le corrispondenze EAN-BID SBN che potrebbe essere mooolto utile nel caso.
Caricalo su archive.org.
Anche io pensavo a archive.org, ma più volentieri avrei pensato a http://datahub.io/group/bibliographic Non lo faccio perchè non si tratta di un vero e proprio export UNIMARC, ma di un database mysql, secondo me non utilissimo. Ad ogni modo ora è lì, se qualcuno vuole metterlo da qualche altra parte è il benvenuto :)
Davvero lo farà? In che formato, con che licenza?
Purtroppo non ho la più pallida idea di cosa farà l'ICCU, era un mix di sarcasmo e speranza :)
Capitato come?
Due anni fa, per circa 4 mesi, qualcuno ha fatto una serie di interrogazioni periodiche al server z39.50 di SBN, memorizzando in un DB le risposte. Quel DB non è stato fornito dall'ICCU, che non sa nemmeno della sua esistenza, ed era stato fatto per indagare la "bontà" dei dati contenuti nell'Indice. Io lavoro per un'azienda che ha ottenuto la certificazione per il dialogo con l'Indice solo da un anno (passando l'anno e mezzo precedente a lavorare per ottenerla). Il rapporto tra noi e l'ICCU non è semplice, da un lato perchè gestiamo Poli con il nostro sw solo da pochi mesi, con il costante rischio di risultare inadeguati al compito, dall'altro perchè il nostro sw è rilasciato con licenza open source, ovvero se ce lo chiedete vi diamo il codice. Purtroppo non abbiamo ritenuto "opportuno" rilasciare in modalità open le componenti relative al dialogo con l'Indice SBN :( Più o meno per lo stesso motivo non ho condiviso il file due anni fa.
Ciao Gulio
Il giorno 25 maggio 2013 10:50, Federico Leva (Nemo) nemowiki@gmail.comha scritto:
Giulio Bonanome, 24/05/2013 21:04:
Ciao a tutti,
sono accidentalmente capitato su un file che ho caricato su dropbox: https://dl.dropboxusercontent.**com/u/37725196/sbndump.7zhttps://dl.dropboxusercontent.com/u/37725196/sbndump.7z
Capitato come?
Si tratta di un database mysql da 1.7Gb. Il file scompattato pesa circa 17Gb e il database risultante pesa circa 25Gb. Quindi state attenti quando lo ripristinate.
Contiene 3 tabelle con vari esperimenti, una di queste contiene circa 14.000.000 di record in formato UNIMARC, estratti via z39.50 da SBN circa due anni fa. Ci sono un paio di colonne, una per il BID, una per l'UNIMARC.
In sostanza è tutto il catalogo SBN (solo materiale moderno, senza le authority) di 2 anni fa.
Attenzione! L'UNIMARC prodotto dall'uscita z39.50 è un po' misterioso. Soprattutto due anni fa, quando mi pare ancora non ci fosse il nuovo OPAC, per il quale dovrebbero aver sistemato alcune cosette.
Che dire, se uno trova per caso una cosa del genere, cosa deve fare? Tenersela tutta per sè? Tra l'altro è prodotto utilizzando i legittimi mezzi di interrogazione dall'esterno di SBN.
Caricalo su archive.org.
Francamente non so cosa ci si possa fare, magari anche solo un po' di analisi dei dati. Oppure niente. Tanto sono sicuro che a breve l'ICCU pubblicherà questi stessi dati più aggiornati :)
Davvero lo farà? In che formato, con che licenza?
Nemo
Mi sembra di capire che siamo sempre lì. E' lecito interrogare l'opac dell'Indice via z39.50, ma nessuno sa se e come si possono archiviare questi risultati e ri-esporli.
Il 25 maggio 2013 12:00, Giulio Bonanome gbonanome@gmail.com ha scritto:
Ohibò, ma è partita una mail per sbaglio? Ad ogni modo ecco un po' di informazioni aggiuntive:
Cosa intendi per misterioso?
Intendo dire che nessuno conosce esattamente come avviene la conversione SBN-MARC -> UNIMARC. Per la precisione, i dati originariamente forniti dallo z39.50 erano solo in formato SUTRS, mentre lo scarico UNIMARC venne realizzato grazie ad un progetto europeo e non forniva gli stessi record scaricati dall'Indice per alimentare l'OPAC. Potremmo dire che l'UNIMARC dello z39.50 era "di seconda mano", con delle imprecisioni che nessuno conosce.
Io ricordo che con z39.50 non si richiamava il record completo, ma solo una porzione - mi sbaglio?
No, mi pare ci sia tutto il record.
A parte questo, direi che mancherebbere soltanto gli authority (autori, ma anche soggetti e classi immagino) e i legami fra record (o è possibile ripristinarli attraverso l'unimarc? il marc contiene tutti i legami previsti da SBN?)
Non ho mai fatto un'analisi dei legami contenuti nell'unimarc dello z39.50. Il formato in sè prevede che sia possibile ricostruire tutto.
Sai mai che quando si partirà a mettere le bibliografie delle voci di Wikipedia su Wikidata
Per i coraggiosi che proveranno ad aprire il db, c'è una tabella con le corrispondenze EAN-BID SBN che potrebbe essere mooolto utile nel caso.
Caricalo su archive.org.
Anche io pensavo a archive.org, ma più volentieri avrei pensato a http://datahub.io/group/bibliographic Non lo faccio perchè non si tratta di un vero e proprio export UNIMARC, ma di un database mysql, secondo me non utilissimo. Ad ogni modo ora è lì, se qualcuno vuole metterlo da qualche altra parte è il benvenuto :)
Davvero lo farà? In che formato, con che licenza?
Purtroppo non ho la più pallida idea di cosa farà l'ICCU, era un mix di sarcasmo e speranza :)
Capitato come?
Due anni fa, per circa 4 mesi, qualcuno ha fatto una serie di interrogazioni periodiche al server z39.50 di SBN, memorizzando in un DB le risposte. Quel DB non è stato fornito dall'ICCU, che non sa nemmeno della sua esistenza, ed era stato fatto per indagare la "bontà" dei dati contenuti nell'Indice. Io lavoro per un'azienda che ha ottenuto la certificazione per il dialogo con l'Indice solo da un anno (passando l'anno e mezzo precedente a lavorare per ottenerla). Il rapporto tra noi e l'ICCU non è semplice, da un lato perchè gestiamo Poli con il nostro sw solo da pochi mesi, con il costante rischio di risultare inadeguati al compito, dall'altro perchè il nostro sw è rilasciato con licenza open source, ovvero se ce lo chiedete vi diamo il codice. Purtroppo non abbiamo ritenuto "opportuno" rilasciare in modalità open le componenti relative al dialogo con l'Indice SBN :( Più o meno per lo stesso motivo non ho condiviso il file due anni fa.
Ciao Gulio
Il giorno 25 maggio 2013 10:50, Federico Leva (Nemo) nemowiki@gmail.com ha scritto:
Giulio Bonanome, 24/05/2013 21:04:
Ciao a tutti,
sono accidentalmente capitato su un file che ho caricato su dropbox: https://dl.dropboxusercontent.com/u/37725196/sbndump.7z
Capitato come?
Si tratta di un database mysql da 1.7Gb. Il file scompattato pesa circa 17Gb e il database risultante pesa circa 25Gb. Quindi state attenti quando lo ripristinate.
Contiene 3 tabelle con vari esperimenti, una di queste contiene circa 14.000.000 di record in formato UNIMARC, estratti via z39.50 da SBN circa due anni fa. Ci sono un paio di colonne, una per il BID, una per l'UNIMARC.
In sostanza è tutto il catalogo SBN (solo materiale moderno, senza le authority) di 2 anni fa.
Attenzione! L'UNIMARC prodotto dall'uscita z39.50 è un po' misterioso. Soprattutto due anni fa, quando mi pare ancora non ci fosse il nuovo OPAC, per il quale dovrebbero aver sistemato alcune cosette.
Che dire, se uno trova per caso una cosa del genere, cosa deve fare? Tenersela tutta per sè? Tra l'altro è prodotto utilizzando i legittimi mezzi di interrogazione dall'esterno di SBN.
Caricalo su archive.org.
Francamente non so cosa ci si possa fare, magari anche solo un po' di analisi dei dati. Oppure niente. Tanto sono sicuro che a breve l'ICCU pubblicherà questi stessi dati più aggiornati :)
Davvero lo farà? In che formato, con che licenza?
Nemo
Bibliotecari mailing list Invio messaggi in lista: Bibliotecari@wikimedia.it Configurazione utente: http://mailman.wikimedia.it/listinfo/bibliotecari
Giulio Bonanome, 25/05/2013 12:00:
Caricalo su archive.org <http://archive.org/>.Anche io pensavo a archive.org http://archive.org, ma più volentieri avrei pensato a http://datahub.io/group/bibliographic Non lo faccio perchè non si tratta di un vero e proprio export UNIMARC, ma di un database mysql, secondo me non utilissimo. Ad ogni modo ora è lì, se qualcuno vuole metterlo da qualche altra parte è il benvenuto :)
Sí, il problema è che non ho la piú pallida idea di che cosa sia. Che cosa scrivo a proposito di diritti? Chi è l'autore? Dico di averlo trovato sotto un fungo spuntato dalle piogge di questi giorni nel mio cortile? :)
Nemo
Il punto è che non si sa a chi appartengono i diritti sui record derivanti da SBN. Inoltre, così com'è il file, non è caricabile (su archive.org) perchè in un formato non standard (http://openlibrary.org/about/requirements ).
Il giorno 25 maggio 2013 13:17, Federico Leva (Nemo) nemowiki@gmail.comha scritto:
Giulio Bonanome, 25/05/2013 12:00:
Caricalo su archive.org <http://archive.org/>.Anche io pensavo a archive.org http://archive.org, ma più volentieri
avrei pensato a http://datahub.io/group/**bibliographichttp://datahub.io/group/bibliographic Non lo faccio perchè non si tratta di un vero e proprio export UNIMARC, ma di un database mysql, secondo me non utilissimo. Ad ogni modo ora è lì, se qualcuno vuole metterlo da qualche altra parte è il benvenuto :)
Sí, il problema è che non ho la piú pallida idea di che cosa sia. Che cosa scrivo a proposito di diritti? Chi è l'autore? Dico di averlo trovato sotto un fungo spuntato dalle piogge di questi giorni nel mio cortile? :)
Nemo
Giulio Bonanome, 25/05/2013 13:54:
Il punto è che non si sa a chi appartengono i diritti sui record derivanti da SBN. Inoltre, così com'è il file, non è caricabile (su archive.org http://archive.org) perchè in un formato non standard (http://openlibrary.org/about/requirements).
Dicevo solo archive.org, non openlibrary. Vabbè, faccio io.
Nemo
Per OpenLibrary, potremmo effettivamente chiedere a Karen Coyle, bibliotecaria americana che ha vissuto per tanti anni in Italia. Io sono in contatto con lei per il progetto di Wikisource, per cui cercavamo sponde con OpenLibrary e Internet Archive, e lei adesso è il contatto principale per OL. Le scrivo a breve. Intanto, bisognerebbe riuscire ad avere, il prima possibile, una risposta chiara ed esauriente sullo status di open data di quei dati. Se, come dice Antonella De Robbio, l''open by default scatta anche per questi dati, dovremmo essere a cavallo.
Aubrey
2013/5/25 Federico Leva (Nemo) nemowiki@gmail.com
Giulio Bonanome, 25/05/2013 13:54:
Il punto è che non si sa a chi appartengono i diritti sui record derivanti da SBN. Inoltre, così com'è il file, non è caricabile (su archive.org http://archive.org) perchè in un formato non standard (http://openlibrary.org/about/**requirementshttp://openlibrary.org/about/requirements ).
Dicevo solo archive.org, non openlibrary. Vabbè, faccio io.
Nemo ______________________________**_________________ Bibliotecari mailing list Invio messaggi in lista: Bibliotecari@wikimedia.it Configurazione utente: http://mailman.wikimedia.it/**listinfo/bibliotecarihttp://mailman.wikimedia.it/listinfo/bibliotecari
Andrea Zanni, 25/05/2013 14:43:
Per OpenLibrary, potremmo effettivamente chiedere a Karen Coyle, bibliotecaria americana che ha vissuto per tanti anni in Italia. Io sono in contatto con lei per il progetto di Wikisource, per cui cercavamo sponde con OpenLibrary e Internet Archive, e lei adesso è il contatto principale per OL. Le scrivo a breve. Intanto, bisognerebbe riuscire ad avere, il prima possibile, una risposta chiara ed esauriente sullo status di open data di quei dati. Se, come dice Antonella De Robbio, l''open by default scatta anche per questi dati, dovremmo essere a cavallo.
Vale anche per le amministrazioni pubbliche non statali? In SBN c'è di tutto (anche privati, no?). Comunque l'ho messo qui: https://archive.org/details/opac-sbn-ita-2011 Se avete suggerimenti per i metadati...
Nemo
bibliotecari@liste.wikimedia.it
-
Andrea Zanni -
Enrico Francese -
Federico Leva (Nemo) -
Giulio Bonanome