Random Bullshit » python http://morpheus.level28.org Progetto B.L.O.G. Thu, 09 Sep 2010 00:32:41 +0000 en hourly 1 Dupefind http://morpheus.level28.org/2009/09/dupefind/ http://morpheus.level28.org/2009/09/dupefind/#comments Mon, 21 Sep 2009 02:12:25 +0000 morpheus http://morpheus.level28.org/archives/72-guid.html Come promesso, ecco gli orrendi sorgenti dell'applicazione che ho usato per generare l'elenco dei codici fiscali duplicati (che non ho pubblicato – rompipalle sì, aspirante suicida ancora no) e il grafico "semianonimo" delle relazioni tra duplicati.

Riporto il contenuto del README per maggiore chiarezza:

*******************************************
* Graduatorie alloggi - Ricerca duplicati *
*******************************************

======= NOTA =======
I PDF contenenti gli elenchi sono stati scaricati da ilCapoluogo.it il
20-09-2009 tra le 15:40 e le 15:49, siete liberi di sostituirli con eventuali
elenchi aggiornati ma NON vi garantisco che questo coso continui a funzionare.
Se li sostituite, aggiornate il Makefile.

======= DISCLAIMER =======
I DATI PRODOTTI DA QUESTO SOFTWARE NON HANNO IL MINIMO VALORE LEGALE.
ZERO. NADA. NISBA.
Toglietevi subito dalla testa di usarlo per fare esposti, denunce o simili.
Ricontrollate SEMPRE *SEMPRE* _*SEMPRE*_ i dati prodotti dal software
confrontandoli manualmente con gli elenchi in PDF.
NON MI ASSUMO NESSUNA RESPONSABILITA` IN CASO DI DANNI A
PERSONE/COSE/ANIMALI/AMMINISTRATORI/COMMISSARI STRAORDINARI DERIVANTI DALL'USO
PROPRIO O IMPROPRIO DI QUESTO SOFTWARE.
Se il software tira fuori il vostro nome/codice fiscale: CAZZI VOSTRI!
Gli elenchi sono pubblici (Albo Pretorio del Comune) e nessuno vi ha accusato di
alcunche', risultate solo come duplicati nelle domande.
Se questo vi comporta noia - ripeto - CAZZI VOSTRI!

======= REQUISITI DI SISTEMA =======
  * Bash (cio` implica un sistema *NIX, non garantisco nulla per cygwin)
  * GNU Make
  * GNU Grep
  * Python >=2.5 ma NON 3.x
  * python-lxml
  * python-yapgvb
  * poppler (poppler-utils su debian/ubuntu)

======= UTILIZZO =======
Digitate 'make'. Tutto qui.
Otterrete due file interessanti:
  * duplicati.txt: l'elenco dei codici fiscali duplicati e relativi
    intestatari delle domande a cui appartengono;
  * duplicati.svg: il diagramma "semianonimo" con i grafi delle relazioni tra
    duplicati.

Se volete deanonimizzare il grafo, modificate duplicati.py.
Se non sapete come farlo, attaccatevi.

 -- 21 Sett. 2009, Matteo Panella
]]> http://morpheus.level28.org/2009/09/dupefind/feed/ 0 Graduatorie alloggi: un'analisi (molto) artigianale http://morpheus.level28.org/2009/09/graduatorie-alloggi-unanalisi-molto-artigianale/ http://morpheus.level28.org/2009/09/graduatorie-alloggi-unanalisi-molto-artigianale/#comments Sun, 20 Sep 2009 23:15:24 +0000 morpheus http://morpheus.level28.org/archives/71-guid.html Di come vanno le cose per le C.A.S.E. e per i MAP – onestamente – non me ne dovrebbe fregare più di tanto, ho il garage agibile e vivrò lì finchè non avrò finito i lavori a casa.
Però dopo aver letto le dichiarazioni di Fabio Pelini (PRC-SE), mi sono preso la briga di post-elaborare anche io le graduatorie (con un metodo complicato – prima o poi posterò il software che ho scritto e usato) "per vedere l'effetto che fa".

Intanto cominciamo subito con un paio di perle d'annata: il signor D'AL√≤ (sì, avete letto bene: "D'AL-RADICEQUADRATA-MINOREUGUALE") e un certo signor "MARTINELLI" privo di nome e con un codice fiscale che non ha nulla a che vedere con quel cognome.
Ma questo non è niente: il risultato di questa analisi artigianale è che su 23073 codici fiscali OTTANTASEI sono duplicati!

Ebbene sì, c'è gente che compare in più nuclei familiari, oppure ha presentato una domanda ma si trova nel nucleo familiare di un'altra domanda o addirittura ha presentato due domande. Il caso più eclatante è di due intestatari di una domanda, entrambi beneficiari di un alloggio presso le C.A.S.E.: uno figura nel nucleo familiare dell'altro e viceversa!

Non ci credete? Ho preparato un diagramma in SVG che illustra in forma di grafi i "duplicati" e le relazioni che intercorrono tra loro.
I rettangoli rappresentano gli intestatari delle domande, le ellissi le persone che figurano solo come componenti di nuclei, gli archi uscenti da un nodo indicano l'appartenenza al nucleo familiare di una domanda ed i colori indicano la graduatoria in cui è presente l'intestatario:

  1. Rosso → beneficiario C.A.S.E.
  2. Blu → beneficiario MAP
  3. Ciano → in attesa di collocazione
  4. Verde → non beneficiario

Nel caso di domande multiple, il colore indica la domanda con assegnazione "maggiore" (secondo l'ordine dell'elenco precedente).
I rettangoli isolati non sono errori (domanda doppia), né i doppi archi tra due nodi (vuol dire essenzialmente che l'intestatario ha presentato due domande).
Per scrupolo (leggasi: per evitare legnate), ho ritenuto opportuno sostituire i codici fiscali con una stringa semicasuale univoca.

Nel caso non abbiate un browser in grado di visualizzare SVG eccovi una versione ridottissima dell'immagine (cliccate per ingrandire):
Diagramma dei duplicati

"Buona" visione!

]]> http://morpheus.level28.org/2009/09/graduatorie-alloggi-unanalisi-molto-artigianale/feed/ 0 FNV-0 in Python http://morpheus.level28.org/2008/06/fnv-0-in-python/ http://morpheus.level28.org/2008/06/fnv-0-in-python/#comments Mon, 16 Jun 2008 23:09:48 +0000 morpheus http://morpheus.level28.org/archives/26-guid.html Piccolo code snippet per estimatori del pitone.

  1. def fnv_hash(data):
  2.    """
  3.    Returns a 32bit FNV-0 hash of the given string.
  4.  
  5.    >>> fnv_hash('3dcb910fb26bafb97e4a9660493afd9704536743')
  6.    -1588890617L
  7.    >>> fnv_hash('deb114355f8b912c4f7c7f0aceac7adceaa5db10')
  8.    317390073L
  9.    """
  10.    h = long(0)
  11.    for i in xrange(len(data)):
  12.       h += (h << 1) + (h << 4) + (h << 7) + (h << 8) + (h << 24)
  13.       h ^= ord(data[i])
  14.    # Everything after the 32th bit is meaningless
  15.    h &= 0xffffffffL
  16.    # Perform sign extension
  17.    if h & 0x80000000L:
  18.        h = -(~(h – 1) & 0xffffffffL)
  19.    return h
  20.  

I compagni di merende che masticano C avranno sicuramente storto il naso vedendo sia l'AND che l'estensione di segno fatta in quel modo becero, quindi precisiamo:

  • Python promuove automaticamente gli interi alla storage class superiore (ANCHE oltre i 64 bit) per evitare l'overflow, quindi solo i 32 bit inferiori contengono valori sensati;
  • per quanto appena esposto, l'estensione di segno non può essere effettuata con un banale OR (che promuoverebbe l'intero per conservare il segno!) ma è necessario fare ricorso alla definizione scolastica di complemento a 2.
]]> http://morpheus.level28.org/2008/06/fnv-0-in-python/feed/ 0 The pasta theory of design http://morpheus.level28.org/2008/06/the-pasta-theory-of-design/ http://morpheus.level28.org/2008/06/the-pasta-theory-of-design/#comments Wed, 11 Jun 2008 15:50:58 +0000 morpheus http://morpheus.level28.org/archives/25-guid.html
  • Spaghetti: each piece of code interacts with every other piece of code [can be implemented with GOTO, functions, objects]
  • Lasagna: code has carefully designed layers. Each layer is, in theory independent. However low-level layers usually cannot be used easily, and high-level layers depend on low-level layers.
  • Ravioli: each part of the code is useful by itself. There is a thin layer of interfaces between various parts [the sauce]. Each part can be used elsewhere.
  • …but sometimes, the user just wants to order Ravioli, so one coarse-grain easily definable layer of abstraction on top of it all can be useful.

    • (from Twisted Matrix documentation)

    ]]>     http://morpheus.level28.org/2008/06/the-pasta-theory-of-design/feed/ 0