Skip to content
Snippets Groups Projects
Commit a45b5506 authored by Ribary, Marton Dr (School of Law)'s avatar Ribary, Marton Dr (School of Law)
Browse files

Cluster graph

parent 4bfda6ae
No related branches found
No related tags found
No related merge requests found
......@@ -84,11 +84,11 @@ The script loads the normalized dataframe with 339 thematic sections of at least
#### 3.4 Inspect the output of hierarchical clustering
`Manual step > hierarchlust.graphml, hierarchlust.png`
`hierarchlust_norm_top50_004.py + manual > hierarchlust.graphml, hierarchlust.png`
_*Rerun and rewrite* Clusters produced at cuts specified in the previous step are inspected by building a conceptual tree-map in the yEd graph editor. The concept of "ownership" is suspected to be present in clusters which are broadly associated with the following areas of law: (1) possession in inheritance, (2) public property, (3) usufruct, (4) security in a credit agreement, (5) money, and (6) theft. Clusters (1-4) are produced at Euclidean distance of 2.5 which has 9 clusters in total. Clusters (5-6) is present at Euclidean distance of 2.0. These two clusters are meged into one at 2.5._
![hierarchlust_tree-map_colour](https://github.com/mribary/pyDigest/blob/master/images/hierarchlust_colour.png)
![hierarchlust_tree-map_colour](https://github.com/mribary/pyDigest/blob/master/images/clust_graph.png)
### 4. K-means
......
7
possessio
bonus
emancipo
filius
tabula
nepos
pater
confero
contra
nepos1
4
mater
hereditas
consanguineus
filius
legitimus
possessio
pater
bonus
peto
cognatus
3
possessio
venter
mitto
mulier
praetor
bonus
praegno
praegnatem
res
curator
5
possessio
bonus
heres
peto
filius
tabula
controversia
carboniano
pubertas
tempus
4
heres
legatus
falcidiae
falcidia
lego1
legatarius
falcidiam
lex
hereditas
fideicommitto
10
legatus
heres
fideicommitto
lego1
testamentum
relinquo
condicio
meus
testator
legatarius
8
heres
hereditas
restituo
instituo
filius
pars
substituo
adeo
condicio
testamentum
8
testamentum
heres
filius
codicilli
inofficiosus
rumpo
valeo
miles
exheredo
scribo
9
tutor
tutela
tuto
curator
excusatio
filius
pupillus
suspicio1
excuso
testamentum
11
pupillus
tutor
tutela
tuto
res
curator
pecunia
actio
magistratus
iudicium
7
pignus
creditor
hypotheca
debitor
res
pecunia
obligo
solvo
vendo
pigneraticia
6
dos
doto1
mulier
maritus
dotal
pater
vir
matrimonium
filia
nuptiae
5
usucapio1
res
possessio
emo
usucapio
possideo
publiciana
emptor
tempus
causa
9
emptor
vendo
venditor
emo
vendito
res
pretium
emptio
ago
venditio
2
noxal
noxa
dominus
servus1
deditio
iudicium
potestas
servio
furtum
defendo
2
dolo1
actio
actium
adverro
iudicium
res
heres
malo
reus
dolus
5
furtum
res
actio
fur
teneo
ago
surripio
dominus
servus1
actium
3
aquilia
occido
aquiliae
lex
teneo
vulnero
actio
damnum
ago
servus1
4
procurator
stipulatio
res
reor
defendo
dominus
ago
committo
iudicium
solvo
5
stipulo
stipulatio
obligatio
promitto
spondeo
res
ago
acquiro
promissor
heres
3
donatio
dono
uxor
mors
causa
vir
valeo
mulier
maritus
res
8
solvo
pecunia
condictio
repeto
condico
accipio
res
causa
libero
debitor
2
curator
furiosus
bonus
res
prodigus
demo
creditor
curatio
praetor
prodigo
4
creditor
bonus
separatio
fraudo
causa
heres
res
latitaris
actio
latito
5
exceptio
paciscor
peto
res
ago
dolus
pacisco
causa
dolo1
heres
3
magister
navus
nauta
exercitor
navo
vector
merces
res
exerceo
conduco
3
societas
socius
erciscundae
iudicium
divido
res
communio1
heres
pars
communis
10
res
hereditas
depono
actio
commodo2
possessor
causa
bonus
heres
ago
2
institor
praepono
tributorius
institorius
tribuo
merce
merx
dominus
teneo
peculio
5
mando1
negotium
res
actio
gestor
emo
pecunia
meus
solvo
dominus
2
fideiussor
fidejussor
accipio
obligatio
reus
fidejubeo
obligo
solvo
teneo
condicio
4
constituo
pecunia
solvo
compensatio
teneo
trajecticius
ephesus
capua
locus
arbitrarius
4
peculium
peculio
dominus
servus1
filius
pater
deduco
heres
vicarius
servo
5
instrumentum
legatus
argentum
lego1
contineo
vinum
aurum
vasum
supellectilis
instruo
4
mulier
senatus
consulo
intercedo
filius
pater
pecunia
mutuus
exceptio
creditor
2
abavus
neptis
nepos1
trineptis
proneptis
pronepos
abnepos
trinepos
filia
frater
4
postliminium
hostis
filius
potestas
ius
adoptio
pater
revorto
adopto
capio
4
uxor
duco
nuptiae
senator
pater
matrimonium
filius
nubo
sponsale
filia
2
urbs
praeficio
praefectus
incendium
vigilis
cura
fustis
effringo
quies
cilonem
2
militia
miles
desertio
punior
desertor
custodia
caput
carcer
causa
crimen
6
provincia
poena
metallum
relego1
insula
damno
praeses
interdico
proconsulis
relegaris
1
abigeus
abigo
abigeatus
pecus
bos
gladius
grex
abduco
armentum
ovo
5
fiscus
bonus
delator
defero
heres
divus
rescribo
causa
testamentum
taceo
4
adulterium
accusatio
accuso
crimen
accusator
reus
maritus
lex
abolitio
uxor
5
testimonium
quaestio
senatus
dominus
testamentum
torqueo
servus1
divus
occido
scribo
2
fugitivus
fabia
inquiro
magistratus
crimen
lex
dominus
celo
servus1
scio
3
peculor
maiestas
lex
pecunia
publicus
crimen
iulius
neve
sacrilegus
qui1
3
munus
honor
vacatio
patrimonium
immunitas
publicus
personal
excusatio
creo
excuso
4
legatio
decurio
munus
domicilium
ordo
honor
pater
decurio1
res
filius
3
appello
appellatio
causa
sententia
provocaris
provoco
triduum
rescribo
biduus
princeps
6
rapio
vis
turba
metus
res
edictum
naufragium
dolo1
teneo
actio
2
juro
iusiurandum
defero
iuro
iurisiurandi
res
exceptio
actio
iuraris
jurejuro
3
opus
publicus
res
honor
pecunia
rescribo
pollicitatio
promitto
curator
civitas
5
opus
damnum
nuntiatio
aedes
dominus
loco
inficio
res
conduco
conductor
5
ius
lex
populus
italici
plebs
constituo
civitas
colonia
res
appello
4
arbor
mensor
finis
rego
caedo
radix
actio
terminus
confinis
ago
2
iurisdictio
jurisdictio
mando1
imperium
mandatum
mando
praetor
mandaris
merus
ius
3
restitutio
res
restituo
paruus
causa
integer
subvenio
absum
publicus
praetor
2
quinquennium
ingenuitas
status
praejudicium
retracto
ingenuus
mors
quaestio
libertus
oratio
4
compromitto
arbiter
sententia
res
litigator
causa
iudex
iudico
cogo
condemno
2
postulo
edictum
prohibeo
praetor
ius
magistratus
causa
caecus1
depugno
impetro
4
iniuriaris
iniuria
ago
causa
convicium
actio
praetor
infamia
pater
filius
2
deminutio
capio
delibero
civitas
minutio
deminuo
praetor
hereditas
filius
causa
1
edo
argentarius
ratio
argentaria
editio
edo1
instrumentum
causa
consul
edo2
3
interrogo
respondeo
heres
confiteor
probatio
probaris
pars
confessio
interrogatio
indebitus
2
transactio
transigo
alimentum
relinquo
praetor
derelinquo
aquiliana
oratio
causa
res
8
patronus
libertus
bonus
filius
possessio
opera
tabula
heres
ius
operaris
5
libertas
heres
liber
manumitto
servus1
condicio
fideicommitto
testamentum
stichus
causa
5
manumitto
libertas
servus1
lex
causa
liber
pater
filius
dominus
nummus
8
fruor
fructus
usus
utor
fructuarius
legatus
proprietas
heres
fundo1
res
4
exhibeo
interdictum
ago
dolo1
possideo
res
teneo
actio
malo
causa
3
sepulcrum
funus
infero
funerarius
locus
religiosus
funero
heres
mortuus
violo
5
possideo
possessio
precarius
res
interdictum
rogo
causa
acquiro
animus
nos
2
deicio
vis
interdictum
possessio
arma
possideo
effundo
unde
competo
colonus
2
interdico
sacer
divinus
sancio
res
ius
locus
interdictor
publicus
causa
4
interdictum
clam
vis
via
opus
cloaca
publicus
reficio
prohibeo
precarius
3
servitus
aedes
lumen
stillicidium
servio
altus
ius
paries
vicinus
impono
4
via
aqua
fundus
servitus
servio
fundo1
ius
duco
iter
haurio
2
flumen
ripa
fluo
aestas
alveus
navigium
interdictum
publicus
aqua
navigabilis
3
aqua
pluvia
duco
arceo
aestas
rivus
opus
interdictum
aestivus
ager
7
bonus
possessio
emancipo
filius
tabula
nepos
pater
confero
contra
nepos1
4
mater
hereditas
filius
consanguineus
legitimus
pater
bonus
possessio
heres
peto
3
venter
possessio
mitto
mulier
bonus
praetor
praegno
praegnatem
res
curator
5
possessio
bonus
heres
peto
filius
tabula
carboniano
controversia
scribo
tempus
14
legatus
heres
lego1
fideicommitto
condicio
relinquo
testamentum
legatarius
meus
pars
8
heres
hereditas
restituo
filius
pars
instituo
substituo
scribo
condicio
testamentum
8
testamentum
heres
filius
codicilli
inofficiosus
rumpo
scribo
miles
valeo
exheredo
9
tutor
tutela
tuto
curator
excusatio
filius
pupillus
suspicio1
excuso
testamentum
11
pupillus
tutor
tutela
tuto
res
curator
pecunia
actio
magistratus
iudicium
7
pignus
creditor
res
debitor
hypotheca
pecunia
obligo
solvo
vendo
accipio
6
dos
doto1
mulier
maritus
pater
dotal
vir
matrimonium
filia
res
5
usucapio1
res
emo
possessio
possideo
usucapio
publiciana
tempus
emptor
causa
9
emptor
vendo
emo
venditor
res
vendito
ago
pretium
emptio
venditio
4
dolo1
noxal
dominus
noxa
actio
servus1
iudicium
actium
deditio
adverro
8
furtum
res
actio
teneo
ago
aquilia
dominus
servus1
occido
actium
4
procurator
stipulatio
res
reor
defendo
dominus
ago
committo
iudicium
solvo
5
stipulo
stipulatio
obligatio
promitto
res
spondeo
ago
heres
promissor
acquiro
3
donatio
dono
causa
mors
uxor
vir
mulier
res
valeo
maritus
8
solvo
pecunia
accipio
condictio
repeto
condico
res
causa
debitor
libero
6
creditor
bonus
separatio
curator
res
fraudo
heres
causa
latitaris
actio
5
exceptio
paciscor
peto
res
ago
dolus
pacisco
causa
dolo1
heres
3
magister
navus
nauta
exercitor
navo
vector
res
merces
exerceo
conduco
3
societas
socius
iudicium
erciscundae
res
divido
heres
communio1
pars
communis
10
res
hereditas
depono
actio
causa
bonus
possessor
heres
commodo2
ago
7
mando1
negotium
res
actio
gestor
pecunia
dominus
emo
meus
ago
6
fideiussor
fidejussor
constituo
accipio
solvo
pecunia
teneo
obligatio
reus
obligo
4
peculium
peculio
dominus
servus1
filius
pater
heres
deduco
res
vicarius
5
instrumentum
legatus
argentum
contineo
lego1
vinum
aurum
vasum
supellectilis
instruo
4
mulier
senatus
consulo
filius
intercedo
pater
pecunia
mutuus
creditor
exceptio
10
filius
pater
nepos1
neptis
filia
abavus
proneptis
pronepos
uxor
trineptis
11
provincia
poena
metallum
punior
militia
relego1
miles
urbs
insula
tempus
5
fiscus
bonus
delator
heres
causa
divus
defero
rescribo
testamentum
ius
4
adulterium
accusatio
accuso
crimen
accusator
reus
lex
abolitio
uxor
accusaris
10
testimonium
lex
senatus
quaestio
dominus
divus
servus1
torqueo
testamentum
scribo
7
munus
honor
legatio
decurio
publicus
vacatio
res
pater
filius
domicilium
3
appello
appellatio
causa
sententia
provocaris
provoco
triduum
rescribo
biduus
princeps
6
rapio
vis
turba
metus
res
edictum
naufragium
dolo1
teneo
actio
2
juro
iusiurandum
defero
iuro
iurisiurandi
res
exceptio
actio
iuraris
reus
8
opus
damnum
nuntiatio
res
aedes
dominus
loco
inficio
conduco
conductor
5
ius
lex
populus
italici
plebs
constituo
civitas
res
colonia
publicus
4
arbor
mensor
finis
caedo
rego
radix
actio
terminus
ago
confinis
2
iurisdictio
jurisdictio
mando1
imperium
mandatum
mando
praetor
mandaris
ius
merus
3
restitutio
res
paruus
restituo
causa
integer
publicus
praetor
absum
subvenio
2
quinquennium
ingenuitas
status
retracto
praejudicium
ingenuus
mors
quaestio
oratio
assero1
18
compromitto
causa
res
iniuriaris
sententia
praetor
arbiter
iniuria
ago
heres
8
patronus
libertus
bonus
filius
possessio
opera
heres
ius
tabula
contra
5
libertas
heres
liber
manumitto
servus1
condicio
fideicommitto
testamentum
causa
ratio
5
manumitto
libertas
servus1
lex
causa
liber
filius
pater
dominus
annus
8
fruor
fructus
usus
utor
fructuarius
legatus
heres
proprietas
res
fundo1
4
exhibeo
interdictum
ago
dolo1
res
possideo
teneo
actio
causa
malo
3
sepulcrum
funus
funerarius
infero
locus
religiosus
funero
heres
mortuus
violo
5
possideo
possessio
precarius
res
interdictum
rogo
causa
acquiro
animus
nos
8
interdictum
deicio
vis
clam
publicus
via
opus
locus
cloaca
iter
7
servitus
servio
ius
aqua
via
aedes
fundus
iter
vicinus
stillicidium
5
aqua
pluvia
flumen
duco
aestas
arceo
interdictum
fluo
rivus
opus
7
bonus
possessio
filius
emancipo
pater
tabula
nepos
contra
confero
heres
12
possessio
bonus
filius
heres
mater
peto
hereditas
pater
admitto
tempus
14
heres
legatus
lego1
fideicommitto
condicio
relinquo
testamentum
meus
pars
res
8
heres
hereditas
restituo
filius
pars
instituo
scribo
condicio
adeo
substituo
8
testamentum
heres
filius
rumpo
scribo
codicilli
inofficiosus
miles
ius
valeo
20
tutor
pupillus
tutela
tuto
curator
res
praetor
filius
pater
magistratus
7
pignus
creditor
res
debitor
hypotheca
pecunia
obligo
solvo
vendo
accipio
6
dos
mulier
doto1
maritus
pater
vir
filia
res
dotal
uxor
5
usucapio1
res
emo
possessio
possideo
usucapio
tempus
causa
emptor
publiciana
9
emptor
vendo
emo
venditor
res
vendito
ago
pretium
emptio
venditio
12
furtum
actio
res
dominus
teneo
servus1
ago
actium
aquilia
dolo1
9
stipulatio
stipulo
res
procurator
dominus
ago
obligatio
promitto
heres
accipio
3
donatio
dono
causa
uxor
mors
vir
res
mulier
valeo
maritus
8
solvo
pecunia
accipio
condictio
repeto
res
causa
condico
libero
debitor
6
creditor
bonus
curator
separatio
res
causa
fraudo
heres
actio
praetor
5
exceptio
peto
paciscor
res
ago
dolus
causa
pacisco
dolo1
heres
29
res
actio
mando1
ago
heres
causa
pecunia
accipio
teneo
iudicium
4
peculio
peculium
dominus
servus1
filius
pater
heres
res
ago
servo
5
legatus
instrumentum
argentum
contineo
lego1
vinum
aurum
supellectilis
causa
vasum
14
filius
pater
mulier
nepos1
uxor
filia
senatus
neptis
abavus
proneptis
30
poena
causa
crimen
divus
adulterium
rescribo
lex
fiscus
res
punior
7
munus
honor
legatio
publicus
res
decurio
vacatio
pater
filius
civitas
3
appello
appellatio
causa
sententia
provocaris
rescribo
ago
provoco
princeps
triduum
6
rapio
vis
turba
metus
res
edictum
naufragium
dolo1
teneo
actio
44
res
causa
ius
praetor
opus
ago
actio
compromitto
dominus
paruus
8
patronus
libertus
bonus
filius
possessio
opera
ius
heres
tabula
pars
10
libertas
manumitto
heres
liber
servus1
condicio
causa
fideicommitto
testamentum
ratio
8
fruor
fructus
utor
usus
fructuarius
legatus
heres
proprietas
res
fundo1
20
interdictum
possideo
possessio
precarius
res
vis
deicio
clam
locus
causa
7
servitus
ius
servio
aqua
via
aedes
fundus
ago
stillicidium
vicinus
5
aqua
pluvia
duco
flumen
aestas
interdictum
arceo
opus
rivus
ager
19
bonus
possessio
filius
pater
heres
emancipo
tabula
peto
hereditas
contra
14
heres
legatus
lego1
fideicommitto
condicio
relinquo
testamentum
pars
meus
res
16
heres
hereditas
testamentum
filius
restituo
scribo
pars
instituo
pater
condicio
20
tutor
pupillus
tutela
tuto
res
curator
praetor
filius
pater
actio
7
pignus
creditor
res
debitor
hypotheca
pecunia
obligo
solvo
accipio
vendo
6
dos
mulier
doto1
maritus
pater
vir
res
filia
uxor
matrimonium
14
emptor
emo
res
vendo
venditor
ago
vendito
pretium
servus1
emptio
12
furtum
actio
res
teneo
dominus
ago
servus1
actium
aquilia
dolo1
60
res
causa
ago
solvo
pecunia
heres
accipio
actio
stipulo
dominus
23
filius
pater
peculio
peculium
legatus
uxor
mulier
causa
contineo
res
30
causa
poena
lex
rescribo
divus
crimen
adulterium
res
fiscus
bonus
60
res
causa
ius
praetor
ago
publicus
actio
opus
paruus
sententia
8
libertus
patronus
bonus
filius
possessio
ius
heres
opera
pars
contra
10
libertas
manumitto
heres
liber
servus1
condicio
causa
fideicommitto
testamentum
ratio
8
fruor
utor
usus
fructus
legatus
fructuarius
heres
proprietas
res
fundo1
20
interdictum
possideo
possessio
res
vis
precarius
deicio
locus
causa
exhibeo
12
aqua
ius
duco
servitus
servio
ago
pluvia
flumen
vicinus
via
19
bonus
possessio
filius
pater
heres
emancipo
peto
hereditas
tabula
contra
30
heres
legatus
hereditas
testamentum
filius
condicio
fideicommitto
pars
scribo
lego1
20
tutor
pupillus
tutela
tuto
res
curator
praetor
filius
pater
actio
7
pignus
creditor
res
debitor
pecunia
hypotheca
obligo
solvo
accipio
vendo
6
dos
mulier
doto1
maritus
pater
vir
res
filia
uxor
matrimonium
86
res
ago
causa
actio
heres
dominus
accipio
solvo
servus1
teneo
113
res
causa
pater
ius
filius
dominus
heres
ago
verus
publicus
18
libertas
libertus
heres
manumitto
patronus
liber
servus1
filius
causa
condicio
8
fruor
utor
usus
fructus
legatus
fructuarius
heres
proprietas
res
fundo1
32
interdictum
aqua
possideo
ius
ago
possessio
locus
res
precarius
vis
49
heres
legatus
hereditas
filius
testamentum
bonus
pars
scribo
condicio
pater
20
tutor
pupillus
tutela
tuto
res
curator
praetor
filius
pater
actio
99
res
ago
causa
actio
heres
solvo
accipio
pecunia
dominus
servus1
131
causa
res
heres
filius
pater
ius
libertas
servus1
liber
dominus
40
interdictum
aqua
utor
fruor
res
ius
possideo
usus
ago
possessio
49
heres
legatus
hereditas
filius
testamentum
bonus
pars
scribo
condicio
pater
290
res
causa
heres
ago
actio
ius
dominus
servus1
accipio
bonus
Source diff could not be displayed: it is too large. Options to address this: view the blob.
images/clust_graph.png

447 KiB

images/hierarchlust_colour.png

500 KiB

# Import packages
import pandas as pd
import numpy as np
import re
punctuation = r"[\"#$%&\'()*+,-/:;<=>@[\]^_`{|}~.?!«»]"
# Load dataframe
path = '/home/mribary/Dropbox/pyDigest/dump/hierarchlust_terms_norm_top50.csv'
df = pd.read_csv(path, index_col=0)
# Write cluster terms at cuts into individual text files
cuts = ['3.5', '3.0', '2.5', '2.0', '1.75', '1.5', '1.375']
for cut in cuts:
path = '/home/mribary/Dropbox/pyDigest/dump/' + str(cut) + '_cut_terms.txt'
with open(path, "a") as f:
for y in set(df[cut].values):
print(len(df[cut][df[cut] == y]), file=f)
terms = df[str(cut) + '_top10_terms_only'][min(df.index[df[cut] == y])]
new_terms = re.sub(punctuation, '', terms)
terms_list = new_terms.split(' ')
for x in terms_list:
print(x, file=f)
print('\n', file=f)
\ No newline at end of file
0% Loading or .
You are about to add 0 people to the discussion. Proceed with caution.
Finish editing this message first!
Please register or to comment