Added further abbreviations present in the Szeged corpus

This commit is contained in:
Gyorgy Orosz 2017-01-14 22:08:55 +01:00
parent 9505c6a72b
commit a45f22913f

View File

@ -7,8 +7,11 @@ from spacy.language_data.punctuation import ALPHA_LOWER, CURRENCY
from ..language_data.tokenizer_exceptions import _URL_PATTERN
ABBREVIATIONS = """
A.
AG.
AkH.
.
B.
B.CS.
B.S.
B.Sc.
@ -18,57 +21,104 @@ BEK.
BSC.
BSc.
BTK.
Bat.
Be.
Bek.
Bfok.
Bk.
Bp.
Bros.
Bt.
Btk.
Btke.
Btét.
C.
CSC.
Cal.
Cg.
Cgf.
Cgt.
Cia.
Co.
Colo.
Comp.
Copr.
Corp.
Cos.
Cs.
Csc.
Csop.
Cstv.
Ctv.
Ctvr.
D.
DR.
Dipl.
Dr.
Dsz.
Dzs.
E.
EK.
EU.
F.
Fla.
Folyt.
Ford.
Fpk.
Főszerk.
G.
GK.
GM.
Gfv.
Gmk.
Gr.
Group.
Gt.
Gy.
H.
HKsz.
Hmvh.
I.
Ifj.
Inc.
Inform.
Int.
J.
Jr.
Jv.
K.
K.m.f.
KB.
KER.
KFT.
KRT.
Kb.
Ker.
Kft.
Kg.
Kht.
Kkt.
Kong.
Korm.
Kr.
Kr.e.
Kr.u.
Krt.
L.
LB.
Llc.
Ltd.
M.
M.A.
M.S.
M.SC.
M.Sc.
MA.
MH.
MSC.
MSc.
Mass.
Max.
Mlle.
Mme.
Mo.
@ -76,46 +126,78 @@ Mr.
Mrs.
Ms.
Mt.
N.
N.N.
NB.
NBr.
Nat.
No.
Nr.
Ny.
Nyh.
Nyr.
Nyrt.
O.
OJ.
Op.
P.
P.H.
P.S.
PH.D.
PHD.
PROF.
Pf.
Ph.D
PhD.
Pk.
Pl.
Plc.
Pp.
Proc.
Prof.
Ptk.
R.
RT.
Rer.
Rt.
S.
S.B.
SZOLG.
Salg.
Sch.
Spa.
St.
Sz.
SzRt.
Szerk.
Szfv.
Szjt.
Szolg.
Szt.
Sztv.
Szvt.
Számv.
T.
TEL.
Tel.
Ty.
Tyr.
U.
Ui.
User.
Ut.
V.
VB.
Vcs.
Vhr.
Vht.
Várm.
W.
X.
X.Y.
Y.
Z.
Zrt.
Zs.
a.C.
ac.
@ -125,11 +207,13 @@ ag.
agit.
alez.
alk.
all.
altbgy.
an.
ang.
arch.
at.
atc.
aug.
b.a.
b.s.
@ -167,6 +251,7 @@ dikt.
dipl.
dj.
dk.
dl.
dny.
dolg.
dr.
@ -176,6 +261,7 @@ ea.
ed.
eff.
egyh.
el.
ell.
elv.
elvt.
@ -190,6 +276,7 @@ eü.
f.h.
f.é.
fam.
fb.
febr.
fej.
felv.
@ -217,8 +304,8 @@ gazd.
gimn.
gk.
gkv.
gmk.
gondn.
Gr.
gr.
grav.
gy.
@ -244,10 +331,10 @@ ht.
htb.
hv.
hőm.
ie.
i.e.
i.sz.
id.
ie.
ifj.
ig.
igh.
@ -262,6 +349,7 @@ io.
ip.
ir.
irod.
is.
isk.
ism.
izr.
@ -269,6 +357,7 @@ iá.
jan.
jav.
jegyz.
jgmk.
jjv.
jkv.
jogh.
@ -294,8 +383,9 @@ kiv.
kk.
kkt.
klin.
km.
korm.
kp.
Kr.
krt.
kt.
ktsg.
@ -328,6 +418,7 @@ m.s.
m.sc.
ma.
mat.
max.
mb.
med.
megh.
@ -363,16 +454,17 @@ nat.
nb.
neg.
nk.
no.
nov.
nu.
ny.
nyilv.
Nyrt.
nyrt.
nyug.
obj.
okl.
okt.
old.
olv.
orsz.
ort.
@ -383,6 +475,8 @@ pg.
ph.d
ph.d.
phd.
phil.
pjt.
pk.
pl.
plb.
@ -417,14 +511,15 @@ röv.
s.b.
s.k.
sa.
sb.
sel.
sgt.
sm.
St.
st.
stat.
stb.
strat.
stud.
sz.
szakm.
szaksz.
@ -479,6 +574,7 @@ vb.
vegy.
vh.
vhol.
vhr.
vill.
vizsg.
vk.
@ -491,19 +587,24 @@ vsz.
vv.
vál.
várm.
Várm.
vízv.
.
Zrt.
zrt.
zs.
Á.
Áe.
Áht.
É.
Épt.
Ész.
Új-Z.
ÚjZ.
Ún.
á.
ált.
ápr.
ásv.
át.
é.
ék.
ény.
@ -515,9 +616,9 @@ zs.
ötk.
özv.
ú.
ú.n.
úm.
ún.
ú.n.
út.
üag.
üd.