added material

nltk_data/tokenizers/punkt_tab/norwegian/abbrev_types.txt

@@ -0,0 +1,106 @@
+t
+p.p
+bk
+cc
+pga
+e.e.o
+o.h
+dr
+st
+uh
+kk
+t.d
+h.m
+p
+adm
+nr
+etc
+t.h
+dæhlie-triumf
+ev
+udv
+anm
+ø
+osv
+dm
+hi
+b.b
+inc
+r.c
+d.v.s
+ce
+fr
+chr
+adm.dir
+m.a
+b
+p.t
+m.v
+k
+m.m
+i.l
+mill
+h.e
+d.å
+bl.a
+i.h.h.t
+mrs
+b.i.t
+sam.pol
+o.l
+w
+jfr
+h.g
+str
+mil.org
+c.j
+sifre
+l.t
+t.v
+ex
+gj.v
+pr
+d.y
+j.o
+g.c
+avd
+o.s.v
+pol
+ca
+f.eks
+tjenesteforsømmelse
+mr
+d.c
+sam
+.e
+h.h.v
+f.v
+fenomen
+kl
+hr
+c.h
+miljøvernavdelingen
+h.c
+startstreken
+r
+o.a
+mrd
+a.s
+j.v
+j
+jr
+f.w
+kfr
+l.h
+bås
+schlickernrieder
+f.-eks
+f
+5.n7
+c.c
+fung
+dvs
+d.e
+wc
+f.å
+th

nltk_data/tokenizers/punkt_tab/norwegian/collocations.tab

@@ -0,0 +1,54 @@
+m	skjærstad
+##number##	plass
+##number##	omgang
+##number##	oktober
+h	rowe
+##number##	juni
+##number##	september
+##number##	klasse
+##number##	mai
+##number##	april
+##number##	nyttårsdag
+d	hillgaar
+##number##	etasje
+c	sundts
+o	henrik
+a	himle
+a	robinson
+m	bjelland
+##number##	d.å.
+##number##	runden
+h	spang
+##number##	etappen
+##number##	mars-tog
+##number##	februar
+##number##	divisjonslaget
+##number##	minutt
+g	larsen
+##number##	divisjon
+##number##	januar
+##number##	august
+m	pedersen
+m	lillebø
+##number##	november
+h	reimers
+a	hoffman
+##number##	jubileumsår
+##number##	desember
+d	hagesæther
+##number##	divisjonsnivå
+##number##	omgangen
+n	kristiansen
+##number##	skaff
+##number##	divisjonslag
+a	pettersen
+##number##	divisjonskamper
+##number##	plassen
+##number##	juli
+c	sjaastad
+##number##	runde
+##number##	viseformann
+i	eliassen
+##number##	mars
+##number##	nurmis
+i	hagen

nltk_data/tokenizers/punkt_tab/norwegian/sent_starters.txt

@@ -0,0 +1,63 @@
+de
+først
+selv
+vi
+derfor
+dessutan
+njvi
+dette
+politiet
+nji
+njde
+hensikten
+totalt
+njnår
+ingen
+mannen
+då
+anmeldt
+foto
+begge
+difor
+njdet
+ifølge
+nå
+arkiv
+når
+det
+så
+no
+deretter
+samtidig
+side
+men
+både
+njden
+dersom
+dessverre
+årsaken
+da
+njmen
+dessuten
+denne
+her
+ho
+hvis
+tekst
+problemet
+dermed
+etter
+jeg
+den
+kanskje
+ørdag
+tanken
+foruten
+resultatet
+njjeg
+dei
+ntb
+nkjeg
+hun
+eg
+han