Extend ignored-subtitles.txt

librisworks/src/main/groovy/se/kb/libris/mergeworks/Util.groovy

@@ -33,6 +33,9 @@ class Util {
         }
     }
 
+    static def noise =
+            [",", '"', "'", "ʹ", "ʼ", '[', ']', ',', '.', '.', ':', ';', '-', '(', ')', ' the ', '-', '–', '+', '!', '?',].collectEntries { [it, ' '] }
+
     private static Set<String> IGNORED_SUBTITLES = Util.class.getClassLoader()
             .getResourceAsStream('merge-works/ignored-subtitles.txt')
             .readLines().grep().collect(Util.&normalize) as Set
@@ -41,9 +44,6 @@ class Util {
             .getResourceAsStream('merge-works/generic-titles.txt')
             .readLines().grep().collect(Util.&normalize) as Set
 
-    static def noise =
-            [",", '"', "'", "ʹ", "ʼ", '[', ']', ',', '.', '.', ':', ';', '-', '(', ')', ' the ', '-', '–', '+', '!', '?',].collectEntries { [it, ' '] }
-
 
     static List asList(Object o) {
         (o ?: []).with { it instanceof List ? it : [it] }

librisworks/src/main/resources/merge-works/ignored-subtitles.txt

@@ -1,77 +1,265 @@
 a comedy
+aforismer
 a history
+äktenskapshistoria
+alex king-thriller
 a novel
 a play
 a romance
 a tale
-aforismer
+äventyrsberättelse
+äventyrsberättelse för ungdom
+äventyrsroman
+barnberättelse för små och stora
 berättelse
 berättelse för barn
+berättelse för barn och ungdom
 berättelse för flickor
 berättelse för pojkar
 berättelse för unga flickor
+berättelse för ungdom
+berättelse från 1700-talets senare del
+berättelse från kristi tid
+berättelse från nittonde seklet
+berättelse från öarna
+berättelse från okristen tid
+berättelse från sista finska kriget
+berättelse från skärgården
+berättelse från sörmland
+berättelse från västra skärgården
+berättelsen om en amerikansk familj
 berättelser
 berättelser för barn
+berättelser för unga och gamla
+berättelser från alla tidehvarf
+berättelser och skisser
+berättelse ur folklifvet
 bilderbok
+bonderoman
+bröderna paine på nya äventyr
+bröderna perry
+bygdeberättelser
+chesapeake shores-roman
 comédie
 contos
+coq rouge
+dalgliesh-deckare
+dalziel och pascoe-roman
 deckare
+deckare med ester karlsson med k
 deckarroman
+den tyske tonsättaren adrian leverkühns liv skildrat av en vän
+detektivhistoria från antikens rom
 detektivroman
 dikt
 dikter
+dikt i tre sånger
+diktsamling
+dirk pitt-roman
+dokumentärroman
 drama
 efterlämnade dikter
 ein coq-rouge-thriller
-ein roman
 eine erzählung
+ein roman
+elak skolgosses minnen
+elva brev från marcus mezentius manilianus om våren år trettio efter kristus
 erzählung
 erzählungen
-essays
+espen arnakkes kommentarer till jantelagen
 essäer
+essayer
+essays
+ett äktenskaps roman
+ett fall för anastasia kamenskaja vid moskvapolisen
+ett fall för dr siri
 ett fall för kay scarpetta
+ett fall för kommissarie brunetti
+ett fall för kommissarie çetin ikmen
+ett fall för kommissarie santos
+ett fall med dunder brak
+ett nytt fall för maria wern spänningsroman
+familjeroman
+familjs förfall
+fantasyroman
+femton böcker ur den egyptiske läkaren sinuhes liv omkr 1390-1335 f kr
+folklivsberättelse
 fortælling
+framtidsroman
+göran persson-deckare
+hägringar från reformationstiden
+hans ungdoms öden och äventyr i många länder intill år 1527 sanningsenligt framställda av honom själv i tio böcker
+harry bosch-deckare
+harry hole-thriller
+heroisk berättelse
+historia från idyllens och revolutionernas tidehvarf
+historia om rätt och orätt
+historier
+historisk äventyrsroman
+historisk berättelse
+historisk homan-deckare
+historisk kriminalroman
 historisk roman
+historisk romantisk skildring
+historiskt-romantiska skildringar från snapphanefejden
+homan-bok
 homandeckare
+homan-deckare i 1700-talsmiljö
+humoresker
+humoristisk berättelse
+indisk berättelse
 jack reacher-thriller
+jakt- fiske- och bygdehistorier
+kärlekshistoria
+kärleksroman
+kåserier
+kent mortland-thriller
 komedi
 komedi i fyra akter
+kommissarie gamache-deckare
+konrad sejer-deckare
 krimi
 kriminalroman
-kärlekshistoria
-kärleksroman
-kåserier
+kriminalroman från sandhamn
+kustroman
+lagerlöfs homeros erland lagerlöfs klassiska översättning
+läkarroman
 lustspel i en akt
+människa ur det förgångna rannsakad och hörd om sina levnadsomständigheter roman
+morden i sandhamn
+nathalie svensson- och johan axberg-deckare
 nouvelles
 novela
 novell
 novelle
 noveller
+novelletter
+novellsamling
+novell ur spelreglerna
+nutidsroman
+ny kriminalroman om hammarbypolisen
+öfvers
+originalberättelse
+originalroman
+pennritning
 pjäs
+poem
+poėma
+poesi
 polisroman
+politisk thriller
 povesti
 powieść
-poėma
+prosa
+prosadikter
+psykologisk thriller
+rammakaren theodor marklunds egen redogörelse
+religiöst poem
 reseguide
 resehandbok
+revy om människan i tid och rum
 rikosromaani
+robert krüger-deckare
+roland hassel-thriller
 romaani
 romaani rikoksesta
 roman
-roman om ett brott
-roman om skivvärlden
 romanas
 romance
+romanen om Elling
+roman från 2000-talet
+roman från värend 1650
+roman från värend på 1790-talet
+roman i femtiotre tablåer
+roman i två delar
+roman om baltutlämningen
+roman om det närvarande
+roman om ett brott
+roman om frihet
+roman om skivvärlden
+romans
+romantisk berättelse
 romanzo
+romaunt i tolv böcker
 rövarroman
 runoja
 saga
+saga på vers med rim som barnen får hitta på alldeles själva
+saga på vers med rim som barnen får hitta på alldeles själva bilderbok
+saga på vers med rim som barnen får hitta på själva
 sagor
+sällsam historia
+samling berättelser
+sång
+sånger
 sann historia
-skildringar
+sannsaga
+science fiction
+serieroman
+själavårdsbok
+själs utvecklingshistoria
+självbiografisk berättelse
+sjöroman
+skaldestycke
 skáldsaga
+skälmroman
+skärgårdsberättelse
+sketch
+skildring
+skildringar
+skildringar från attentatens och jubelfesternas tidehvarf
+skildringar från attentatens och jubelfesternas tidevarv
+skildringar ur artist- och författarelivet
+skildringar ur artist- och författarlifvet
+skildringar ur artist- och författarlivet
+skildringar ur stockholmslifvet
+skildring från franska revolutionen
+skisser
+skizz
+skolflickshistoria
+släkten lackland
+släktsaga
+småstadskrönika
+soldatfamiljs historia
+sommarbok för stora och små
 spänningsroman
+spänningsroman med anna pigeon
+spänningsroman med erik winter
+spionroman
+spökhistoria
+sprakfåle-bok
+standardupplaga
+sten wall-deckare
+stockholmsroman
 stories
+svensk originalberättelse
+svensk originalroman
+svensk sjömans äventyr
+svenskt original
+svenskt original för stockholms-tidningen
+sv orig
+tavla ur livet
+teckningar
+teckningar med text
+teckningar ur hvardagslifvet
+teckningar ur vardagslivet
+teckning ur det verkliga lifvet
+teckning ur det verkliga livet
 thriller
+tio böcker om hans jordiska liv omkring 520-450
+tom grip-thriller
+tommy flisen-deckare
+tvillingdetektiverna
+tvillingdetektiverna på nya äventyr
+ungdomsbok
 ungdomsroman
-(Efterlämnade dikter.)
+ur Dan Henrys minnen
+ur en stockholms-detektivs minnen
+ur Kalle Svenssons dagbok
+ur numas arkiv
+värmlandsberättelse
+växelringning på ett gammalt tema i två korta anslag och två hela långringningar
+vildmarksroman
+virgin river-roman
+wexforddeckare
+will trent-deckare