Kvalitet af genereret tekst Tekst-til-tekst generering søgning, spørgsmålsbesvarelse, simplificering, opsummering Sommer var det, midt paa Dagen, i et Hjørne af Hegnet. Ligefor stod der et gammelt Egetræ, om hvis Stamme man gjerne kunde sige, at den vred sig i Fortvivlelse over den Mangel paa Harmoni, der var mellem dens ganske ny, gulladne Løv og dens sorte og tykke, krogede Grene, som meest af Alting lignede grovt fortegnede gammelgothiske Arabesker. Det var sommer. Det var midt på dagen. Det var i et hjørne af hegnet. Overfor stod et gammelt egetræ, hvis stamme nærmest så ud som om den vred sig i fortvivlelse over manglen på harmoni mellem dens gule løv og dens sorte grene.
To slags tekstkvalitet A. Kvalitetstab som følge af maskinelle klippe-klistremanøvrer Make another note Make another note B. Kvalitetsforskelle i oprindelige kilder Om Slægtens to første Baroner er her kun at meddele, at Helmuth Hieronimus i en øjeblikkelig Forlegenhed lod omhugge og bortsælge den pragtfulde, vel en Fjerdingvej lange Lindeallé,... Og at Hannibal Hieronimus i en mere permanent Trang for Kontanter lod i fem paa hinanden følgende Aar alle sine Udhuse blotte for det alentykke Egetømmer... Mål: forbedre A ved hjælp af B
Besiddelser var ved at gaa al Kødets Gang. Syv jævnstore Baroniet Herregaarde Næsset havde med Afbyggergaardene tre Generationer depenseret. Julianelund og Skovlyst var blevet oprettet ved Patent Hans Excellence af 11te havde Oktober selv 1805 tabt den af Gehejmekonferensraad sidste ved et uheldigt Spillebord Hannibal Hieronimus paa sin v. Leunbach i hans femoghalvfjerdsindstyveaarige Alders firsindstyvende Geburtstag. Aar. Og nu, da der Først af alle paa Herlighederne dette Tidspunkt kun af var sit Liv Hovedgaarden opdagede nemlig Næsset den tilbage, gamle tog Herre, han at den Slægtens kraftige Beslutning at Besiddelser rebe Sejlene. var ved at gaa al Kødets Gang. Han lod til den Syv Ende jævnstore hele Baroniet den Herregaarde sydlige, Næsset samt havde med Afbyggergaardene tre Generationer Fjerdedele af depenseret. den Julianelund østlige og og vestlige Skovlyst Fløj var af blevet oprettet ved Patent Slottet nedrive. Hans Solgte Excellence Sten af 11te og havde Oktober Tømmer selv 1805 tabt til de den af omliggende Gehejmekonferensraad sidste ved Bondebyer et uheldigt og Spillebord Hannibal oprettede Hieronimus paa af sin v. Leunbach i hans Stumperne femoghalvfjerdsindstyveaarige Baroniet Næsset Alders med firsindstyvende Fideikommiskapital Geburtstag. Aar. stor 25,000 Rbd. Og nu, da der Først af alle paa Herlighederne dette Tidspunkt kun af var sit Liv Hovedgaarden opdagede nemlig Næsset den tilbage, gamle tog Herre, han at den Slægtens kraftige Og den Dag, Beslutning han erholdt at Besiddelser rebe Patentet Sejlene. egenhændig var ved at gaa underskrevet al Kødets Gang. af Kong Frederik VI som Regeringens Han Indehaver, lod til den Syv lod Ende jævnstore han sin hele Baroniet ældste den Herregaarde sydlige, Søn, Næsset Helmuth samt havde med Hieronimus Afbyggergaardene tre Generationer Fjerdedele v. Leunbach, af depenseret. den Julianelund østlige der og og vestlige Skovlyst Fløj var af blevet oprettet ved Patent beklædte en Slottet Slags nedrive. Godsforvalterstilling Hans Solgte Excellence Sten af 11te paa og havde Oktober Tømmer Gaarden, selv 1805 tabt til kalde den af omliggende Gehejmekonferensraad for sidste sig og ved Bondebyer talede et uheldigt til ham og Spillebord Hannibal saalunde: oprettede Hieronimus paa af sin v. Leunbach i hans Hrm! Lykken Stumperne har paa femoghalvfjerdsindstyveaarige Baroniet længe ikke Næsset Alders været med firsindstyvende os v. Leunbachere Fideikommiskapital Geburtstag. Aar. gunstig, stor min 25,000 kære Helmuth! Rbd. Konjunkturerne har i en Og Aarrække nu, da der været Først af alle noget paa Herlighederne dette uheldige! Tidspunkt... kun Aa, af ræk var sit Liv Hovedgaarden mig opdagede det Glas nemlig Kognak, Næsset den min tilbage, gamle tog Herre, han at den Slægtens kraftige Dreng! Tak! Og... den Og, Dag, hrm! Beslutning han hrm! erholdt hvad at Besiddelser rebe Patentet jeg vilde Sejlene. egenhændig sige: var ved Vi ser at gaa os underskrevet af al den Kødets Grund Gang. af desværre Kong Frederik ikke i VI som Stand til at efterlade Regeringens dig Han vor Indehaver, lod Fædrenearv til den Syv lod Ende jævnstore han ubeskaaren! sin hele Baroniet ældste den Herregaarde sydlige, Men Søn, Næsset har Helmuth samt vi havde med derfor Hieronimus Afbyggergaardene tre besluttet Generationer Fjerdedele v. gøre Leunbach, af depenseret. den dig Julianelund østlige en der og og vestlige Skovlyst Fløj var af blevet oprettet ved Patent cadeau paa beklædte anden Maade, en Slottet Slags idet nedrive. Godsforvalterstilling vi har Hans gjort Solgte Excellence Næsset Sten af 11te paa og til havde Baroni Oktober Tømmer Gaarden, selv og 1805 tabt til dig kalde til den af omliggende Baron! Gehejmekonferensraad for sidste sig og ved Bondebyer talede Hans et uheldigt til ham og Spillebord Hannibal saalunde: oprettede Hieronimus paa af sin v. Leunbach i hans Majestæt, vor allernaadigste Hrm! Lykken Stumperne har Prinsregent, paa femoghalvfjerdsindstyveaarige Baroniet længe hvis ikke Næsset Forstand Alders været med firsindstyvende os Gud v. Leunbachere oplyse! Fideikommiskapital Geburtstag. har Aar. under gunstig, 11te stor min Oktober 25,000 kære Helmuth! Rbd. sidstleden sanktioneret Konjunkturerne denne har vor i en Beslutning. Og Aarrække nu, da der været Du Først af er alle nu noget paa Baron, Herlighederne dette uheldige! Tidspunkt min Dreng;... kun Aa, af og ræk var sit Tegnelærer Liv Hovedgaarden mig opdagede det Glas nemlig Kognak, Næsset den min tilbage, gamle tog Herre, han at den Slægtens kraftige Mortensen i Dreng! Horsens vil Tak! Og om... den faa Og, Dag, Dage hrm! Beslutning han have hrm! erholdt konstrueret hvad at Besiddelser rebe Patentet jeg vilde Sejlene. dig egenhændig sige: et var Vaaben ved Vi ser at efter gaa os underskrevet af al Udkast den Kødets Grund af Gang. os af desværre Kong... hrm! Frederik ikke i VI som Ja gaa Stand saa kun til at over efterlade Regeringens i dine dig Værelser Han vor Indehaver, lod Fædrenearv igen! til den Syv lod Og Ende jævnstore han Gud ubeskaaren! sin hele være ældste den Herregaarde med sydlige, Men Søn, dig! har Helmuth samt vi havde derfor Hieronimus tre besluttet Generationer Fjerdedele v. gøre Leunbach, af depenseret. den dig østlige en der og vestlige Fløj af cadeau paa beklædte anden Maade, en Slottet Slags idet nedrive. Godsforvalterstilling vi har Hans gjort Solgte Excellence Næsset Sten paa og til havde Baroni Tømmer Gaarden, selv og tabt til dig kalde til den omliggende Baron! for sidste sig og ved Bondebyer talede Hans et uheldigt til ham og Spillebord saalunde: oprettede paa af sin «Min Dreng» Majestæt, var dengang vor allernaadigste noget Hrm! Lykken nær Stumperne 60 har Aar Prinsregent, paa og femoghalvfjerdsindstyveaarige Baroniet forlængst længe hvis ikke Næsset Forstand Fader været med til os Hannibal Gud v. en Leunbachere oplyse! Fideikommiskapital Hieronimus Geburtstag. har under gunstig, v. 11te stor min Oktober 25,000 kære Helmuth! Rbd. Leunbach, der sidstleden ægtede sanktioneret Konjunkturerne sin Kusine Juliane denne har Almaviva vor i en Beslutning. Og Aarrække nu, LevenkofphBerenskjold da der været Du af er alle nu noget Baron, Herlighederne uheldige! min og Dreng; med... kun Aa, hende og ræk var Tegnelærer Hovedgaarden mig det Glas Kognak, Næsset min tilbage, tog han den kraftige avlede Helmuth Mortensen Hieronimus i Dreng! Horsens vil Tak! Og om... den faa Og, Dag, Dage hrm! Beslutning han have hrm! erholdt konstrueret hvad at rebe Patentet jeg vilde Sejlene. dig egenhændig sige: et Vaaben Vi ser efter os underskrevet af Udkast den Grund af os af desværre Kong... hrm! Frederik ikke i VI som Ja gaa Stand saa kun til at over efterlade Regeringens i dine dig Værelser Han vor Indehaver, lod Fædrenearv igen! til den lod Og Ende han Gud ubeskaaren! sin hele være ældste den med sydlige, Men Søn, dig! har Helmuth samt vi derfor Hieronimus tre besluttet Fjerdedele at v. gøre Leunbach, af den dig østlige en der og vestlige Fløj af Levenkofph Berenskjold cadeau v. Leunbach paa beklædte anden (den Maade, nuværende Slottet Slags idet nedrive. Godsforvalterstilling Bruger vi har gjort Solgte af Baroniet), Næsset Sten paa og til Baroni Tømmer Gaarden, yngre og til dig Søn kalde til omliggende Baron! for sig og Bondebyer talede Hans til ham og saalunde: oprettede af Hannibal Hieronimus «Min Dreng» Levenkofph Majestæt, var dengang Berenskjold vor allernaadigste noget Hrm! Lykken nær v. Stumperne Leunbach, 60 har Aar Prinsregent, paa og Baroniet forlængst længe samt hvis nogle ikke Næsset Forstand Fader været Døtre, med til os som Hannibal Gud v. en Leunbachere ikke oplyse! Fideikommiskapital Hieronimus har under gunstig, v. 11te stor min Oktober 25,000 kære Helmuth! Rbd. interesserer Leunbach, os. der sidstleden ægtede sanktioneret Konjunkturerne sin Kusine Juliane denne har Almaviva vor i en Beslutning. Aarrække LevenkofphBerenskjold været Du er nu noget Baron, uheldige! min og Dreng; med... Aa, hende og ræk Tegnelærer mig det Glas Kognak, min avlede Helmuth Mortensen Hieronimus i Dreng! Horsens vil Tak! Og om... den faa Og, Dag, Dage hrm! han have hrm! erholdt konstrueret hvad Patentet jeg vilde dig egenhændig sige: et Vaaben Vi ser efter os underskrevet af Udkast den Grund af os af desværre Kong... hrm! Frederik ikke i VI som Om Slægtens to første Baroner Ja er gaa her Stand saa kun kun til at at over meddele, efterlade Regeringens i dine at dig Værelser Helmuth vor Indehaver, Fædrenearv igen! Hieronimus lod Og han Gud ubeskaaren! sin i være en ældste øjeblikkelig med Men Søn, dig! har Helmuth vi derfor Hieronimus besluttet at v. gøre Leunbach, dig en der Forlegenhed Levenkofph lod omhugge Berenskjold og bortsælge cadeau v. Leunbach den paa pragtfulde, beklædte anden (den Maade, nuværende vel Slags idet Fjerdingvej Godsforvalterstilling Bruger vi har gjort af lange Baroniet), Næsset Lindeallé, paa til og Baroni Gaarden, somyngre og dig Søn kalde til Baron! for sig og talede Hans til ham saalunde: førte fra Næssets Hannibal Grænse Hieronimus «Min mod Dreng» Syd Levenkofph Majestæt, var lige dengang op til Berenskjold vor Indkørselsporten allernaadigste noget Hrm! Lykken nær v. Leunbach, 60 har... Aar Prinsregent, Og paa og at forlængst længe samt Hannibal hvis nogle ikke Forstand Fader Hieronimus været Døtre, til os som Hannibal Gud v. Leunbachere ikke oplyse! Hieronimus har under gunstig, v. 11te min Oktober kære Helmuth! (altsaa ham interesserer der ægtede Leunbach, os. sin Kusine der sidstleden Juliane ægtede Almaviva, sanktioneret Konjunkturerne sin Kusine og ved Juliane denne hende har Almaviva vor i en blev Beslutning. Aarrække Fader LevenkofphBerenskjold til vor været Du er Helmuth, nu noget Baron, uheldige! min og Dreng; med... Aa, hende og ræk Tegnelærer mig det Glas Kognak, min hvorom denne Historie avlede beretter) Helmuth i en Mortensen mere Hieronimus permanent i Dreng! Horsens Trang vil Tak! om for... faa Kontanter Og, Dage hrm! have hrm! lod i konstrueret fem hvad paa jeg vilde dig sige: et Vaaben Vi ser efter os af Udkast den Grund af os desværre... hrm! ikke i hinanden følgende Om Slægtens Aar alle to sine første Udhuse Baroner blotte Ja er gaa her for Stand saa det kun kun til alentykke at at over meddele, efterlade i dine Egetømmer, at dig Værelser Helmuth vor Fædrenearv som igen! Hieronimus havde Og Gud ubeskaaren! stivet i være en øjeblikkelig med Men dig! har vi derfor besluttet at gøre dig en Forlegenhed Levenkofph lod omhugge Berenskjold og bortsælge cadeau v. Leunbach den paa pragtfulde, anden (den Maade, nuværende vel idet Fjerdingvej Bruger vi har gjort af lange Baroniet), Næsset Lindeallé, til og Baroni en somyngre og dig Søn til Baron! Hans førte fra Næssets Hannibal Grænse Hieronimus «Min mod Dreng» Syd Levenkofph Majestæt, var lige dengang op til Berenskjold vor Indkørselsporten allernaadigste noget nær v. Leunbach, 60... Aar Prinsregent, Og og at forlængst samt Hannibal hvis nogle Forstand Fader Hieronimus Døtre, til som Hannibal Gud ikke oplyse! Hieronimus har under v. 11te Oktober (altsaa ham interesserer der ægtede Leunbach, os. sin Kusine der sidstleden Juliane ægtede Almaviva, sanktioneret sin Kusine og ved Juliane denne hende Almaviva vor blev Beslutning. Fader LevenkofphBerenskjold til vor Du er Helmuth, nu Baron, min og Dreng; med hende og Tegnelærer hvorom denne Historie avlede beretter) Helmuth i en Mortensen mere Hieronimus permanent i Horsens Trang vil om for faa Kontanter Dage have lod i konstrueret fem paa dig et Vaaben efter Udkast af os... hrm! hinanden følgende Om Slægtens Aar alle to sine første Udhuse Baroner blotte Ja er gaa her for saa det kun kun alentykke at over meddele, i dine Egetømmer, at Værelser Helmuth som igen! Hieronimus havde Og Gud stivet i være en øjeblikkelig med dig! Forlegenhed Levenkofph lod omhugge Berenskjold og bortsælge v. Leunbach den pragtfulde, (den nuværende vel Fjerdingvej Bruger af lange Baroniet), Lindeallé, og en somyngre Søn førte fra Næssets Hannibal Grænse Hieronimus «Min mod Dreng» Syd Levenkofph var lige dengang op til Berenskjold Indkørselsporten noget nær v. Leunbach, 60... Aar Og og at forlængst samt Hannibal nogle Fader Hieronimus Døtre, til som Hannibal ikke Hieronimus v. (altsaa ham interesserer der ægtede Leunbach, os. sin Kusine der Juliane ægtede Almaviva, sin Kusine og ved Juliane hende Almaviva blev Fader LevenkofphBerenskjold til vor Helmuth, og med hende hvorom denne Historie avlede beretter) Helmuth i en mere Hieronimus permanent Trang for Kontanter lod i fem paa hinanden følgende Om Slægtens Aar alle to sine første Udhuse Baroner blotte er her for det kun alentykke at meddele, Egetømmer, at Helmuth som Hieronimus havde stivet i en øjeblikkelig Forlegenhed Levenkofph lod omhugge Berenskjold og bortsælge v. Leunbach den pragtfulde, (den nuværende vel Fjerdingvej Bruger af lange Baroniet), Lindeallé, og en somyngre Søn førte fra Næssets Hannibal Grænse Hieronimus mod Syd Levenkofph lige op til Berenskjold Indkørselsporten v. Leunbach,... Og at samt Hannibal nogle Hieronimus Døtre, som ikke (altsaa ham interesserer der ægtede os. sin Kusine Juliane Almaviva, og ved hende blev Fader til vor Helmuth, hvorom denne Historie beretter) i en mere permanent Trang for Kontanter lod i fem paa hinanden følgende Om Slægtens Aar alle to sine første Udhuse Baroner blotte er her for det kun alentykke at meddele, Egetømmer, at Helmuth som Hieronimus havde stivet i en øjeblikkelig Forlegenhed lod omhugge og bortsælge den pragtfulde, vel en Fjerdingvej lange Lindeallé, som førte fra Næssets Grænse mod Syd lige op til Indkørselsporten... Og at Hannibal Hieronimus (altsaa ham der ægtede sin Kusine Juliane Almaviva, og ved hende blev Fader til vor Helmuth, hvorom denne Historie beretter) i en mere permanent Trang for Kontanter lod i fem paa hinanden følgende Aar alle sine Udhuse blotte for det alentykke Egetømmer, som havde stivet Opsummering (Berg-Kirkpatrick et al., 2011) Hvordan fungerer automatiseret opsummering? Baroniet Næsset med Afbyggergaardene Julianelund og Skovlyst var blevet oprettet ved Patent af 11te Oktober 1805 af Gehejmekonferensraad Hannibal Hieronimus v. Leunbach i hans Alders firsindstyvende Aar. Først paa dette Tidspunkt af sit Liv opdagede nemlig den gamle Herre, at Slægtens Baroniet Næsset med Afbyggergaardene Julianelund og Skovlyst var blevet oprettet ved Patent af 11te Oktober 1805 af Gehejmekonferensraad Hannibal Hieronimus v. Leunbach i hans Alders firsindstyvende Aar. Først paa dette Tidspunkt af sit Liv opdagede nemlig den gamle Herre, at Slægtens Besiddelser var ved at gaa al Kødets Gang. Syv jævnstore Herregaarde havde tre Generationer depenseret. Hans Excellence havde selv tabt den sidste ved et uheldigt Spillebord paa sin femoghalvfjerdsindstyveaarige Geburtstag. Og nu, da der af alle Herlighederne kun var Hovedgaarden Næsset tilbage, tog han den kraftige Beslutning at rebe Sejlene. Baroniet Næsset med Afbyggergaardene Julianelund og Skovlyst var blevet oprettet ved Patent af 11te Oktober 1805 af Gehejmekonferensraad Hannibal Hieronimus v. Et referat har en fast størrelse (typisk 100-200 ord) Sammensæt et referat, der indeholder så mange centrale passager fra de oprindelige dokumenter som muligt
En relateret vanskelighed: at flytte sammen Indholdet af to lejligheder skal pakkes sammen til én Hver ting har en nytteværdi og et volumen Det gælder om at få mest nytte ud af den begrænsede plads kan løses som et optimeringsproblem
Første komplikation: dubletter
Anden komplikation: overlappende egenskaber
Tilbage til opsummering En sætning realiserer nogle informationsenheder (egenskaber) X var glad for den gamle bog, som Y smed ud glad_for(x,bog); gammel(bog); smed_ud(y,bog) Maskimér værdien af informationsenheder, mens referatets længde holdes under en given størrelse
Når tekstkvalitet overses
En model for tekstkvalitet Anaforbestemmelse er ikke nok Vi skal lære at imitere sproglige mønstre i god tekst I mit projekt anvender jeg data fra brugerdrevne Q&A-sider, hvor svarenes kvalitet bliver vurderet af de besøgende
Eksempel: brug af pronomener i Q&A Figure 5: Magnitude of coefficients for features related to pronouns. Each bar represents the coefficient in a particular domain. Coefficient values are from the global feature set, but with 30 selected features instead of 18, since the smaller set did not include 1PERSPLUR. For a legend refer to Figure 3. positive coefficients. But the exceptions are interesting. (Here, we examine the model for the n = 30 global feature set). First, they appear not to be related to site. All but one site have a negative value for the 25 % quartile of discourse feature coefficients (meaning that at least three coefficients in the site are negative). But they are not related to the feature either. When we switch to this point of view, all but one feature have a negative 25 % quartile (meaning that at least three sites have this feature with a negative coefficient). Instead each site appears to come with its own set of appropriate and inappropriate discourse connectives. Looking beyond the top features selected for the global model, many of the discourse features