Process comments in the Tokenizer

This commit is contained in:
Veronica Berglyd Olsen
2024-10-22 17:37:00 +02:00
parent e759aa8d1b
commit c537d0f396
17 changed files with 392 additions and 334 deletions
@@ -53,12 +53,19 @@
<w:r>
<w:rPr>
<w:b />
<w:color w:val="646464" />
</w:rPr>
<w:t>Comment:</w:t>
</w:r>
<w:r>
<w:rPr />
<w:t xml:space="preserve"> Exctracted from the lipsum.com website.</w:t>
<w:t xml:space="preserve"> </w:t>
</w:r>
<w:r>
<w:rPr>
<w:color w:val="646464" />
</w:rPr>
<w:t>Exctracted from the lipsum.com website.</w:t>
</w:r>
</w:p>
<w:p>
@@ -100,12 +107,19 @@
<w:r>
<w:rPr>
<w:b />
<w:color w:val="813709" />
</w:rPr>
<w:t>Synopsis:</w:t>
</w:r>
<w:r>
<w:rPr />
<w:t xml:space="preserve"> Explanation from the lipsum.com website.</w:t>
<w:t xml:space="preserve"> </w:t>
</w:r>
<w:r>
<w:rPr>
<w:color w:val="813709" />
</w:rPr>
<w:t>Explanation from the lipsum.com website.</w:t>
</w:r>
</w:p>
<w:p>
@@ -223,12 +237,19 @@
<w:r>
<w:rPr>
<w:b />
<w:color w:val="813709" />
</w:rPr>
<w:t>Synopsis:</w:t>
</w:r>
<w:r>
<w:rPr />
<w:t xml:space="preserve"> Lorem ipsum dolor sit amet, consectetur adipiscing elit. Pellentesque at aliquam quam.</w:t>
<w:t xml:space="preserve"> </w:t>
</w:r>
<w:r>
<w:rPr>
<w:color w:val="813709" />
</w:rPr>
<w:t>Lorem ipsum dolor sit amet, consectetur adipiscing elit. Pellentesque at aliquam quam.</w:t>
</w:r>
</w:p>
<w:p>
@@ -295,12 +316,19 @@
<w:r>
<w:rPr>
<w:b />
<w:color w:val="813709" />
</w:rPr>
<w:t>Synopsis:</w:t>
</w:r>
<w:r>
<w:rPr />
<w:t xml:space="preserve"> Aenean ut placerat velit. Etiam laoreet ullamcorper risus, eget lobortis enim scelerisque non. Suspendisse id maximus nunc, et mollis sapien. Curabitur vel semper sapien, non pulvinar dolor. Etiam finibus nisi vel mi molestie consectetur.</w:t>
<w:t xml:space="preserve"> </w:t>
</w:r>
<w:r>
<w:rPr>
<w:color w:val="813709" />
</w:rPr>
<w:t>Aenean ut placerat velit. Etiam laoreet ullamcorper risus, eget lobortis enim scelerisque non. Suspendisse id maximus nunc, et mollis sapien. Curabitur vel semper sapien, non pulvinar dolor. Etiam finibus nisi vel mi molestie consectetur.</w:t>
</w:r>
</w:p>
<w:p>
@@ -408,12 +436,19 @@
<w:r>
<w:rPr>
<w:b />
<w:color w:val="813709" />
</w:rPr>
<w:t>Synopsis:</w:t>
</w:r>
<w:r>
<w:rPr />
<w:t xml:space="preserve"> Pellentesque habitant morbi tristique senectus et netus et malesuada fames ac turpis egestas. Integer sapien nulla, dictum at lacus a, dignissim consectetur dolor. Nunc vel eleifend lacus, eu dapibus orci.</w:t>
<w:t xml:space="preserve"> </w:t>
</w:r>
<w:r>
<w:rPr>
<w:color w:val="813709" />
</w:rPr>
<w:t>Pellentesque habitant morbi tristique senectus et netus et malesuada fames ac turpis egestas. Integer sapien nulla, dictum at lacus a, dignissim consectetur dolor. Nunc vel eleifend lacus, eu dapibus orci.</w:t>
</w:r>
</w:p>
<w:p>
@@ -542,12 +577,19 @@
<w:r>
<w:rPr>
<w:b />
<w:color w:val="813709" />
</w:rPr>
<w:t>Synopsis:</w:t>
</w:r>
<w:r>
<w:rPr />
<w:t xml:space="preserve"> Curabitur a elit posuere, varius ex et, convallis neque. Phasellus sagittis pharetra sem vitae dapibus. Curabitur varius lorem non pulvinar congue.</w:t>
<w:t xml:space="preserve"> </w:t>
</w:r>
<w:r>
<w:rPr>
<w:color w:val="813709" />
</w:rPr>
<w:t>Curabitur a elit posuere, varius ex et, convallis neque. Phasellus sagittis pharetra sem vitae dapibus. Curabitur varius lorem non pulvinar congue.</w:t>
</w:r>
</w:p>
<w:p>
@@ -614,12 +656,19 @@
<w:r>
<w:rPr>
<w:b />
<w:color w:val="813709" />
</w:rPr>
<w:t>Synopsis:</w:t>
</w:r>
<w:r>
<w:rPr />
<w:t xml:space="preserve"> Aenean ut libero ut lectus porttitor rhoncus vel et massa. Nam pretium, nibh et varius vehicula, urna metus blandit eros, euismod pharetra diam diam et libero. Class aptent taciti sociosqu ad litora torquent per conubia nostra, per inceptos himenaeos.</w:t>
<w:t xml:space="preserve"> </w:t>
</w:r>
<w:r>
<w:rPr>
<w:color w:val="813709" />
</w:rPr>
<w:t>Aenean ut libero ut lectus porttitor rhoncus vel et massa. Nam pretium, nibh et varius vehicula, urna metus blandit eros, euismod pharetra diam diam et libero. Class aptent taciti sociosqu ad litora torquent per conubia nostra, per inceptos himenaeos.</w:t>
</w:r>
</w:p>
<w:p>
@@ -727,12 +776,19 @@
<w:r>
<w:rPr>
<w:b />
<w:color w:val="813709" />
</w:rPr>
<w:t>Synopsis:</w:t>
</w:r>
<w:r>
<w:rPr />
<w:t xml:space="preserve"> Nam tempor blandit magna laoreet aliquet. Vestibulum auctor posuere leo, ac gravida nisi rhoncus varius. Aenean posuere dolor vitae condimentum volutpat. Donec egestas volutpat risus, quis luctus justo.</w:t>
<w:t xml:space="preserve"> </w:t>
</w:r>
<w:r>
<w:rPr>
<w:color w:val="813709" />
</w:rPr>
<w:t>Nam tempor blandit magna laoreet aliquet. Vestibulum auctor posuere leo, ac gravida nisi rhoncus varius. Aenean posuere dolor vitae condimentum volutpat. Donec egestas volutpat risus, quis luctus justo.</w:t>
</w:r>
</w:p>
<w:p>
@@ -859,12 +915,19 @@
<w:r>
<w:rPr>
<w:b />
<w:color w:val="813709" />
</w:rPr>
<w:t>Synopsis:</w:t>
</w:r>
<w:r>
<w:rPr />
<w:t xml:space="preserve"> Praesent eget est porta, dictum ante in, egestas risus. Mauris risus mauris, consequat aliquam mauris et, feugiat iaculis ipsum. Aliquam arcu ipsum, fermentum ut arcu sed, lobortis euismod sem. Orci varius natoque penatibus et magnis dis parturient montes, nascetur ridiculus mus.</w:t>
<w:t xml:space="preserve"> </w:t>
</w:r>
<w:r>
<w:rPr>
<w:color w:val="813709" />
</w:rPr>
<w:t>Praesent eget est porta, dictum ante in, egestas risus. Mauris risus mauris, consequat aliquam mauris et, feugiat iaculis ipsum. Aliquam arcu ipsum, fermentum ut arcu sed, lobortis euismod sem. Orci varius natoque penatibus et magnis dis parturient montes, nascetur ridiculus mus.</w:t>
</w:r>
</w:p>
<w:p>