From 2166aed0beca6555ab0d2191a53cce71ef61c2f8 Mon Sep 17 00:00:00 2001 From: Danylo Mysak Date: Fri, 20 Jan 2023 16:58:24 +0200 Subject: [PATCH 1/2] Update generated data --- .../train/source-sentences-tokenized/0061.src.txt | 2 +- .../train/source-sentences-tokenized/0462.src.txt | 2 +- data/gec-fluency/train/source-sentences/0061.src.txt | 2 +- data/gec-fluency/train/source-sentences/0462.src.txt | 2 +- data/gec-fluency/train/target-sentences/1615.a1.txt | 2 +- data/gec-fluency/train/target/1615.a1.txt | 2 +- data/gec-only/test/source-sentences-tokenized/0170.src.txt | 4 +++- data/gec-only/test/source-sentences-tokenized/0203.src.txt | 3 ++- data/gec-only/test/source-sentences-tokenized/0906.src.txt | 3 ++- data/gec-only/test/source-sentences/0170.src.txt | 4 +++- data/gec-only/test/source-sentences/0203.src.txt | 3 ++- data/gec-only/test/source-sentences/0906.src.txt | 3 ++- data/gec-only/test/target-sentences-tokenized/0170.a1.txt | 4 +++- data/gec-only/test/target-sentences-tokenized/0170.a2.txt | 6 ++++-- data/gec-only/test/target-sentences-tokenized/0203.a1.txt | 3 ++- data/gec-only/test/target-sentences-tokenized/0203.a2.txt | 3 ++- data/gec-only/test/target-sentences-tokenized/0906.a1.txt | 3 ++- data/gec-only/test/target-sentences-tokenized/0906.a2.txt | 3 ++- data/gec-only/test/target-sentences/0170.a1.txt | 4 +++- data/gec-only/test/target-sentences/0170.a2.txt | 6 ++++-- data/gec-only/test/target-sentences/0203.a1.txt | 3 ++- data/gec-only/test/target-sentences/0203.a2.txt | 3 ++- data/gec-only/test/target-sentences/0906.a1.txt | 3 ++- data/gec-only/test/target-sentences/0906.a2.txt | 3 ++- data/gec-only/train/source-sentences-tokenized/0061.src.txt | 2 +- data/gec-only/train/source-sentences-tokenized/0462.src.txt | 2 +- data/gec-only/train/source-sentences/0061.src.txt | 2 +- data/gec-only/train/source-sentences/0462.src.txt | 2 +- 28 files changed, 54 insertions(+), 30 deletions(-) diff --git a/data/gec-fluency/train/source-sentences-tokenized/0061.src.txt b/data/gec-fluency/train/source-sentences-tokenized/0061.src.txt index c0d1f5c69..1eb4b0dde 100644 --- a/data/gec-fluency/train/source-sentences-tokenized/0061.src.txt +++ b/data/gec-fluency/train/source-sentences-tokenized/0061.src.txt @@ -14,4 +14,4 @@ І багато було таких сильних держав . Майже нікого не лишилось з гігантів з якими можна битись ... крім одного . Пригадую янкі називали лідера червоних Дядьком Семом , коли ми вимінювали їх нагороди на консерви з портвейном . -Нам кажуть що війни з червоними не буде , та думаю це лише питання часу , ми виконаємо наш обов'язок де б ми не були , до кінця , тільки б той кінець прийшов вже якомога швидше . +Нам кажуть що війни з червоними не буде , та думаю це лише питання часу , ми виконаємо наш обов'язок де б ми не були , до кінця , тільки б той кінець прийшов вже якомога швидше . " diff --git a/data/gec-fluency/train/source-sentences-tokenized/0462.src.txt b/data/gec-fluency/train/source-sentences-tokenized/0462.src.txt index bc39b6ea6..ef3b5ce01 100644 --- a/data/gec-fluency/train/source-sentences-tokenized/0462.src.txt +++ b/data/gec-fluency/train/source-sentences-tokenized/0462.src.txt @@ -8,4 +8,4 @@ " Оце ж ви бовдури , - сказав він , - сваритися через сидіння й при цьому коня не мати . " " Це сидіння варте чвари , " - відповів один чоловік , - " хто ним володіє й чогось хоче , нехай навіть на край світу дістатися , то опиниться моментально там . Це сидіння належить нам обом , але зараз моя черга ним користуватися , але він не хоче віддати сидіння . " " Я вам допоможу , " - сказав барабаник , при цьому відійшов й встромив палку в землю . -Потім він повернувся і промовив : " а тепер біжіть до мети , хто перший дістанеться , того і буде сидіння . +Потім він повернувся і промовив : " а тепер біжіть до мети , хто перший дістанеться , того і буде сидіння . " diff --git a/data/gec-fluency/train/source-sentences/0061.src.txt b/data/gec-fluency/train/source-sentences/0061.src.txt index dcce9f600..9e3fd041f 100644 --- a/data/gec-fluency/train/source-sentences/0061.src.txt +++ b/data/gec-fluency/train/source-sentences/0061.src.txt @@ -14,4 +14,4 @@ І багато було таких сильних держав. Майже нікого не лишилось з гігантів з якими можна битись... крім одного. Пригадую янкі називали лідера червоних Дядьком Семом, коли ми вимінювали їх нагороди на консерви з портвейном. -Нам кажуть що війни з червоними не буде, та думаю це лише питання часу, ми виконаємо наш обов'язок де б ми не були, до кінця, тільки б той кінець прийшов вже якомога швидше. +Нам кажуть що війни з червоними не буде, та думаю це лише питання часу, ми виконаємо наш обов'язок де б ми не були, до кінця, тільки б той кінець прийшов вже якомога швидше." diff --git a/data/gec-fluency/train/source-sentences/0462.src.txt b/data/gec-fluency/train/source-sentences/0462.src.txt index c4a0073a2..bb1c21493 100644 --- a/data/gec-fluency/train/source-sentences/0462.src.txt +++ b/data/gec-fluency/train/source-sentences/0462.src.txt @@ -8,4 +8,4 @@ "Оце ж ви бовдури, - сказав він,- сваритися через сидіння й при цьому коня не мати. " "Це сидіння варте чвари,"- відповів один чоловік, - "хто ним володіє й чогось хоче, нехай навіть на край світу дістатися, то опиниться моментально там. Це сидіння належить нам обом, але зараз моя черга ним користуватися, але він не хоче віддати сидіння." "Я вам допоможу,"- сказав барабаник, при цьому відійшов й встромив палку в землю. -Потім він повернувся і промовив: "а тепер біжіть до мети, хто перший дістанеться, того і буде сидіння. +Потім він повернувся і промовив: "а тепер біжіть до мети, хто перший дістанеться, того і буде сидіння." diff --git a/data/gec-fluency/train/target-sentences/1615.a1.txt b/data/gec-fluency/train/target-sentences/1615.a1.txt index 0413798a2..5ccfe8ac4 100644 --- a/data/gec-fluency/train/target-sentences/1615.a1.txt +++ b/data/gec-fluency/train/target-sentences/1615.a1.txt @@ -2,7 +2,7 @@ Цікаво мислити критично і бачити все з іншого боку, а особливо реакцію йорданців, які ніколи не святкують, наприклад, Новий рік, та в оточенні українців змушені чекати півночі, аби загадати бажання та спробувати олів'є. Ніколи не могла подумати, що у мене з'явиться ще одна сім'я так далеко, аж за морем. Йорданія — молода країна, але з неймовірно консервативними, колоритними та "своїми " унікальними традиціями, стилем життя та вагомими сімейними цінностями. -Віра в цій країні — це те,що об'єднує всіх жителів та робить атмосферу в країні peaceful, а інколи, особливо для мене, напружену — адже весь час трішки відчуваєш себе зовсім іншою та з іншими поглядами. +Віра в цій країні — це те, що об'єднує всіх жителів та робить атмосферу в країні peaceful, а інколи, особливо для мене, напружену — адже весь час трішки відчуваєш себе зовсім іншою та з іншими поглядами. Багато висновків зробила для себе, відвідавши Йорданію ( і щодо прав жінок, і про їжу😂) та зрозуміла, що поки вона не зрівняється ні з чим та є ніби окремою планетою. Йорданія, на перший погляд, для всіх є незрозумілою країною, яка взагалі де розташована? Але насправді в ній є що ухвалювати та чого вчитися, і допомагати у розв'язанні проблем, як-от забруднення або ж біженці. diff --git a/data/gec-fluency/train/target/1615.a1.txt b/data/gec-fluency/train/target/1615.a1.txt index 35fbd6962..bcd1a5372 100644 --- a/data/gec-fluency/train/target/1615.a1.txt +++ b/data/gec-fluency/train/target/1615.a1.txt @@ -1,6 +1,6 @@ Ніколи не могла б подумати, що новорічні свята я буду проводити у Йорданії, при температурі +15 та у зовсім новій культурі та традиціях. Цікаво мислити критично і бачити все з іншого боку, а особливо реакцію йорданців, які ніколи не святкують, наприклад, Новий рік, та в оточенні українців змушені чекати півночі, аби загадати бажання та спробувати олів'є. Ніколи не могла подумати, що у мене з'явиться ще одна сім'я так далеко, аж за морем. Йорданія — молода країна, але з неймовірно консервативними, колоритними та "своїми " унікальними традиціями, стилем життя та вагомими сімейними цінностями. -Віра в цій країні — це те,що об'єднує всіх жителів та робить атмосферу в країні peaceful, а інколи, особливо для мене, напружену — адже весь час трішки відчуваєш себе зовсім іншою та з іншими поглядами. +Віра в цій країні — це те, що об'єднує всіх жителів та робить атмосферу в країні peaceful, а інколи, особливо для мене, напружену — адже весь час трішки відчуваєш себе зовсім іншою та з іншими поглядами. Багато висновків зробила для себе, відвідавши Йорданію ( і щодо прав жінок, і про їжу😂) та зрозуміла, що поки вона не зрівняється ні з чим та є ніби окремою планетою. Йорданія, на перший погляд, для всіх є незрозумілою країною, яка взагалі де розташована?Але насправді в ній є що ухвалювати та чого вчитися, і допомагати у розв'язанні проблем, як-от забруднення або ж біженці.Тому 100% — це гарна країна для дослідження та з гарним Мертвим морем і пісковими барханами повсюди, і людьми, які продають дешеві гумки на трасі, аби заробити хоча б трохи грошей. diff --git a/data/gec-only/test/source-sentences-tokenized/0170.src.txt b/data/gec-only/test/source-sentences-tokenized/0170.src.txt index 1e1365a7d..d84b5e0ca 100644 --- a/data/gec-only/test/source-sentences-tokenized/0170.src.txt +++ b/data/gec-only/test/source-sentences-tokenized/0170.src.txt @@ -7,7 +7,9 @@ Вистрибуючи назад до протилежної стіни , вистрілює і попадаю .. в руку ? ні ! в момент коли він замахнувся він притримав руку , закриваючи голову , і постріл тільки завдав йому важкої рани , але стимулятори які вживлені в нього , блокують всі болючі відчуття штовхаючи його руйнувати і вбивати , і він метнувся з великою швидкістю на мене не даючи мені навіть шансу зробити другий постріл . Я чув багато історій про цих горило - подібних зелених воїнів що можуть лише одним ударом можуть пробити броню яку навіть дробовик не пробиває . І такий один зараз летить просто на мене з піднятими руками які замахнулися добити надоїдливу комара . З шаленим криком його руки долітаючи до моєї голови просто втратили той імпульс що мали на початку а тіло врізалися в стіну за крок до мене . -І коли дійшов звук пострілу снайперської гвинтівки я зрозумів , це не остання моя місія . Він був останній за сьогодні . Наші радари просканували місцевість щоб визначити аномальні хвилі які видають прибульці , хоча я не до кінця розумію як сам це працює , але відділ досліджень на базі робить чудову роботу , ці прилади ще не давали жодних збоїв . +І коли дійшов звук пострілу снайперської гвинтівки я зрозумів , це не остання моя місія . +Він був останній за сьогодні . +Наші радари просканували місцевість щоб визначити аномальні хвилі які видають прибульці , хоча я не до кінця розумію як сам це працює , але відділ досліджень на базі робить чудову роботу , ці прилади ще не давали жодних збоїв . - Вертаємось на базу ! - крикнув командир . - поранених несем на Ренджер , решта зберіть трупи та технології прибульців . Швидко ! ## База diff --git a/data/gec-only/test/source-sentences-tokenized/0203.src.txt b/data/gec-only/test/source-sentences-tokenized/0203.src.txt index 61e2780a7..113bb1730 100644 --- a/data/gec-only/test/source-sentences-tokenized/0203.src.txt +++ b/data/gec-only/test/source-sentences-tokenized/0203.src.txt @@ -9,6 +9,7 @@ А ввечері в четвер ці ж офісні працівники збираються разом під стінами пабу ( ніколи всередині ) і п'ють весь вечір . Здавалося б , чому саме в четвер ? Бо краще зіпсувати похміллям п'ятницю , ніж свій чесно зароблений вихідний . -Лоднон - місто контрастів , але всюди почуваєшся добре . В величезних зелених парках , де люди просто гуляють , лежать на газонах або збираються пограти в футбол . На величезних блошиних ринках , де кожен вдягнений , як хоче , смачно пахне їжею і можна знайти дуже цікаві речі з історією . В метро , де відчуваєш гордість собою , що на п'ятий день нарешті почав трошечки в ньому орієнтуватися . І звичайно ж в Лондоні захоплює дух від музеїв , де можна побачити скелет динозавра , справжнього біфітера , картини Ван Гога або ж розетський камінь . +Лоднон - місто контрастів , але всюди почуваєшся добре . В величезних зелених парках , де люди просто гуляють , лежать на газонах або збираються пограти в футбол . На величезних блошиних ринках , де кожен вдягнений , як хоче , смачно пахне їжею і можна знайти дуже цікаві речі з історією . +В метро , де відчуваєш гордість собою , що на п'ятий день нарешті почав трошечки в ньому орієнтуватися . І звичайно ж в Лондоні захоплює дух від музеїв , де можна побачити скелет динозавра , справжнього біфітера , картини Ван Гога або ж розетський камінь . В Лондоні є усе . Хочу повертатись сюди знову і знову . diff --git a/data/gec-only/test/source-sentences-tokenized/0906.src.txt b/data/gec-only/test/source-sentences-tokenized/0906.src.txt index e5b4bb856..36dd3379d 100644 --- a/data/gec-only/test/source-sentences-tokenized/0906.src.txt +++ b/data/gec-only/test/source-sentences-tokenized/0906.src.txt @@ -59,7 +59,8 @@ privacy / приватність ! причина знайдеться завжди ! ГОЛОВНЕ – ЯК РЕАГУВАТИ Де це буває ? -в школі у дворі дорогою додому і інтернеті +в школі у дворі дорогою додому +і інтернеті чому це небезпечно ? для того , кого булять : стрес , демотивація , захворювання – а в дорослому віці ці проблеми зростуть до дорослих масштабів для ініціатора : виключення зі школи , поліція , проблеми зі здоров’ям , бійки Що ви відчуваєте , коли вас дражнили ? diff --git a/data/gec-only/test/source-sentences/0170.src.txt b/data/gec-only/test/source-sentences/0170.src.txt index e7d5a285e..b7b77dda0 100644 --- a/data/gec-only/test/source-sentences/0170.src.txt +++ b/data/gec-only/test/source-sentences/0170.src.txt @@ -7,7 +7,9 @@ Вистрибуючи назад до протилежної стіни, вистрілює і попадаю .. в руку? ні! в момент коли він замахнувся він притримав руку, закриваючи голову, і постріл тільки завдав йому важкої рани, але стимулятори які вживлені в нього, блокують всі болючі відчуття штовхаючи його руйнувати і вбивати, і він метнувся з великою швидкістю на мене не даючи мені навіть шансу зробити другий постріл. Я чув багато історій про цих горило-подібних зелених воїнів що можуть лише одним ударом можуть пробити броню яку навіть дробовик не пробиває. І такий один зараз летить просто на мене з піднятими руками які замахнулися добити надоїдливу комара. З шаленим криком його руки долітаючи до моєї голови просто втратили той імпульс що мали на початку а тіло врізалися в стіну за крок до мене. -І коли дійшов звук пострілу снайперської гвинтівки я зрозумів, це не остання моя місія. Він був останній за сьогодні. Наші радари просканували місцевість щоб визначити аномальні хвилі які видають прибульці, хоча я не до кінця розумію як сам це працює, але відділ досліджень на базі робить чудову роботу, ці прилади ще не давали жодних збоїв. +І коли дійшов звук пострілу снайперської гвинтівки я зрозумів, це не остання моя місія. +Він був останній за сьогодні. +Наші радари просканували місцевість щоб визначити аномальні хвилі які видають прибульці, хоча я не до кінця розумію як сам це працює, але відділ досліджень на базі робить чудову роботу, ці прилади ще не давали жодних збоїв. - Вертаємось на базу! - крикнув командир. - поранених несем на Ренджер, решта зберіть трупи та технології прибульців. Швидко! ## База diff --git a/data/gec-only/test/source-sentences/0203.src.txt b/data/gec-only/test/source-sentences/0203.src.txt index a65f0f270..001ff47b9 100644 --- a/data/gec-only/test/source-sentences/0203.src.txt +++ b/data/gec-only/test/source-sentences/0203.src.txt @@ -9,6 +9,7 @@ А ввечері в четвер ці ж офісні працівники збираються разом під стінами пабу (ніколи всередині) і п'ють весь вечір. Здавалося б, чому саме в четвер? Бо краще зіпсувати похміллям п'ятницю, ніж свій чесно зароблений вихідний. -Лоднон - місто контрастів, але всюди почуваєшся добре. В величезних зелених парках, де люди просто гуляють, лежать на газонах або збираються пограти в футбол. На величезних блошиних ринках, де кожен вдягнений, як хоче, смачно пахне їжею і можна знайти дуже цікаві речі з історією. В метро, де відчуваєш гордість собою, що на п'ятий день нарешті почав трошечки в ньому орієнтуватися. І звичайно ж в Лондоні захоплює дух від музеїв, де можна побачити скелет динозавра, справжнього біфітера, картини Ван Гога або ж розетський камінь. +Лоднон - місто контрастів, але всюди почуваєшся добре. В величезних зелених парках, де люди просто гуляють, лежать на газонах або збираються пограти в футбол. На величезних блошиних ринках, де кожен вдягнений, як хоче, смачно пахне їжею і можна знайти дуже цікаві речі з історією. +В метро, де відчуваєш гордість собою, що на п'ятий день нарешті почав трошечки в ньому орієнтуватися. І звичайно ж в Лондоні захоплює дух від музеїв, де можна побачити скелет динозавра, справжнього біфітера, картини Ван Гога або ж розетський камінь. В Лондоні є усе. Хочу повертатись сюди знову і знову. diff --git a/data/gec-only/test/source-sentences/0906.src.txt b/data/gec-only/test/source-sentences/0906.src.txt index 357f86d32..47839305b 100644 --- a/data/gec-only/test/source-sentences/0906.src.txt +++ b/data/gec-only/test/source-sentences/0906.src.txt @@ -59,7 +59,8 @@ privacy/приватність ! причина знайдеться завжди! ГОЛОВНЕ – ЯК РЕАГУВАТИ Де це буває? -в школі у дворі дорогою додому і інтернеті +в школі у дворі дорогою додому +і інтернеті чому це небезпечно? для того, кого булять: стрес, демотивація, захворювання – а в дорослому віці ці проблеми зростуть до дорослих масштабів для ініціатора: виключення зі школи, поліція, проблеми зі здоров’ям, бійки Що ви відчуваєте, коли вас дражнили? diff --git a/data/gec-only/test/target-sentences-tokenized/0170.a1.txt b/data/gec-only/test/target-sentences-tokenized/0170.a1.txt index b87c3585d..bffd50d57 100644 --- a/data/gec-only/test/target-sentences-tokenized/0170.a1.txt +++ b/data/gec-only/test/target-sentences-tokenized/0170.a1.txt @@ -7,7 +7,9 @@ Вистрибуючи назад до протилежної стіни , вистрілюю і попадаю .. в руку ? Ні ! в момент , коли він замахнувся , то притримав руку , закриваючи голову , і постріл тільки завдав йому важкої рани , але стимулятори , які вживлені в нього , блокують усі болючі відчуття , штовхаючи його руйнувати і вбивати , і він метнувся з великою швидкістю на мене , не даючи мені навіть шансу зробити другий постріл . Я чув багато історій про цих горилоподібних зелених воїнів , які можуть лише одним ударом можуть пробити броню , яку навіть дробовик не пробиває . І такий один зараз летить просто на мене з піднятими руками , які замахнулися добити надоїдливого комара . З шаленим криком його руки , долітаючи до моєї голови , просто втратили той імпульс , що мали на початку , а тіло врізалося в стіну за крок до мене . -І коли дійшов звук пострілу снайперської гвинтівки , я зрозумів : це не остання моя місія . Він був останній за сьогодні . Наші радари просканували місцевість , щоб визначити аномальні хвилі , які видають прибульці , хоча я не до кінця розумію , як саме це працює , але відділ досліджень на базі робить чудову роботу , ці прилади ще не давали жодних збоїв . +І коли дійшов звук пострілу снайперської гвинтівки , я зрозумів : це не остання моя місія . +Він був останній за сьогодні . +Наші радари просканували місцевість , щоб визначити аномальні хвилі , які видають прибульці , хоча я не до кінця розумію , як саме це працює , але відділ досліджень на базі робить чудову роботу , ці прилади ще не давали жодних збоїв . — Вертаємось на базу ! — крикнув командир . — поранених несем на Ренджер , решта зберіть трупи та технології прибульців . Швидко ! ## База diff --git a/data/gec-only/test/target-sentences-tokenized/0170.a2.txt b/data/gec-only/test/target-sentences-tokenized/0170.a2.txt index aff5f015a..f5893d277 100644 --- a/data/gec-only/test/target-sentences-tokenized/0170.a2.txt +++ b/data/gec-only/test/target-sentences-tokenized/0170.a2.txt @@ -4,8 +4,10 @@ Його крок був важким і кожний крок його тільки дратував більше . У мене була лише одна спроба , вистрілити в нього треба вище грудей , інакше весь удар прийдеться на броню , і тоді він просто розірве мене свої кігтями . Знаючи , що я досі тут , він почав ламати усе довкола , і в один момент він замахнувся , щоб розламати ту стіну , за якою я ховався , це був момент , якого я чекав , бо я знав , що він близько і не очікує моєї появи . -Вистрибуючи назад до протилежної стіни , зробив постріл і влучив ... У руку ? Ні ! У момент , коли він замахнувся він притримав руку , закриваючи голову , і постріл тільки завдав йому важкої рани , але стимулятори , які вживлені в нього , заблокували всі болючі відчуття , штовхаючи його руйнувати і вбивати , і він метнувся з великою швидкістю на мене , не даючи мені навіть шансу зробити другий постріл . -Я чув багато історій про цих горилоподібних зелених воїнів , що можуть лише одним ударом пробити броню , яку навіть дробовик не пробиває . І такий один зараз летить просто на мене з піднятими руками , які замахнулися добити надоїдливого комара . +Вистрибуючи назад до протилежної стіни , зробив постріл і влучив ... У руку ? Ні ! +У момент , коли він замахнувся він притримав руку , закриваючи голову , і постріл тільки завдав йому важкої рани , але стимулятори , які вживлені в нього , заблокували всі болючі відчуття , штовхаючи його руйнувати і вбивати , і він метнувся з великою швидкістю на мене , не даючи мені навіть шансу зробити другий постріл . +Я чув багато історій про цих горилоподібних зелених воїнів , що можуть лише одним ударом пробити броню , яку навіть дробовик не пробиває . +І такий один зараз летить просто на мене з піднятими руками , які замахнулися добити надоїдливого комара . З шаленим криком його руки , долітаючи до моєї голови , просто втратили той імпульс , що мали на початку , а тіло врізалося в стіну за крок до мене . І коли дійшов звук пострілу снайперської гвинтівки , я зрозумів , це не остання моя місія . Він був останній за сьогодні . Наші радари просканували місцевість , щоб визначити аномальні хвилі , які видають прибульці , хоча я не до кінця розумію , як саме це працює , але відділ досліджень на базі робить чудову роботу , ці прилади ще не давали жодних збоїв . — Вертаємось на базу ! — крикнув командир . — Поранених несем на Ренджер , решта зберіть трупи та технології прибульців . diff --git a/data/gec-only/test/target-sentences-tokenized/0203.a1.txt b/data/gec-only/test/target-sentences-tokenized/0203.a1.txt index 479cfc0ec..85d7d939d 100644 --- a/data/gec-only/test/target-sentences-tokenized/0203.a1.txt +++ b/data/gec-only/test/target-sentences-tokenized/0203.a1.txt @@ -9,6 +9,7 @@ А ввечері в четвер ці ж офісні працівники збираються разом під стінами пабу ( ніколи всередині ) і п'ють весь вечір . Здавалося б , чому саме в четвер ? Бо краще зіпсувати похміллям п'ятницю , ніж свій чесно зароблений вихідний . -Лондон — місто контрастів , але всюди почуваєшся добре . В величезних зелених парках , де люди просто гуляють , лежать на газонах або збираються пограти в футбол . На величезних блошиних ринках , де кожен одягнений , як хоче , смачно пахне їжею і можна знайти дуже цікаві речі з історією . У метро , де відчуваєш гордість собою , що на п'ятий день нарешті почав трошечки в ньому орієнтуватися . І , звичайно ж , у Лондоні захоплює дух від музеїв , де можна побачити скелет динозавра , справжнього біфітера , картини Ван Гога або ж розетський камінь . +Лондон — місто контрастів , але всюди почуваєшся добре . В величезних зелених парках , де люди просто гуляють , лежать на газонах або збираються пограти в футбол . На величезних блошиних ринках , де кожен одягнений , як хоче , смачно пахне їжею і можна знайти дуже цікаві речі з історією . +У метро , де відчуваєш гордість собою , що на п'ятий день нарешті почав трошечки в ньому орієнтуватися . І , звичайно ж , у Лондоні захоплює дух від музеїв , де можна побачити скелет динозавра , справжнього біфітера , картини Ван Гога або ж розетський камінь . В Лондоні є все . Хочу повертатись сюди знову і знову . diff --git a/data/gec-only/test/target-sentences-tokenized/0203.a2.txt b/data/gec-only/test/target-sentences-tokenized/0203.a2.txt index 2886ff78a..877d884d0 100644 --- a/data/gec-only/test/target-sentences-tokenized/0203.a2.txt +++ b/data/gec-only/test/target-sentences-tokenized/0203.a2.txt @@ -9,6 +9,7 @@ А ввечері в четвер ці ж офісні працівники збираються разом під стінами пабу ( ніколи всередині ) і п'ють увесь вечір . Здавалося б , чому саме в четвер ? Бо краще зіпсувати похміллям п'ятницю , ніж свій чесно зароблений вихідний . -Лондон — місто контрастів , але всюди почуваєшся добре : у величезних зелених парках , де люди просто гуляють , лежать на газонах або збираються пограти в футбол ; на величезних блошиних ринках , де кожен вдягнений , як хоче , смачно пахне їжею і можна знайти дуже цікаві речі з історією ; в метро , де відчуваєш гордість за себе , що на п'ятий день нарешті почав трошечки в ньому орієнтуватися . І звичайно ж , в Лондоні захоплює дух музеїв , де можна побачити скелет динозавра , справжнього біфітера , картини Ван Гога або ж Розетський камінь . +Лондон — місто контрастів , але всюди почуваєшся добре : у величезних зелених парках , де люди просто гуляють , лежать на газонах або збираються пограти в футбол ; на величезних блошиних ринках , де кожен вдягнений , як хоче , смачно пахне їжею і можна знайти дуже цікаві речі з історією ; в метро , де відчуваєш гордість за себе , що на п'ятий день нарешті почав трошечки в ньому орієнтуватися . +І звичайно ж , в Лондоні захоплює дух музеїв , де можна побачити скелет динозавра , справжнього біфітера , картини Ван Гога або ж Розетський камінь . У Лондоні є все . Хочу повертатись сюди знову і знову . diff --git a/data/gec-only/test/target-sentences-tokenized/0906.a1.txt b/data/gec-only/test/target-sentences-tokenized/0906.a1.txt index adc46b925..8549faff7 100644 --- a/data/gec-only/test/target-sentences-tokenized/0906.a1.txt +++ b/data/gec-only/test/target-sentences-tokenized/0906.a1.txt @@ -59,7 +59,8 @@ privacy / приватність ! причина знайдеться завжди ! ГОЛОВНЕ — ЯК РЕАГУВАТИ Де це буває ? -в школі ; у дворі ; дорогою додому ; й Інтернеті . +в школі ; у дворі ; дорогою додому ; +й Інтернеті . чому це небезпечно ? для того , кого булять : стрес , демотивація , захворювання — а в дорослому віці ці проблеми зростуть до дорослих масштабів для ініціатора : виключення зі школи , поліція , проблеми зі здоров’ям , бійки Що ви відчуваєте , коли вас дражнили ? diff --git a/data/gec-only/test/target-sentences-tokenized/0906.a2.txt b/data/gec-only/test/target-sentences-tokenized/0906.a2.txt index aca3d62bd..f6b60acae 100644 --- a/data/gec-only/test/target-sentences-tokenized/0906.a2.txt +++ b/data/gec-only/test/target-sentences-tokenized/0906.a2.txt @@ -60,7 +60,8 @@ Privacy / приватність ГОЛОВНЕ — ЯК РЕАГУВАТИ Де це буває ? У школі , у дворі , дорогою додому , й Інтернеті . -ЧОМУ ЦЕ НЕБЕЗПЕЧНО ? Для того , кого булять , — це стрес , демотивація , захворювання , а в дорослому віці ці проблеми зростуть до дорослих масштабів . +ЧОМУ ЦЕ НЕБЕЗПЕЧНО ? +Для того , кого булять , — це стрес , демотивація , захворювання , а в дорослому віці ці проблеми зростуть до дорослих масштабів . Для ініціатора — виключення зі школи , поліція , проблеми зі здоров’ям , бійки . Що ви відчуваєте , коли вас дражнять ? Злість , образу , розчарування , страх , сором ( відповіді дітей ) . diff --git a/data/gec-only/test/target-sentences/0170.a1.txt b/data/gec-only/test/target-sentences/0170.a1.txt index b35d3a1a3..14e2712ba 100644 --- a/data/gec-only/test/target-sentences/0170.a1.txt +++ b/data/gec-only/test/target-sentences/0170.a1.txt @@ -7,7 +7,9 @@ Вистрибуючи назад до протилежної стіни, вистрілюю і попадаю .. в руку? Ні! в момент, коли він замахнувся, то притримав руку, закриваючи голову, і постріл тільки завдав йому важкої рани, але стимулятори, які вживлені в нього, блокують усі болючі відчуття, штовхаючи його руйнувати і вбивати, і він метнувся з великою швидкістю на мене, не даючи мені навіть шансу зробити другий постріл. Я чув багато історій про цих горилоподібних зелених воїнів,які можуть лише одним ударом можуть пробити броню, яку навіть дробовик не пробиває. І такий один зараз летить просто на мене з піднятими руками, які замахнулися добити надоїдливого комара. З шаленим криком його руки, долітаючи до моєї голови, просто втратили той імпульс, що мали на початку, а тіло врізалося в стіну за крок до мене. -І коли дійшов звук пострілу снайперської гвинтівки, я зрозумів: це не остання моя місія. Він був останній за сьогодні. Наші радари просканували місцевість, щоб визначити аномальні хвилі, які видають прибульці, хоча я не до кінця розумію, як саме це працює, але відділ досліджень на базі робить чудову роботу, ці прилади ще не давали жодних збоїв. +І коли дійшов звук пострілу снайперської гвинтівки, я зрозумів: це не остання моя місія. +Він був останній за сьогодні. +Наші радари просканували місцевість, щоб визначити аномальні хвилі, які видають прибульці, хоча я не до кінця розумію, як саме це працює, але відділ досліджень на базі робить чудову роботу, ці прилади ще не давали жодних збоїв. — Вертаємось на базу! — крикнув командир. — поранених несем на Ренджер, решта зберіть трупи та технології прибульців. Швидко! ## База diff --git a/data/gec-only/test/target-sentences/0170.a2.txt b/data/gec-only/test/target-sentences/0170.a2.txt index c836f3db0..52dff8acb 100644 --- a/data/gec-only/test/target-sentences/0170.a2.txt +++ b/data/gec-only/test/target-sentences/0170.a2.txt @@ -4,8 +4,10 @@ Його крок був важким і кожний крок його тільки дратував більше. У мене була лише одна спроба, вистрілити в нього треба вище грудей, інакше весь удар прийдеться на броню, і тоді він просто розірве мене свої кігтями. Знаючи, що я досі тут, він почав ламати усе довкола, і в один момент він замахнувся, щоб розламати ту стіну, за якою я ховався, це був момент, якого я чекав, бо я знав, що він близько і не очікує моєї появи. -Вистрибуючи назад до протилежної стіни, зробив постріл і влучив... У руку? Ні! У момент, коли він замахнувся він притримав руку, закриваючи голову, і постріл тільки завдав йому важкої рани, але стимулятори, які вживлені в нього, заблокували всі болючі відчуття, штовхаючи його руйнувати і вбивати, і він метнувся з великою швидкістю на мене, не даючи мені навіть шансу зробити другий постріл. -Я чув багато історій про цих горилоподібних зелених воїнів, що можуть лише одним ударом пробити броню, яку навіть дробовик не пробиває. І такий один зараз летить просто на мене з піднятими руками, які замахнулися добити надоїдливого комара. +Вистрибуючи назад до протилежної стіни, зробив постріл і влучив... У руку? Ні! +У момент, коли він замахнувся він притримав руку, закриваючи голову, і постріл тільки завдав йому важкої рани, але стимулятори, які вживлені в нього, заблокували всі болючі відчуття, штовхаючи його руйнувати і вбивати, і він метнувся з великою швидкістю на мене, не даючи мені навіть шансу зробити другий постріл. +Я чув багато історій про цих горилоподібних зелених воїнів, що можуть лише одним ударом пробити броню, яку навіть дробовик не пробиває. +І такий один зараз летить просто на мене з піднятими руками, які замахнулися добити надоїдливого комара. З шаленим криком його руки, долітаючи до моєї голови, просто втратили той імпульс, що мали на початку, а тіло врізалося в стіну за крок до мене. І коли дійшов звук пострілу снайперської гвинтівки, я зрозумів, це не остання моя місія. Він був останній за сьогодні. Наші радари просканували місцевість, щоб визначити аномальні хвилі, які видають прибульці, хоча я не до кінця розумію, як саме це працює, але відділ досліджень на базі робить чудову роботу, ці прилади ще не давали жодних збоїв. — Вертаємось на базу! — крикнув командир. — Поранених несем на Ренджер, решта зберіть трупи та технології прибульців. diff --git a/data/gec-only/test/target-sentences/0203.a1.txt b/data/gec-only/test/target-sentences/0203.a1.txt index 5340a383c..89a624978 100644 --- a/data/gec-only/test/target-sentences/0203.a1.txt +++ b/data/gec-only/test/target-sentences/0203.a1.txt @@ -9,6 +9,7 @@ А ввечері в четвер ці ж офісні працівники збираються разом під стінами пабу (ніколи всередині) і п'ють весь вечір. Здавалося б, чому саме в четвер? Бо краще зіпсувати похміллям п'ятницю, ніж свій чесно зароблений вихідний. -Лондон — місто контрастів, але всюди почуваєшся добре. В величезних зелених парках, де люди просто гуляють, лежать на газонах або збираються пограти в футбол. На величезних блошиних ринках, де кожен одягнений, як хоче, смачно пахне їжею і можна знайти дуже цікаві речі з історією. У метро, де відчуваєш гордість собою, що на п'ятий день нарешті почав трошечки в ньому орієнтуватися. І, звичайно ж, у Лондоні захоплює дух від музеїв, де можна побачити скелет динозавра, справжнього біфітера, картини Ван Гога або ж розетський камінь. +Лондон — місто контрастів, але всюди почуваєшся добре. В величезних зелених парках, де люди просто гуляють, лежать на газонах або збираються пограти в футбол. На величезних блошиних ринках, де кожен одягнений, як хоче, смачно пахне їжею і можна знайти дуже цікаві речі з історією. +У метро, де відчуваєш гордість собою, що на п'ятий день нарешті почав трошечки в ньому орієнтуватися. І, звичайно ж, у Лондоні захоплює дух від музеїв, де можна побачити скелет динозавра, справжнього біфітера, картини Ван Гога або ж розетський камінь. В Лондоні є все. Хочу повертатись сюди знову і знову. diff --git a/data/gec-only/test/target-sentences/0203.a2.txt b/data/gec-only/test/target-sentences/0203.a2.txt index 12fb3d764..694849391 100644 --- a/data/gec-only/test/target-sentences/0203.a2.txt +++ b/data/gec-only/test/target-sentences/0203.a2.txt @@ -9,6 +9,7 @@ А ввечері в четвер ці ж офісні працівники збираються разом під стінами пабу (ніколи всередині) і п'ють увесь вечір. Здавалося б, чому саме в четвер? Бо краще зіпсувати похміллям п'ятницю, ніж свій чесно зароблений вихідний. -Лондон — місто контрастів, але всюди почуваєшся добре: у величезних зелених парках, де люди просто гуляють, лежать на газонах або збираються пограти в футбол; на величезних блошиних ринках, де кожен вдягнений, як хоче, смачно пахне їжею і можна знайти дуже цікаві речі з історією; в метро, де відчуваєш гордість за себе, що на п'ятий день нарешті почав трошечки в ньому орієнтуватися. І звичайно ж, в Лондоні захоплює дух музеїв, де можна побачити скелет динозавра, справжнього біфітера, картини Ван Гога або ж Розетський камінь. +Лондон — місто контрастів, але всюди почуваєшся добре: у величезних зелених парках, де люди просто гуляють, лежать на газонах або збираються пограти в футбол; на величезних блошиних ринках, де кожен вдягнений, як хоче, смачно пахне їжею і можна знайти дуже цікаві речі з історією; в метро, де відчуваєш гордість за себе, що на п'ятий день нарешті почав трошечки в ньому орієнтуватися. +І звичайно ж, в Лондоні захоплює дух музеїв, де можна побачити скелет динозавра, справжнього біфітера, картини Ван Гога або ж Розетський камінь. У Лондоні є все. Хочу повертатись сюди знову і знову. diff --git a/data/gec-only/test/target-sentences/0906.a1.txt b/data/gec-only/test/target-sentences/0906.a1.txt index 0629b9f99..480acf349 100644 --- a/data/gec-only/test/target-sentences/0906.a1.txt +++ b/data/gec-only/test/target-sentences/0906.a1.txt @@ -59,7 +59,8 @@ privacy/приватність ! причина знайдеться завжди! ГОЛОВНЕ — ЯК РЕАГУВАТИ Де це буває? -в школі; у дворі; дорогою додому; й Інтернеті. +в школі; у дворі; дорогою додому; +й Інтернеті. чому це небезпечно? для того, кого булять: стрес, демотивація, захворювання — а в дорослому віці ці проблеми зростуть до дорослих масштабів для ініціатора: виключення зі школи, поліція, проблеми зі здоров’ям, бійки Що ви відчуваєте, коли вас дражнили? diff --git a/data/gec-only/test/target-sentences/0906.a2.txt b/data/gec-only/test/target-sentences/0906.a2.txt index 01f08f75c..61e21372e 100644 --- a/data/gec-only/test/target-sentences/0906.a2.txt +++ b/data/gec-only/test/target-sentences/0906.a2.txt @@ -60,7 +60,8 @@ Privacy / приватність ГОЛОВНЕ — ЯК РЕАГУВАТИ Де це буває? У школі, у дворі, дорогою додому, й Інтернеті. -ЧОМУ ЦЕ НЕБЕЗПЕЧНО? Для того, кого булять, — це стрес, демотивація, захворювання, а в дорослому віці ці проблеми зростуть до дорослих масштабів. +ЧОМУ ЦЕ НЕБЕЗПЕЧНО? +Для того, кого булять, — це стрес, демотивація, захворювання, а в дорослому віці ці проблеми зростуть до дорослих масштабів. Для ініціатора — виключення зі школи, поліція, проблеми зі здоров’ям, бійки. Що ви відчуваєте, коли вас дражнять? Злість, образу, розчарування, страх, сором (відповіді дітей). diff --git a/data/gec-only/train/source-sentences-tokenized/0061.src.txt b/data/gec-only/train/source-sentences-tokenized/0061.src.txt index c0d1f5c69..1eb4b0dde 100644 --- a/data/gec-only/train/source-sentences-tokenized/0061.src.txt +++ b/data/gec-only/train/source-sentences-tokenized/0061.src.txt @@ -14,4 +14,4 @@ І багато було таких сильних держав . Майже нікого не лишилось з гігантів з якими можна битись ... крім одного . Пригадую янкі називали лідера червоних Дядьком Семом , коли ми вимінювали їх нагороди на консерви з портвейном . -Нам кажуть що війни з червоними не буде , та думаю це лише питання часу , ми виконаємо наш обов'язок де б ми не були , до кінця , тільки б той кінець прийшов вже якомога швидше . +Нам кажуть що війни з червоними не буде , та думаю це лише питання часу , ми виконаємо наш обов'язок де б ми не були , до кінця , тільки б той кінець прийшов вже якомога швидше . " diff --git a/data/gec-only/train/source-sentences-tokenized/0462.src.txt b/data/gec-only/train/source-sentences-tokenized/0462.src.txt index bc39b6ea6..ef3b5ce01 100644 --- a/data/gec-only/train/source-sentences-tokenized/0462.src.txt +++ b/data/gec-only/train/source-sentences-tokenized/0462.src.txt @@ -8,4 +8,4 @@ " Оце ж ви бовдури , - сказав він , - сваритися через сидіння й при цьому коня не мати . " " Це сидіння варте чвари , " - відповів один чоловік , - " хто ним володіє й чогось хоче , нехай навіть на край світу дістатися , то опиниться моментально там . Це сидіння належить нам обом , але зараз моя черга ним користуватися , але він не хоче віддати сидіння . " " Я вам допоможу , " - сказав барабаник , при цьому відійшов й встромив палку в землю . -Потім він повернувся і промовив : " а тепер біжіть до мети , хто перший дістанеться , того і буде сидіння . +Потім він повернувся і промовив : " а тепер біжіть до мети , хто перший дістанеться , того і буде сидіння . " diff --git a/data/gec-only/train/source-sentences/0061.src.txt b/data/gec-only/train/source-sentences/0061.src.txt index dcce9f600..9e3fd041f 100644 --- a/data/gec-only/train/source-sentences/0061.src.txt +++ b/data/gec-only/train/source-sentences/0061.src.txt @@ -14,4 +14,4 @@ І багато було таких сильних держав. Майже нікого не лишилось з гігантів з якими можна битись... крім одного. Пригадую янкі називали лідера червоних Дядьком Семом, коли ми вимінювали їх нагороди на консерви з портвейном. -Нам кажуть що війни з червоними не буде, та думаю це лише питання часу, ми виконаємо наш обов'язок де б ми не були, до кінця, тільки б той кінець прийшов вже якомога швидше. +Нам кажуть що війни з червоними не буде, та думаю це лише питання часу, ми виконаємо наш обов'язок де б ми не були, до кінця, тільки б той кінець прийшов вже якомога швидше." diff --git a/data/gec-only/train/source-sentences/0462.src.txt b/data/gec-only/train/source-sentences/0462.src.txt index c4a0073a2..bb1c21493 100644 --- a/data/gec-only/train/source-sentences/0462.src.txt +++ b/data/gec-only/train/source-sentences/0462.src.txt @@ -8,4 +8,4 @@ "Оце ж ви бовдури, - сказав він,- сваритися через сидіння й при цьому коня не мати. " "Це сидіння варте чвари,"- відповів один чоловік, - "хто ним володіє й чогось хоче, нехай навіть на край світу дістатися, то опиниться моментально там. Це сидіння належить нам обом, але зараз моя черга ним користуватися, але він не хоче віддати сидіння." "Я вам допоможу,"- сказав барабаник, при цьому відійшов й встромив палку в землю. -Потім він повернувся і промовив: "а тепер біжіть до мети, хто перший дістанеться, того і буде сидіння. +Потім він повернувся і промовив: "а тепер біжіть до мети, хто перший дістанеться, того і буде сидіння." From 8806dec87fee0afda7348b2afa353aab3a0f1bd3 Mon Sep 17 00:00:00 2001 From: Danylo Mysak Date: Fri, 20 Jan 2023 17:11:50 +0200 Subject: [PATCH 2/2] Update m2 --- data/gec-fluency/train/gec-fluency.train.m2 | 8 +- data/gec-only/test/gec-only.test.m2 | 153 ++++++++++++++------ data/gec-only/train/gec-only.train.m2 | 8 +- 3 files changed, 114 insertions(+), 55 deletions(-) diff --git a/data/gec-fluency/train/gec-fluency.train.m2 b/data/gec-fluency/train/gec-fluency.train.m2 index bdad7c933..171a108d7 100644 --- a/data/gec-fluency/train/gec-fluency.train.m2 +++ b/data/gec-fluency/train/gec-fluency.train.m2 @@ -4000,14 +4000,14 @@ S Пригадую янкі називали лідера червоних Дя A 1 1|||M|||,|||REQUIRED|||-NONE-|||0 A 11 12|||R|||їхні|||REQUIRED|||-NONE-|||0 -S Нам кажуть що війни з червоними не буде , та думаю це лише питання часу , ми виконаємо наш обов'язок де б ми не були , до кінця , тільки б той кінець прийшов вже якомога швидше . +S Нам кажуть що війни з червоними не буде , та думаю це лише питання часу , ми виконаємо наш обов'язок де б ми не були , до кінця , тільки б той кінець прийшов вже якомога швидше . " A 2 2|||M|||,|||REQUIRED|||-NONE-|||0 A 10 10|||M|||,|||REQUIRED|||-NONE-|||0 A 10 11|||R|||гадаю|||REQUIRED|||-NONE-|||0 A 11 11|||M|||,|||REQUIRED|||-NONE-|||0 A 20 20|||M|||,|||REQUIRED|||-NONE-|||0 A 34 35|||R|||уже|||REQUIRED|||-NONE-|||0 -A 37 37|||M|||"|||REQUIRED|||-NONE-|||0 +A 37 39|||R|||" .|||REQUIRED|||-NONE-|||0 S # 0062 A -1 -1|||noop|||-NONE-|||REQUIRED|||-NONE-|||0 @@ -31687,9 +31687,9 @@ S Це сидіння належить нам обом , але зараз мо A 19 21|||R|||" .|||REQUIRED|||-NONE-|||0 A 27 28|||R|||—|||REQUIRED|||-NONE-|||0 -S Потім він повернувся і промовив : " а тепер біжіть до мети , хто перший дістанеться , того і буде сидіння . +S Потім він повернувся і промовив : " а тепер біжіть до мети , хто перший дістанеться , того і буде сидіння . " A 6 8|||R|||— А|||REQUIRED|||-NONE-|||0 -A 21 21|||M|||"|||REQUIRED|||-NONE-|||0 +A 21 23|||R|||" .|||REQUIRED|||-NONE-|||0 S # 0463 A -1 -1|||noop|||-NONE-|||REQUIRED|||-NONE-|||0 diff --git a/data/gec-only/test/gec-only.test.m2 b/data/gec-only/test/gec-only.test.m2 index 274758ce6..863c1d8e8 100644 --- a/data/gec-only/test/gec-only.test.m2 +++ b/data/gec-only/test/gec-only.test.m2 @@ -2820,12 +2820,7 @@ A 8 9|||R|||влучив|||REQUIRED|||-NONE-|||1 A 9 10|||R|||...|||REQUIRED|||-NONE-|||1 A 10 11|||R|||У|||REQUIRED|||-NONE-|||1 A 13 14|||R|||Ні|||REQUIRED|||-NONE-|||1 -A 15 16|||R|||У|||REQUIRED|||-NONE-|||1 -A 17 17|||M|||,|||REQUIRED|||-NONE-|||1 -A 37 37|||M|||,|||REQUIRED|||-NONE-|||1 -A 42 43|||R|||заблокували|||REQUIRED|||-NONE-|||1 -A 46 46|||M|||,|||REQUIRED|||-NONE-|||1 -A 60 60|||M|||,|||REQUIRED|||-NONE-|||1 +A 15 69|||U||||||REQUIRED|||-NONE-|||1 S Я чув багато історій про цих горило - подібних зелених воїнів що можуть лише одним ударом можуть пробити броню яку навіть дробовик не пробиває . І такий один зараз летить просто на мене з піднятими руками які замахнулися добити надоїдливу комара . A 6 9|||R|||горилоподібних|||REQUIRED|||-NONE-|||0 @@ -2834,12 +2829,43 @@ A 11 12|||R|||які|||REQUIRED|||-NONE-|||0 A 19 19|||M|||,|||REQUIRED|||-NONE-|||0 A 36 36|||M|||,|||REQUIRED|||-NONE-|||0 A 39 40|||R|||надоїдливого|||REQUIRED|||-NONE-|||0 -A 6 9|||R|||горилоподібних|||REQUIRED|||-NONE-|||1 -A 11 11|||M|||,|||REQUIRED|||-NONE-|||1 -A 16 17|||U||||||REQUIRED|||-NONE-|||1 -A 19 19|||M|||,|||REQUIRED|||-NONE-|||1 -A 36 36|||M|||,|||REQUIRED|||-NONE-|||1 -A 39 40|||R|||надоїдливого|||REQUIRED|||-NONE-|||1 +A 0 1|||R|||У момент , коли|||REQUIRED|||-NONE-|||1 +A 1 2|||R|||він|||REQUIRED|||-NONE-|||1 +A 2 4|||R|||замахнувся він притримав|||REQUIRED|||-NONE-|||1 +A 4 6|||R|||руку , закриваючи|||REQUIRED|||-NONE-|||1 +A 6 7|||R|||голову|||REQUIRED|||-NONE-|||1 +A 7 8|||R|||,|||REQUIRED|||-NONE-|||1 +A 8 10|||R|||і постріл тільки|||REQUIRED|||-NONE-|||1 +A 10 11|||R|||завдав йому|||REQUIRED|||-NONE-|||1 +A 11 12|||R|||важкої|||REQUIRED|||-NONE-|||1 +A 12 13|||R|||рани|||REQUIRED|||-NONE-|||1 +A 13 13|||M|||,|||REQUIRED|||-NONE-|||1 +A 13 14|||R|||але|||REQUIRED|||-NONE-|||1 +A 14 15|||R|||стимулятори|||REQUIRED|||-NONE-|||1 +A 15 15|||M|||,|||REQUIRED|||-NONE-|||1 +A 15 16|||R|||які вживлені в нього|||REQUIRED|||-NONE-|||1 +A 16 16|||M|||,|||REQUIRED|||-NONE-|||1 +A 16 17|||R|||заблокували|||REQUIRED|||-NONE-|||1 +A 17 18|||R|||всі|||REQUIRED|||-NONE-|||1 +A 18 19|||R|||болючі|||REQUIRED|||-NONE-|||1 +A 19 20|||R|||відчуття|||REQUIRED|||-NONE-|||1 +A 20 20|||M|||,|||REQUIRED|||-NONE-|||1 +A 20 23|||R|||штовхаючи його руйнувати і|||REQUIRED|||-NONE-|||1 +A 23 24|||R|||вбивати|||REQUIRED|||-NONE-|||1 +A 24 26|||R|||, і|||REQUIRED|||-NONE-|||1 +A 26 27|||R|||він|||REQUIRED|||-NONE-|||1 +A 27 28|||R|||метнувся|||REQUIRED|||-NONE-|||1 +A 28 29|||R|||з|||REQUIRED|||-NONE-|||1 +A 29 30|||R|||великою|||REQUIRED|||-NONE-|||1 +A 30 31|||R|||швидкістю|||REQUIRED|||-NONE-|||1 +A 33 34|||R|||,|||REQUIRED|||-NONE-|||1 +A 34 35|||R|||не|||REQUIRED|||-NONE-|||1 +A 35 36|||R|||даючи|||REQUIRED|||-NONE-|||1 +A 36 37|||R|||мені|||REQUIRED|||-NONE-|||1 +A 37 38|||R|||навіть шансу|||REQUIRED|||-NONE-|||1 +A 38 39|||R|||зробити|||REQUIRED|||-NONE-|||1 +A 39 40|||R|||другий|||REQUIRED|||-NONE-|||1 +A 40 41|||R|||постріл|||REQUIRED|||-NONE-|||1 S З шаленим криком його руки долітаючи до моєї голови просто втратили той імпульс що мали на початку а тіло врізалися в стіну за крок до мене . A 5 5|||M|||,|||REQUIRED|||-NONE-|||0 @@ -2847,24 +2873,53 @@ A 9 9|||M|||,|||REQUIRED|||-NONE-|||0 A 13 13|||M|||,|||REQUIRED|||-NONE-|||0 A 17 17|||M|||,|||REQUIRED|||-NONE-|||0 A 19 20|||R|||врізалося|||REQUIRED|||-NONE-|||0 -A 5 5|||M|||,|||REQUIRED|||-NONE-|||1 -A 9 9|||M|||,|||REQUIRED|||-NONE-|||1 -A 13 13|||M|||,|||REQUIRED|||-NONE-|||1 -A 17 17|||M|||,|||REQUIRED|||-NONE-|||1 -A 19 20|||R|||врізалося|||REQUIRED|||-NONE-|||1 +A 0 1|||R|||Я чув|||REQUIRED|||-NONE-|||1 +A 1 2|||R|||багато історій|||REQUIRED|||-NONE-|||1 +A 2 10|||R|||про цих горилоподібних зелених воїнів|||REQUIRED|||-NONE-|||1 +A 10 13|||R|||,|||REQUIRED|||-NONE-|||1 +A 14 15|||R|||можуть|||REQUIRED|||-NONE-|||1 +A 15 16|||R|||лише|||REQUIRED|||-NONE-|||1 +A 16 17|||R|||одним|||REQUIRED|||-NONE-|||1 +A 17 18|||R|||ударом|||REQUIRED|||-NONE-|||1 +A 18 19|||R|||пробити|||REQUIRED|||-NONE-|||1 +A 19 20|||R|||броню|||REQUIRED|||-NONE-|||1 +A 20 20|||M|||,|||REQUIRED|||-NONE-|||1 +A 20 21|||R|||яку|||REQUIRED|||-NONE-|||1 +A 21 26|||R|||навіть дробовик не пробиває|||REQUIRED|||-NONE-|||1 -S І коли дійшов звук пострілу снайперської гвинтівки я зрозумів , це не остання моя місія . Він був останній за сьогодні . Наші радари просканували місцевість щоб визначити аномальні хвилі які видають прибульці , хоча я не до кінця розумію як сам це працює , але відділ досліджень на базі робить чудову роботу , ці прилади ще не давали жодних збоїв . +S І коли дійшов звук пострілу снайперської гвинтівки я зрозумів , це не остання моя місія . A 7 7|||M|||,|||REQUIRED|||-NONE-|||0 A 9 10|||R|||:|||REQUIRED|||-NONE-|||0 -A 26 26|||M|||,|||REQUIRED|||-NONE-|||0 -A 30 30|||M|||,|||REQUIRED|||-NONE-|||0 -A 40 40|||M|||,|||REQUIRED|||-NONE-|||0 -A 41 42|||R|||саме|||REQUIRED|||-NONE-|||0 -A 7 7|||M|||,|||REQUIRED|||-NONE-|||1 -A 26 26|||M|||,|||REQUIRED|||-NONE-|||1 -A 30 30|||M|||,|||REQUIRED|||-NONE-|||1 -A 40 40|||M|||,|||REQUIRED|||-NONE-|||1 -A 41 42|||R|||саме|||REQUIRED|||-NONE-|||1 +A 1 7|||R|||такий один зараз летить просто на мене|||REQUIRED|||-NONE-|||1 +A 7 7|||M|||з|||REQUIRED|||-NONE-|||1 +A 7 8|||R|||піднятими|||REQUIRED|||-NONE-|||1 +A 8 9|||R|||руками|||REQUIRED|||-NONE-|||1 +A 10 11|||R|||які|||REQUIRED|||-NONE-|||1 +A 11 14|||R|||замахнулися добити|||REQUIRED|||-NONE-|||1 +A 14 15|||R|||надоїдливого комара|||REQUIRED|||-NONE-|||1 + +S Він був останній за сьогодні . +A -1 -1|||noop|||-NONE-|||REQUIRED|||-NONE-|||0 +A 0 0|||M|||З шаленим криком його руки , долітаючи до моєї голови , просто втратили той імпульс ,|||REQUIRED|||-NONE-|||1 +A 0 1|||R|||що мали на початку|||REQUIRED|||-NONE-|||1 +A 1 1|||M|||,|||REQUIRED|||-NONE-|||1 +A 1 1|||M|||а|||REQUIRED|||-NONE-|||1 +A 1 1|||M|||тіло|||REQUIRED|||-NONE-|||1 +A 1 1|||M|||врізалося|||REQUIRED|||-NONE-|||1 +A 1 2|||R|||в|||REQUIRED|||-NONE-|||1 +A 2 3|||R|||стіну|||REQUIRED|||-NONE-|||1 +A 4 5|||R|||крок до мене|||REQUIRED|||-NONE-|||1 + +S Наші радари просканували місцевість щоб визначити аномальні хвилі які видають прибульці , хоча я не до кінця розумію як сам це працює , але відділ досліджень на базі робить чудову роботу , ці прилади ще не давали жодних збоїв . +A 4 4|||M|||,|||REQUIRED|||-NONE-|||0 +A 8 8|||M|||,|||REQUIRED|||-NONE-|||0 +A 18 18|||M|||,|||REQUIRED|||-NONE-|||0 +A 19 20|||R|||саме|||REQUIRED|||-NONE-|||0 +A 0 0|||M|||І коли дійшов звук пострілу снайперської гвинтівки , я зрозумів , це не остання моя місія . Він був останній за сьогодні .|||REQUIRED|||-NONE-|||1 +A 4 4|||M|||,|||REQUIRED|||-NONE-|||1 +A 8 8|||M|||,|||REQUIRED|||-NONE-|||1 +A 18 18|||M|||,|||REQUIRED|||-NONE-|||1 +A 19 20|||R|||саме|||REQUIRED|||-NONE-|||1 S - Вертаємось на базу ! - крикнув командир . - поранених несем на Ренджер , решта зберіть трупи та технології прибульців . A 0 1|||R|||—|||REQUIRED|||-NONE-|||0 @@ -4054,25 +4109,26 @@ S Бо краще зіпсувати похміллям п'ятницю , ніж A -1 -1|||noop|||-NONE-|||REQUIRED|||-NONE-|||0 A -1 -1|||noop|||-NONE-|||REQUIRED|||-NONE-|||1 -S Лоднон - місто контрастів , але всюди почуваєшся добре . В величезних зелених парках , де люди просто гуляють , лежать на газонах або збираються пограти в футбол . На величезних блошиних ринках , де кожен вдягнений , як хоче , смачно пахне їжею і можна знайти дуже цікаві речі з історією . В метро , де відчуваєш гордість собою , що на п'ятий день нарешті почав трошечки в ньому орієнтуватися . І звичайно ж в Лондоні захоплює дух від музеїв , де можна побачити скелет динозавра , справжнього біфітера , картини Ван Гога або ж розетський камінь . +S Лоднон - місто контрастів , але всюди почуваєшся добре . В величезних зелених парках , де люди просто гуляють , лежать на газонах або збираються пограти в футбол . На величезних блошиних ринках , де кожен вдягнений , як хоче , смачно пахне їжею і можна знайти дуже цікаві речі з історією . A 0 1|||R|||Лондон|||REQUIRED|||-NONE-|||0 A 1 2|||R|||—|||REQUIRED|||-NONE-|||0 A 36 37|||R|||одягнений|||REQUIRED|||-NONE-|||0 -A 53 54|||R|||У|||REQUIRED|||-NONE-|||0 -A 73 73|||M|||,|||REQUIRED|||-NONE-|||0 -A 75 75|||M|||,|||REQUIRED|||-NONE-|||0 -A 75 76|||R|||у|||REQUIRED|||-NONE-|||0 A 0 1|||R|||Лондон|||REQUIRED|||-NONE-|||1 A 1 2|||R|||—|||REQUIRED|||-NONE-|||1 A 9 10|||R|||:|||REQUIRED|||-NONE-|||1 A 10 11|||R|||у|||REQUIRED|||-NONE-|||1 A 28 30|||R|||; на|||REQUIRED|||-NONE-|||1 -A 52 54|||R|||; в|||REQUIRED|||-NONE-|||1 -A 59 59|||M|||за|||REQUIRED|||-NONE-|||1 -A 59 60|||R|||себе|||REQUIRED|||-NONE-|||1 -A 75 75|||M|||,|||REQUIRED|||-NONE-|||1 -A 79 80|||U||||||REQUIRED|||-NONE-|||1 -A 96 97|||R|||Розетський|||REQUIRED|||-NONE-|||1 +A 52 52|||M|||; в метро , де відчуваєш гордість за себе , що на п'ятий день нарешті почав трошечки в ньому орієнтуватися|||REQUIRED|||-NONE-|||1 + +S В метро , де відчуваєш гордість собою , що на п'ятий день нарешті почав трошечки в ньому орієнтуватися . І звичайно ж в Лондоні захоплює дух від музеїв , де можна побачити скелет динозавра , справжнього біфітера , картини Ван Гога або ж розетський камінь . +A 0 1|||R|||У|||REQUIRED|||-NONE-|||0 +A 20 20|||M|||,|||REQUIRED|||-NONE-|||0 +A 22 22|||M|||,|||REQUIRED|||-NONE-|||0 +A 22 23|||R|||у|||REQUIRED|||-NONE-|||0 +A 0 19|||U||||||REQUIRED|||-NONE-|||1 +A 22 22|||M|||,|||REQUIRED|||-NONE-|||1 +A 26 27|||U||||||REQUIRED|||-NONE-|||1 +A 43 44|||R|||Розетський|||REQUIRED|||-NONE-|||1 S В Лондоні є усе . A 3 4|||R|||все|||REQUIRED|||-NONE-|||0 @@ -13009,23 +13065,26 @@ S Де це буває ? A -1 -1|||noop|||-NONE-|||REQUIRED|||-NONE-|||0 A -1 -1|||noop|||-NONE-|||REQUIRED|||-NONE-|||1 -S в школі у дворі дорогою додому і інтернеті +S в школі у дворі дорогою додому A 2 2|||M|||;|||REQUIRED|||-NONE-|||0 A 4 4|||M|||;|||REQUIRED|||-NONE-|||0 -A 6 7|||R|||; й|||REQUIRED|||-NONE-|||0 -A 7 8|||R|||Інтернеті|||REQUIRED|||-NONE-|||0 -A 8 8|||M|||.|||REQUIRED|||-NONE-|||0 +A 6 6|||M|||;|||REQUIRED|||-NONE-|||0 A 0 1|||R|||У|||REQUIRED|||-NONE-|||1 A 2 2|||M|||,|||REQUIRED|||-NONE-|||1 A 4 4|||M|||,|||REQUIRED|||-NONE-|||1 -A 6 7|||R|||, й|||REQUIRED|||-NONE-|||1 -A 7 8|||R|||Інтернеті|||REQUIRED|||-NONE-|||1 -A 8 8|||M|||.|||REQUIRED|||-NONE-|||1 +A 6 6|||M|||, й Інтернеті .|||REQUIRED|||-NONE-|||1 + +S і інтернеті +A 0 1|||R|||й|||REQUIRED|||-NONE-|||0 +A 1 2|||R|||Інтернеті|||REQUIRED|||-NONE-|||0 +A 2 2|||M|||.|||REQUIRED|||-NONE-|||0 +A 0 1|||R|||ЧОМУ ЦЕ НЕБЕЗПЕЧНО|||REQUIRED|||-NONE-|||1 +A 1 2|||R|||?|||REQUIRED|||-NONE-|||1 S чому це небезпечно ? для того , кого булять : стрес , демотивація , захворювання – а в дорослому віці ці проблеми зростуть до дорослих масштабів A 15 16|||R|||—|||REQUIRED|||-NONE-|||0 -A 0 3|||R|||ЧОМУ ЦЕ НЕБЕЗПЕЧНО|||REQUIRED|||-NONE-|||1 -A 4 5|||R|||Для|||REQUIRED|||-NONE-|||1 +A 0 3|||U||||||REQUIRED|||-NONE-|||1 +A 3 5|||U|||Для|||REQUIRED|||-NONE-|||1 A 9 10|||R|||, —|||REQUIRED|||-NONE-|||1 A 10 10|||M|||це|||REQUIRED|||-NONE-|||1 A 15 16|||R|||,|||REQUIRED|||-NONE-|||1 diff --git a/data/gec-only/train/gec-only.train.m2 b/data/gec-only/train/gec-only.train.m2 index 2f37a4530..ec169dd9a 100644 --- a/data/gec-only/train/gec-only.train.m2 +++ b/data/gec-only/train/gec-only.train.m2 @@ -3670,13 +3670,13 @@ S Пригадую янкі називали лідера червоних Дя A 1 1|||M|||,|||REQUIRED|||-NONE-|||0 A 11 12|||R|||їхні|||REQUIRED|||-NONE-|||0 -S Нам кажуть що війни з червоними не буде , та думаю це лише питання часу , ми виконаємо наш обов'язок де б ми не були , до кінця , тільки б той кінець прийшов вже якомога швидше . +S Нам кажуть що війни з червоними не буде , та думаю це лише питання часу , ми виконаємо наш обов'язок де б ми не були , до кінця , тільки б той кінець прийшов вже якомога швидше . " A 2 2|||M|||,|||REQUIRED|||-NONE-|||0 A 10 10|||M|||,|||REQUIRED|||-NONE-|||0 A 11 11|||M|||,|||REQUIRED|||-NONE-|||0 A 20 20|||M|||,|||REQUIRED|||-NONE-|||0 A 34 35|||R|||уже|||REQUIRED|||-NONE-|||0 -A 37 37|||M|||"|||REQUIRED|||-NONE-|||0 +A 37 39|||R|||" .|||REQUIRED|||-NONE-|||0 S # 0062 A -1 -1|||noop|||-NONE-|||REQUIRED|||-NONE-|||0 @@ -29929,9 +29929,9 @@ S Це сидіння належить нам обом , але зараз мо A 19 21|||R|||" .|||REQUIRED|||-NONE-|||0 A 27 28|||R|||—|||REQUIRED|||-NONE-|||0 -S Потім він повернувся і промовив : " а тепер біжіть до мети , хто перший дістанеться , того і буде сидіння . +S Потім він повернувся і промовив : " а тепер біжіть до мети , хто перший дістанеться , того і буде сидіння . " A 6 8|||R|||— А|||REQUIRED|||-NONE-|||0 -A 21 21|||M|||"|||REQUIRED|||-NONE-|||0 +A 21 23|||R|||" .|||REQUIRED|||-NONE-|||0 S # 0463 A -1 -1|||noop|||-NONE-|||REQUIRED|||-NONE-|||0