6.0.0

Author: hyunwoongko

Diff for: .github/workflows/test_macos.yaml

@@ -13,12 +13,12 @@ jobs:
         with:
           python-version: 3.10.11
 
-      - name: Install pytest
-        run: |
-          python3 -m pip install pytest
       - name: Install kss locally
         run: |
           pip3 install -e .
+      - name: Install pytest
+        run: |
+          python3 -m pip install pytest
       - name: Run the test suite
         run: |
           cd tests && pytest -v

Diff for: .github/workflows/test_ubuntu.yaml

@@ -13,12 +13,12 @@ jobs:
         with:
           python-version: 3.10.11
 
-      - name: Install pytest
-        run: |
-          python3 -m pip install pytest
       - name: Install kss locally
         run: |
           pip3 install -e .
+      - name: Install pytest
+        run: |
+          python3 -m pip install pytest
       - name: Run the test suite
         run: |
           cd tests && pytest -v

Diff for: .github/workflows/test_windows.yaml

@@ -13,12 +13,12 @@ jobs:
         with:
           python-version: 3.10.11
 
-      - name: Install pytest
-        run: |
-          python3 -m pip install pytest
       - name: Install kss locally
         run: |
           pip3 install -e .
+      - name: Install pytest
+        run: |
+          python3 -m pip install pytest
       - name: Run the test suite
         run: |
           cd tests && pytest -v

Diff for: kss/_modules/augmentation/augment.py

@@ -1,7 +1,6 @@
 from functools import partial
 from typing import Union, List, Tuple
 
-from kss._modules.spacing.correct_spacing import correct_spacing
 from kss._modules.augmentation.replacement import SynonymReplacement
 from kss._modules.augmentation.utils import correct_josa
 from kss._utils.logger import highlight_diffs, logger
@@ -12,7 +11,6 @@
 def augment(
     text: Union[str, List[str], Tuple[str]],
     replacement_ratio: float = 0.3,
-    space_normalization: bool = True,
     josa_normalization: bool = True,
     num_workers: Union[int, str] = "auto",
     backend: str = "auto",
@@ -48,7 +46,6 @@ def augment(
         return text
 
     replacement_ratio = _check_type(replacement_ratio, "replacement_ratio", float)
-    space_normalization = _check_type(space_normalization, "space_normalization", bool)
     josa_normalization = _check_type(josa_normalization, "josa_normalization", bool)
     verbose = _check_type(verbose, "verbose", bool)
     num_workers = _check_num_workers(text, num_workers)
@@ -65,7 +62,6 @@ def augment(
         func=partial(
             _augment,
             replacement_ratio=replacement_ratio,
-            space_normalization=space_normalization,
             josa_normalization=josa_normalization,
             backend=backend,
             verbose=verbose,
@@ -78,7 +74,6 @@ def augment(
 def _augment(
     text: str,
     replacement_ratio: float = 0.3,
-    space_normalization: bool = True,
     josa_normalization: bool = True,
     backend: str = "auto",
     verbose: bool = False,
@@ -90,9 +85,6 @@ def _augment(
     if josa_normalization:
         text = correct_josa(text)
 
-    if space_normalization:
-        text = correct_spacing(text)
-
     if verbose:
         print()
         print(highlight_diffs(orig_text, text).replace("\n", "\\n"))

Diff for: tests/test_augmentation.py

@@ -5,8 +5,7 @@ def test_augment():
     augment = Kss("augment")
     input_text = """앞서 지난해 11월, 보이저 1호는 명령을 수신하고 수행하는 데엔 문제가 없었지만 통신 장치에 문제가 생겨 과학·엔지니어링 데이터가 지구로 전송되지 않았던 바 있다. 당시 그들은 컴퓨터 시스템을 재시작하고 문제의 근본적인 원인을 파악하기 위해 명령을 보내려고 시도했고, 이달 1일 '포크'라는 명령을 보냈다."""
     output = augment(input_text)
-    assert output == """앞서 지난해 11월, 보이저 1호는 명령을 수신하고 시행하는 데엔 문제가 없었지만 송신 장비에 문제가 생겨 과학·엔지니어링 데이터가 지구로 전송되지 않았던 바 있다. 당시 그들은 컴퓨터 시스템을 재시작하고 문제의 근본적인 원인을 파악하기 위해 명령을 보내려고 시도했고, 이달 1일'포크'라는 명령을 보냈다."""
-
+    assert output == "앞서 지난해 11월, 보이저 1호는 명령을 수신하고 시행하는 데엔 문제가 없었지만 송신 장비에 문제가 생겨 과학·엔지니어링 데이터가 지구로 전송되지 않았던 바 있다. 당시 그들은 컴퓨터 시스템을 재시작하고 문제의 근본적인 원인을 파악하기 위해 명령을 보내려고 시도했고, 이달 1일 '포크'라는 명령을 보냈다."
 
 if __name__ == '__main__':
     test_augment()