add: deburr

Author: surunzi

DOC.md

@@ -2217,6 +2217,19 @@ d('doing lots of uninteresting work');
 d.enabled = false;
 ```
 
+## deburr 
+
+Convert Latin-1 Supplement and Latin Extended-A letters to basic Latin letters and remove combining diacritical marks.
+
+|Name  |Type  |Desc            |
+|------|------|----------------|
+|str   |string|String to deburr|
+|return|string|Deburred string |
+
+```javascript
+deburr('déjà vu'); // -> 'deja vu'
+```
+
 ## decodeUriComponent 
 
 Better decodeURIComponent that does not throw if input is invalid.

DOC_CN.md

@@ -2212,6 +2212,19 @@ d('doing lots of uninteresting work');
 d.enabled = false;
 ```
 
+## deburr
+
+转换拉丁语-1补充字母和拉丁语扩展字母-A为基本拉丁字母，并且去除组合变音标记。
+
+|参数名|类型|说明|
+|-----|----|---|
+|str|string|要处理的字符串|
+|返回值|string|目标字符串|
+
+```javascript
+deburr('déjà vu'); // -> 'deja vu'
+```
+
 ## decodeUriComponent
 
 类似 decodeURIComponent 函数，只是输入不合法时不抛出错误并尽可能地对其进行解码。

index.json

@@ -1399,6 +1399,19 @@
         "test": [],
         "demo": true
     },
+    "deburr": {
+        "description": "Convert Latin-1 Supplement and Latin Extended-A letters to basic Latin letters and remove combining diacritical marks.",
+        "dependencies": [],
+        "env": [
+            "node",
+            "browser",
+            "miniprogram"
+        ],
+        "test": [
+            "node",
+            "browser"
+        ]
+    },
     "decodeUriComponent": {
         "description": "Better decodeURIComponent that does not throw if input is invalid.",
         "dependencies": [

src/d/dateFormat.js

@@ -123,10 +123,10 @@ exports = function(date, mask, utc, gmt) {
         Z: gmt
             ? 'GMT'
             : utc
-                ? 'UTC'
-                : (toStr(date).match(regTimezone) || [''])
-                      .pop()
-                      .replace(regTimezoneClip, ''),
+            ? 'UTC'
+            : (toStr(date).match(regTimezone) || [''])
+                  .pop()
+                  .replace(regTimezoneClip, ''),
         o:
             (o > 0 ? '-' : '+') +
             padZero(Math.floor(Math.abs(o) / 60) * 100 + (Math.abs(o) % 60), 4),

src/d/deburr.i18n.md

@@ -0,0 +1,8 @@
+## CN
+
+转换拉丁语-1补充字母和拉丁语扩展字母-A为基本拉丁字母，并且去除组合变音标记。
+
+|参数名|类型|说明|
+|-----|----|---|
+|str|string|要处理的字符串|
+|返回值|string|目标字符串|

src/d/deburr.js

@@ -0,0 +1,89 @@
+/* Convert Latin-1 Supplement and Latin Extended-A letters to basic Latin letters and remove combining diacritical marks.
+ *
+ * |Name  |Type  |Desc            |
+ * |------|------|----------------|
+ * |str   |string|String to deburr|
+ * |return|string|Deburred string |
+ */
+
+/* example
+ * deburr('déjà vu'); // -> 'deja vu'
+ */
+
+/* module
+ * env: all
+ * test: all
+ */
+
+/* typescript
+ * export declare function deburr(str: string): string;
+ */
+
+exports = function(str) {
+    return str
+        .replace(regLatin, key => deburredLetters[key])
+        .replace(regComboMark, '');
+};
+
+// https://github.com/lodash/lodash/blob/es/deburr.js
+const regComboMark = /[\u0300-\u036f\ufe20-\ufe2f\u20d0-\u20ff]/g;
+const regLatin = /[\xc0-\xd6\xd8-\xf6\xf8-\xff\u0100-\u017f]/g;
+
+// https://github.com/lodash/lodash/blob/es/_deburrLetter.js
+// prettier-ignore
+const deburredLetters = {
+    // Latin-1 Supplement block.
+    '\xc0': 'A',  '\xc1': 'A', '\xc2': 'A', '\xc3': 'A', '\xc4': 'A', '\xc5': 'A',
+    '\xe0': 'a',  '\xe1': 'a', '\xe2': 'a', '\xe3': 'a', '\xe4': 'a', '\xe5': 'a',
+    '\xc7': 'C',  '\xe7': 'c',
+    '\xd0': 'D',  '\xf0': 'd',
+    '\xc8': 'E',  '\xc9': 'E', '\xca': 'E', '\xcb': 'E',
+    '\xe8': 'e',  '\xe9': 'e', '\xea': 'e', '\xeb': 'e',
+    '\xcc': 'I',  '\xcd': 'I', '\xce': 'I', '\xcf': 'I',
+    '\xec': 'i',  '\xed': 'i', '\xee': 'i', '\xef': 'i',
+    '\xd1': 'N',  '\xf1': 'n',
+    '\xd2': 'O',  '\xd3': 'O', '\xd4': 'O', '\xd5': 'O', '\xd6': 'O', '\xd8': 'O',
+    '\xf2': 'o',  '\xf3': 'o', '\xf4': 'o', '\xf5': 'o', '\xf6': 'o', '\xf8': 'o',
+    '\xd9': 'U',  '\xda': 'U', '\xdb': 'U', '\xdc': 'U',
+    '\xf9': 'u',  '\xfa': 'u', '\xfb': 'u', '\xfc': 'u',
+    '\xdd': 'Y',  '\xfd': 'y', '\xff': 'y',
+    '\xc6': 'Ae', '\xe6': 'ae',
+    '\xde': 'Th', '\xfe': 'th',
+    '\xdf': 'ss',
+    // Latin Extended-A block.
+    '\u0100': 'A',  '\u0102': 'A', '\u0104': 'A',
+    '\u0101': 'a',  '\u0103': 'a', '\u0105': 'a',
+    '\u0106': 'C',  '\u0108': 'C', '\u010a': 'C', '\u010c': 'C',
+    '\u0107': 'c',  '\u0109': 'c', '\u010b': 'c', '\u010d': 'c',
+    '\u010e': 'D',  '\u0110': 'D', '\u010f': 'd', '\u0111': 'd',
+    '\u0112': 'E',  '\u0114': 'E', '\u0116': 'E', '\u0118': 'E', '\u011a': 'E',
+    '\u0113': 'e',  '\u0115': 'e', '\u0117': 'e', '\u0119': 'e', '\u011b': 'e',
+    '\u011c': 'G',  '\u011e': 'G', '\u0120': 'G', '\u0122': 'G',
+    '\u011d': 'g',  '\u011f': 'g', '\u0121': 'g', '\u0123': 'g',
+    '\u0124': 'H',  '\u0126': 'H', '\u0125': 'h', '\u0127': 'h',
+    '\u0128': 'I',  '\u012a': 'I', '\u012c': 'I', '\u012e': 'I', '\u0130': 'I',
+    '\u0129': 'i',  '\u012b': 'i', '\u012d': 'i', '\u012f': 'i', '\u0131': 'i',
+    '\u0134': 'J',  '\u0135': 'j',
+    '\u0136': 'K',  '\u0137': 'k', '\u0138': 'k',
+    '\u0139': 'L',  '\u013b': 'L', '\u013d': 'L', '\u013f': 'L', '\u0141': 'L',
+    '\u013a': 'l',  '\u013c': 'l', '\u013e': 'l', '\u0140': 'l', '\u0142': 'l',
+    '\u0143': 'N',  '\u0145': 'N', '\u0147': 'N', '\u014a': 'N',
+    '\u0144': 'n',  '\u0146': 'n', '\u0148': 'n', '\u014b': 'n',
+    '\u014c': 'O',  '\u014e': 'O', '\u0150': 'O',
+    '\u014d': 'o',  '\u014f': 'o', '\u0151': 'o',
+    '\u0154': 'R',  '\u0156': 'R', '\u0158': 'R',
+    '\u0155': 'r',  '\u0157': 'r', '\u0159': 'r',
+    '\u015a': 'S',  '\u015c': 'S', '\u015e': 'S', '\u0160': 'S',
+    '\u015b': 's',  '\u015d': 's', '\u015f': 's', '\u0161': 's',
+    '\u0162': 'T',  '\u0164': 'T', '\u0166': 'T',
+    '\u0163': 't',  '\u0165': 't', '\u0167': 't',
+    '\u0168': 'U',  '\u016a': 'U', '\u016c': 'U', '\u016e': 'U', '\u0170': 'U', '\u0172': 'U',
+    '\u0169': 'u',  '\u016b': 'u', '\u016d': 'u', '\u016f': 'u', '\u0171': 'u', '\u0173': 'u',
+    '\u0174': 'W',  '\u0175': 'w',
+    '\u0176': 'Y',  '\u0177': 'y', '\u0178': 'Y',
+    '\u0179': 'Z',  '\u017b': 'Z', '\u017d': 'Z',
+    '\u017a': 'z',  '\u017c': 'z', '\u017e': 'z',
+    '\u0132': 'IJ', '\u0133': 'ij',
+    '\u0152': 'Oe', '\u0153': 'oe',
+    '\u0149': "'n", '\u017f': 's'
+};

src/d/deburr.test.js

@@ -0,0 +1,3 @@
+it('basic', () => {
+    expect(deburr('déjà vu')).to.equal('deja vu');
+});