This website works better with JavaScript.
首頁
探索
說明
登入
modal-soft
/
numerica
關註
1
收藏
0
複製
0
程式碼
問題管理
0
合併請求
0
版本發佈
0
Wiki
Activity
瀏覽代碼
Improve string sanitation for parsing
Ensure strings are properly sanitized before processing.
master
TheoryOfNekomata
1 年之前
父節點
bb5b7403f9
當前提交
bb15edd726
共有
1 個文件被更改
,包括
3 次插入
和
0 次删除
分割檢視
Diff Options
Show Stats
Download Patch File
Download Diff File
+3
-0
packages/core/src/systems/en-US/parse.ts
+ 3
- 0
packages/core/src/systems/en-US/parse.ts
查看文件
@@ -33,6 +33,9 @@ const FINAL_TOKEN = '' as const;
export const tokenize = (stringValue: string) => (
stringValue
.toLowerCase()
.trim()
.replace(/\s+/, ' ')
.replace(new RegExp(`${TENS_ONES_SEPARATOR}`, 'g'), ' ')
.split(' ')
.filter((maybeToken) => maybeToken.length > 0)
Write
Preview
Loading…
取消
儲存