Design: Юникод нормализация

Созданный на 30 янв. 2017 · 6Комментарии · Источник: WebAssembly/design

Разветвление от # 970: JS.md говорит о нормализации Unicode .

Простой пример из этого документа: мое имя "Жан-Франсуа Бастьен" можно нормализовать двумя способами:

Ç ↔ C + ◌̧

Это хорошая ошибка в Юникоде. При взаимодействии между JS и wasm было бы хорошо знать, чего ожидать от производителей и потребителей. Мы можем решить не нормализовать ситуацию, но мы должны сказать об этом .

Я вижу 4 способа обсуждения нормализации в JS.md:

Запретить / ошибка / игнорировать ненормализованные вводы.
Автоматически нормализовать входные данные wasm и сравнивать нормализованные значения JS.
Автоматически нормализовать входные данные wasm и ожидать, что пользователь вызовет нормализацию .
Ничего не нормализовать.

Если мы выберем 2. или 3. мы должны указать, какую форму нормализации мы ожидаем (потому что, конечно, существует несколько форм нормализации).

importexports

Источник

jfbastien

Самый полезный комментарий

Я думаю, что convertToJSString function Web.md # names уже указывает 4. Кажется, неплохо добавить поясняющий текст, чтобы сказать, что нормализации не происходит.

lukewagner 30 янв. 2017

👍4

Все 6 Комментарий

1, 2 и 3 кажется хорошим источником эзотерических ошибок в движках JS.

Я голосую 4.

RyanLamansky 30 янв. 2017

lukewagner 30 янв. 2017

👍4

Согласен с @lukewagner.

rossberg 31 янв. 2017

FWIW, CSS тоже не нормализуется.

tabatkins 4 февр. 2017

Да, ничто в веб-платформе не использует нормализацию Unicode, кроме string.normalize () в JavaScript и IDNA в URL-адресах. 4 определенно то, что вам здесь нужно.