Arhn - архитектура программирования

Как сгенерировать фантомную строку для строки Unicode, состоящую из пробельных символов одинаковой ширины?

Учитывая последовательность символов Unicode, как я могу получить строку пробельных символов одинаковой ширины (по крайней мере, в моноширинных шрифтах, которые отображают каждый символ с одинарной или двойной шириной символов из Базовая латиница)?

Примеры

Например, если строка `a b c' из пяти символов выглядит так:

a b c

('a', пробел, 'b', пробел, 'c'), я хотел бы получить строку, состоящую всего из пяти пробелов:

\u0020\u0020\u0020\u0020\u0020

и учитывая \u6b22\u8fce\u5149\u4e34, который выглядит как

欢迎光临

Я хочу получить строку, содержащую четыре идеографических пробела: \u3000\u3000\u3000\u3000.

Фон

Вот пример, когда это имеет значение: сообщения об ошибках в компиляторах для языков, поддерживающих Unicode. Предположим, что у нас есть некий гипотетический язык программирования PL (это может быть Python, Java, Scala, Ruby...), в котором есть строковые литералы и круглые скобки. Предположим, что это недопустимый фрагмент PL-кода, так как он содержит несовпадающую скобку:

"stringLiteral")

Если бы мы попытались его скомпилировать, компилятор PL мог бы выдать сообщение об ошибке следующего вида:

:1: error: ';' expected but ')' found.
   "stringLiteral")
                  ^

Обратите внимание на «фантомную строку», за которой следует '^' в последней строке: она точно указывает на непарную закрывающую скобку.

Если я попробую то же самое с персонажами CJK, вот что я получу:

:1: error: ';' expected but ')' found.
   "欢迎光临欢迎光临欢迎光临欢迎光临欢迎光临欢迎")
                           ^

Обратите внимание, что теперь «фантомная строка» в последней строке состоит из обычных латинских пробелов, а в консоли '^' выглядит так, как будто она находится где-то посередине строки символов CJK, а не в скобках.

Если я попробую то же самое с хорватскими персонажами:

:1: error: ';' expected but ')' found.
   "DŽDždžLJLjljNJNjnj")
              ^

указатель '^' также оказывается в, казалось бы, совершенно неправильной позиции, потому что эти специальные хорватские символы намного шире, чем обычные пробелы.

Все примеры дают одинаковые результаты на таких языках, как Python, Java, Scala, Ruby (просто скопируйте и вставьте " y⃝e҈s҉ ") или "临欢迎光临欢迎") в интерактивную оболочку и посмотрите, где заканчивается ^).

Попытка решения

Вот наивная попытка генерировать "фантомные" строки в Scala. Существует метод Character.isIdeographic. Я могу использовать его для определения метода phantom, сопоставляя каждый идеографический символ с \u3000, а все остальные символы с ' ' (обычный пробел).

def phantom(s: String) = 
  s.map(c => if (Character.isIdeographic(c)) '\u3000' else ' ')

В простых случаях работает. Например, если я определяю строку

val s = "foo欢迎光临欢迎bar光临欢baz"

а затем напечатайте строку, за которой следует вертикальная черта |, разрыв строки, а затем phantom(s), за которой следует вертикальная черта |,

println(s + "|\n" + phantom(s) + "|")

то я получаю:

foo欢迎光临欢迎bar光临欢baz|
                  |

и вертикальные полосы в конце струн идеально совпадают, потому что phantom(s) теперь

\u0020\u0020\u0020\u3000\u3000\u3000\u3000\u3000\u3000\u0020\u0020\u0020\u3000\u3000\u3000\u0020\u0020\u0020

то есть:

  • три обычных пробела, соответствующие «foo»
  • шесть идеографических пробелов, соответствующих части "欢迎光临欢迎"
  • затем снова три пробела, соответствующие «бару»
  • ...

и так далее.

Однако, если я попробую то же самое с хорватскими символами, я снова получу беспорядок:

DŽDždžLJLjljNJNjnj|
         |

(вертикальные полосы не совпадают).

Вопрос

Определяет ли Unicode какие-либо свойства, которые позволили бы мне генерировать надежные «фантомные» строки одинаковой ширины?


  • Фантом выбора слова был вдохновлен командами \vphantom и \hphantom в LaTeX. 02.09.2018
  • Вам приходится иметь дело с комбинированием символов? 02.09.2018
  • @curiousguy Я бы сказал да (или, скорее, y⃝e҈s҉ - кстати, допустимый строковый литерал Java). На самом деле я бы предпочел решение, которое работает одинаково для всех типов персонажей. Но я также был бы благодарен за частичные решения, которые несколько изящно деградируют - например. мой phantom выше, по крайней мере, пытается сделать что-то значимое с некоторыми символами CJK, это не оптимально, но это немного лучше, чем просто дублировать пробел string.length раза. 02.09.2018
  • ... и это не чисто академический вопрос: вывод ошибки довольно свежего компилятора Java для ошибки, которая возникает в строке String x = " y⃝e҈s҉ ";(, выглядит довольно сломанным: маленький символ ^, который должен указывать на несовпадающую скобку, находится на полностью неправильное положение: три пробела от того места, где оно должно быть. 02.09.2018
  • Несколько связанный, но не совсем ответ: 1 2. Учитывая, что существуют такие библиотеки, как эта, и автор утверждает, что не существует единого стандарта. и говорит о отобранных вручную корректировках, вполне может быть, что простого очевидного решения, которое работало бы везде, просто не существует. Обратите внимание, что меня не волнует фактическая длина: я просто хочу убедиться, что она одна и та же. 03.09.2018

Новые материалы

Коллекции публикаций по глубокому обучению
Последние пару месяцев я создавал коллекции последних академических публикаций по различным подполям глубокого обучения в моем блоге https://amundtveit.com - эта публикация дает обзор 25..

Представляем: Pepita
Фреймворк JavaScript с открытым исходным кодом Я знаю, что недостатка в фреймворках JavaScript нет. Но я просто не мог остановиться. Я хотел написать что-то сам, со своими собственными..

Советы по коду Laravel #2
1-) Найти // You can specify the columns you need // in when you use the find method on a model User::find(‘id’, [‘email’,’name’]); // You can increment or decrement // a field in..

Работа с временными рядами спутниковых изображений, часть 3 (аналитика данных)
Анализ временных рядов спутниковых изображений для данных наблюдений за большой Землей (arXiv) Автор: Рольф Симоэс , Жильберто Камара , Жильберто Кейрос , Фелипе Соуза , Педро Р. Андраде ,..

3 способа решить квадратное уравнение (3-й мой любимый) -
1. Методом факторизации — 2. Используя квадратичную формулу — 3. Заполнив квадрат — Давайте поймем это, решив это простое уравнение: Мы пытаемся сделать LHS,..

Создание VR-миров с A-Frame
Виртуальная реальность (и дополненная реальность) стали главными модными терминами в образовательных технологиях. С недорогими VR-гарнитурами, такими как Google Cardboard , и использованием..

Демистификация рекурсии
КОДЕКС Демистификация рекурсии Упрощенная концепция ошеломляющей О чем весь этот шум? Рекурсия, кажется, единственная тема, от которой у каждого начинающего студента-информатика..