Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример).
Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать?
В Django по умолчанию есть готовая функция slugify для таких случаев.
Но я её никогда не использую. Почему? Потому что её недостаточно!
Приведём пример
>>> from django.utils.text import slugify
>>> slugify('This is a Title')
'this-is-a-title'
Пока всё отлично
>>> slugify('This is a "Title!"')
'this-is-a-title'
Спец символы удалились, всё хорошо.
>>> slugify('Это заголовок статьи')
''
Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить
>>> slugify('Это заголовок статьи', allow_unicode=True)
'это-заголовок-статьи'
Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте.
Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою.
Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку:
🔸1. Исходный текст:
>>> text = 'Мой заголовок №10 😁!'
Взял специально посложней со специальными символами.
🔸2. Транслит
Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги.
from unidecode import unidecode
>>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山")
'N S (r) u P 1/4 Yue Shan'
Очень крутая библиотека, советую👍
В нашем случае получаем такое преобразование:
>>> text = unidecode(text)
>>> print(text)
'Moi zagolovok No. 10 !'
Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы.
А еще наш код уже поддерживает любой язык, будь то хинди или корейский.
🔸4. Фильтр символов
Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона.
>>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text)
>>> print(text)
'Moi_zagolovok_No_10_'
Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_".
🔸5. Slugify
Осталось удалить лишние символы по краям и сделать нижний регистр
>>> text = text.strip('_').lower()
>>> print(text)
'moi_zagolovok_no_10'
Получаем отличный slug! 😎
🌎 Полный код в виде функции.
______________
PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию.
#libs#tricks#django
『УВЕДОМЛЕНИЕ! 12 ТОМ! ОРИГИНАЛ』
Ура ура!!! Наконец стартовал 12 том маньхуа "Глобальный экзамен", да еще и с такой шикарной обложкой!! 🤝
Пока что любуемся обложкой, остальное выложу чуть позже, прошу простить 😑
#frames
『УВЕДОМЛЕНИЕ! 12 ТОМ! ОРИГИНАЛ』
Ура ура!!! Наконец стартовал 12 том маньхуа "Глобальный экзамен", да еще и с такой шикарной обложкой!! 🤝
Пока что любуемся обложкой, остальное выложу чуть позже, прошу простить 😑
#frames
『 УВЕДОМЛЕНИЕ О ПЕРЕРЫВЕ 』
Уведомление: перерыва не будет🤝
11 том, несмотря на множество препятствий, наконец-то успешно завершен. Мы выражаем искреннюю благодарность всем читателям за ваше терпение, понимание и поддержку на протяжении всего этого времени!
Ранее, в связи с личными обстоятельствами, было решено привлечь многоуважаемых помощников. В этот промежуток времени мы пробовали различные варианты разделения обязанностей и притирались друг к другу. К тому же, сам том был особенно сложным по сценам и с огромным объемом работы, что привело к увеличению срока публикации. (К счастью, итоговая версия значительно улучшилась, за что я выражаю благодарность всем помощникам, участвовавшим в работе!)
В следующем томе появятся новые экзаменационные центры и сюжетные линии. Чтобы не заставлять вас ждать слишком долго, на этот раз перерыва не будет. 12 том выйдет примерно через месяц, после завершения работы над новой обложкой, иллюстрациями и главами.
Я с нетерпением жду арки герцога~ (В настоящее время мы погружены в увлеченную работу над дизайном персонажей!)
Ходят слухи, что во второй половине года будут проводиться коллаборации и выпускаться мерч, так что тоже можете ждать с нетерпением (маленький спойлер)
#frames
『УВЕДОМЛЕНИЕ ОТ КОМАНДЫ МАНЬХУА』
Сроки выхода глав маньхуа снова изменены. Теперь главы будут выходить по мере возможности, так как сложно рисовать будущие сцены 😢
В прошлом это вроде как окупилось — все помнят главы молодого мокрого Циня, так что не теряем веры в художников и верим в лучшее 🥰
#frames
『УВЕДОМЛЕНИЕ! 131 ГЛАВА. ОРИГИНАЛ』
Цинь Цзю просто пристально смотрит на Наблюдателя А
Тем временем Ю Хо смотрит на связанные руки экзаменующегося Цинь Цзю: *блять*
#frames
『УВЕДОМЛЕНИЕ! 131 ГЛАВА. ОРИГИНАЛ』
С днём 131 главы. Кошмар начинается 😴
Я ранее предупреждала, что не смогу сама нарезать красивых фреймов, так как уехала в отпуск. Поэтому покажем вам немного фреймов с тви, все они с аккаунта Jiuhuo married. Кто не покупает главы, можете глянуть там немножко больше спойлеров🤏
Чистые файлы выдам уже после приезда, тогда же возможно будет и перевод. Так как наш Наблюдатель 001 сдает диплом и экзамены, он тоже может задержаться 😵
#frames
『УВЕДОМЛЕНИЕ! 130 ГЛАВА. ОРИГИНАЛ』
Перевод ожидайте тогда, когда он будет готов, а я пошла дальше смеяться над этой сценой словно вижу ее в первый раз 🦐
И да, извините меня пожалуйста за неадекватность, потому что я становлюсь ненормальнойибешеной и не могу связать и трех слов, когда выходит новая глава.. Спасибо за понимание 🤓
#frames
『УВЕДОМЛЕНИЕ! 130 ГЛАВА. ОРИГИНАЛ』
Наблюдатель А даже не оглянулся. Он уже протянул руку к ручке двери, когда кто-то встал позади него:
- ... мне потребуется всего пара секунд, чтобы развязать верёвку.
Цинь Цзю неожиданно легонько провёл пальцами по шее Наблюдателя А:
- Воротничок твоей рубашки мокрый. Там идёт дождь?
Прикосновение одновременно освежало и опаляло. Рука Наблюдателя А лежала на ручке двери, но он так и не повернул её, лишь слегка прищурил глаза. Неожиданно для себя он ответил:
- Нет. Там идёт снег.
#frames