Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример).
Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать?
В Django по умолчанию есть готовая функция slugify для таких случаев.
Но я её никогда не использую. Почему? Потому что её недостаточно!
Приведём пример
>>> from django.utils.text import slugify
>>> slugify('This is a Title')
'this-is-a-title'
Пока всё отлично
>>> slugify('This is a "Title!"')
'this-is-a-title'
Спец символы удалились, всё хорошо.
>>> slugify('Это заголовок статьи')
''
Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить
>>> slugify('Это заголовок статьи', allow_unicode=True)
'это-заголовок-статьи'
Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте.
Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою.
Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку:
🔸1. Исходный текст:
>>> text = 'Мой заголовок №10 😁!'
Взял специально посложней со специальными символами.
🔸2. Транслит
Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги.
from unidecode import unidecode
>>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山")
'N S (r) u P 1/4 Yue Shan'
Очень крутая библиотека, советую👍
В нашем случае получаем такое преобразование:
>>> text = unidecode(text)
>>> print(text)
'Moi zagolovok No. 10 !'
Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы.
А еще наш код уже поддерживает любой язык, будь то хинди или корейский.
🔸4. Фильтр символов
Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона.
>>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text)
>>> print(text)
'Moi_zagolovok_No_10_'
Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_".
🔸5. Slugify
Осталось удалить лишние символы по краям и сделать нижний регистр
>>> text = text.strip('_').lower()
>>> print(text)
'moi_zagolovok_no_10'
Получаем отличный slug! 😎
🌎 Полный код в виде функции.
______________
PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию.
#libs#tricks#django
This Monday, February 24, will mark the fourth year of the ruthless and treacherous war...
On this day we invite you to an evening of remembrance - in memory of those who were taken and maimed by this war, an evening in support of those who helps to preserve the future of Ukraine from the barbarism brought by Kremlin.
This evening we will watch the Ukrainian film “Carol of the bells”: about preserving life, dignity and love, in times of great trials, brought by war and occupation.
To make our place as welcoming as always, evening will feature our homemade dishes - borscht, salo, pancakes, mead and tea with desserts from the volunteers of @istanbul_for_ukraine
We will be waiting for you on February 24, from 17:00 to 21:00 in the Mephisto bookstore📍(entrance through the cafe, for entrance you will need to buy a cup of coffee☕️,movie starts at 18:30).
We are waiting for you with warm hugs 💙💛 remembering that our help is needed still ❤️
For sure
VSE BUDE UKRAINA 🇺🇦!!!
#StandWithUkraine
#Guarantees4UA
Цього понеділка, 24 лютого,пiде вже четвертий рік безжальної і віроломної війни...
І цього дня ми запрошуємо вас на вечір пам'яті - пам'яті тих, кого забрала і покалічила ця війна, вечір на підтримку тих, хто сьогодні допомагає зберігати майбутнє України від варварства, яке приніс кремль.
Цього вечора ми подивимося українську стрічку "Щедрик": про те, як не загубити себе, як зберегти життя, гідність і кохання, за часів великих випробувань, що їх несуть окупація і війна.
Щоб було, як завжди затишно та привітно, на вечорі будуть наші домашні страви - борщ, сало, млинці, медовуха та чай з десертами від волонтерів @istanbul_for_ukraine
Ми чекатимемо на вас 24 лютого, з 17:00 до 21:00у книжковій крамниці Мerhisto 📍 (вхід через кафе, за філіжанку кави ☕️, початок фільму о 18:30).
Чекаємо на вас із теплими обіймами 💙💛, пам'ятаємо, що наша допомога потрібна ❤️
Без сумніву,
Все буде Україна 🇺🇦!!!
#StandWithUkraine
#Guarantees4UA
В этот понедельник, 24 февраля, пойдёт уже четвертый год безжалостной и вероломной войны...
И в этот день мы приглашаем вас на вечер памяти - памяти тех кого забрала и покалечила эта война, вечер в поддержку тех, кто сегодня помогает сохранять будущее Украины от варварства которое принёс кремль.
В этот вечер мы посмотрим украинскую ленту "Щедрик": о том, как не потерять себя, как сохранить жизнь, достоинство и любовь, во времена больших испытаний, которые несут оккупация и война.
Чтобы было как всегда уютно и приветливо, на вечере будут наши домашние блюда - борщ, сало, блины, медовуха и чай с десертами от волонтеров @istanbul_for_ukraine
Мы будем ждать вас24 февраля, с 17:00 до 21:00 в книжном магазине Меphisto📍(вход через кафе, за чашку кофе☕️, начало фильма в 18:30).
Ждем вас с теплыми объятиями 💙💛, помним, что наша помощь нужна ❤️
Без сомнения,
Все будет Украина 🇺🇦!!!
#StandWithUkraine
#Guarantees4UA
При информационной поддержке Ковчег.Стамбул
22-24 февраля 2025 года проходит глобальная акция россиян «Защита Украины – защита мира»
Три года назад, 24 февраля 2022 года, путинская власть начала полномасштабную войну против Украины. В эту тяжёлую дату россияне выходят по всему миру, чтобы выразить неизменную солидарность с народом Украины. Мы напоминаем о том, что сейчас Украина сражается не только за свой суверенитет, но и за мирную демократическую Европу. Мы призываем лидеров западных государств не прекращать помощь Украине и предоставить стране необходимые гарантии безопасности.
В рамках всемирной акции проходит сбор средств на покупку портативных электростанций для больниц и школ Украины «Энергия для жизни».
Участники акции также поддержат международную кампанию за освобождение людей, насильно удерживаемых в результате вторжения России в Украину «Люди превыше всего», инициированную коалицией правозащитных организаций разных стран.
Присоединяйтесь к глобальной акции, где бы вы ни находились. Пожалуйста, заполните форму с информацией о вашем мероприятии.
#ThreeYearsofTerror#Guarantees4UA#People1st#EnergyForUkraine#WeStandWithUkraine#RussiansAgainstWar#FreeRussiansGlobal