Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример).
Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать?
В Django по умолчанию есть готовая функция slugify для таких случаев.
Но я её никогда не использую. Почему? Потому что её недостаточно!
Приведём пример
>>> from django.utils.text import slugify
>>> slugify('This is a Title')
'this-is-a-title'
Пока всё отлично
>>> slugify('This is a "Title!"')
'this-is-a-title'
Спец символы удалились, всё хорошо.
>>> slugify('Это заголовок статьи')
''
Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить
>>> slugify('Это заголовок статьи', allow_unicode=True)
'это-заголовок-статьи'
Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте.
Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою.
Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку:
🔸1. Исходный текст:
>>> text = 'Мой заголовок №10 😁!'
Взял специально посложней со специальными символами.
🔸2. Транслит
Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги.
from unidecode import unidecode
>>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山")
'N S (r) u P 1/4 Yue Shan'
Очень крутая библиотека, советую👍
В нашем случае получаем такое преобразование:
>>> text = unidecode(text)
>>> print(text)
'Moi zagolovok No. 10 !'
Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы.
А еще наш код уже поддерживает любой язык, будь то хинди или корейский.
🔸4. Фильтр символов
Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона.
>>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text)
>>> print(text)
'Moi_zagolovok_No_10_'
Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_".
🔸5. Slugify
Осталось удалить лишние символы по краям и сделать нижний регистр
>>> text = text.strip('_').lower()
>>> print(text)
'moi_zagolovok_no_10'
Получаем отличный slug! 😎
🌎 Полный код в виде функции.
______________
PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию.
#libs#tricks#django
Ўзбекистон Республикаси Президенти Шавкат Мирзиёев ШҲТ Давлат раҳбарлари кенгашининг навбатдаги мажлиси ва "ШҲТ плюс" форматидаги учрашувда иштирок этиш учун Остона шаҳрига келди. Давлатимиз раҳбарини Қозоғистон Бош вазири Олжас Бектенов кутиб олди.
—
Президент Республики Узбекистан Шавкат Мирзиёев прибыл в Астану для участия в очередном заседании Совета глав государств ШОС и встрече в формате «ШОС плюс». Главу нашего государства встретил Премьер-министр Казахстана Олжас Бектенов.
#Mirziyoyev#sammit#ShHT
Prezident.uz|Facebook|Instagram|YouTube|X
Ўзбекистон Республикаси Президенти Шавкат Мирзиёев Қозоғистон Республикаси Президенти Қасим-Жомарт Тоқаевнинг таклифига биноан амалий ташриф билан Остона шаҳрига жўнаб кетди.
—
Президент Республики Узбекистан Шавкат Мирзиёев по приглашению Президента Республики Казахстан Касым-Жомарта Токаева отбыл с рабочим визитом в город Астану.
#Mirziyoyev#sammit#ShHT
Prezident.uz|Facebook|Instagram|YouTube|X
Ўзбекистон Республикаси Президенти Шавкат Мирзиёев Хитой Халқ Республикаси Раиси Си Цзиньпиннинг таклифига биноан 30 август - 3 сентябрь кунлари расмий ташриф билан ушбу мамлакатда бўлади. Давлатимиз раҳбари Шанхай ҳамкорлик ташкилоти Давлат раҳбарлари кенгаши мажлиси ва "ШҲТ плюс" форматидаги саммитда иштирок этади.
—
Президент Республики Узбекистан Шавкат Мирзиёев по приглашению Председателя Китайской Народной Республики Си Цзиньпина 30 августа – 3 сентября посетит эту страну с официальным визитом. Глава нашего государства примет участие в заседании Совета глав государств Шанхайской организации сотрудничества и саммите в формате «ШОС плюс».
#Mirziyoyev#tashrif#Xitoy#ShHT
Prezident.uz|Facebook|Instagram|YouTube|X
Ўзбекистон Республикаси Президенти Шавкат Мирзиёев Тяньцзинь шаҳрида “ШҲТ плюс” форматидаги учрашувда нутқ сўзлади.
—
Президент Республики Узбекистан Шавкат Мирзиёев выступил на встрече в формате «ШОС плюс» в городе Тяньцзине.
#Mirziyoyev#sammit#ShHT#hamkorlik
Prezident.uz|Facebook|Instagram|YouTube|X
Ўзбекистон Республикаси Президенти Шавкат Мирзиёев Тяньцзинь шаҳрида Шанхай ҳамкорлик ташкилоти Давлат раҳбарлари кенгашининг навбатдаги мажлисида иштирок этди.
—
Президент Республики Узбекистан Шавкат Мирзиёев принял участие в очередном заседании Совета глав государств-членов ШОС в городе Тяньцзине.
#Mirziyoyev#sammit#ShHT#hamkorlik
Prezident.uz|Facebook|Instagram|YouTube|X
Ўзбекистон Республикаси Президенти Шавкат Мирзиёев Тяньцзинь шаҳрида “ШҲТ плюс” форматидаги учрашувда нутқ сўзлади.
—
Президент Республики Узбекистан Шавкат Мирзиёев выступил на встрече в формате «ШОС плюс» в городе Тяньцзине.
#Mirziyoyev#sammit#ShHT#hamkorlik
Prezident.uz|Facebook|Instagram|YouTube|X
Ўзбекистон Республикаси Президенти Шавкат Мирзиёев мамлакатимизда ташриф билан бўлиб турган Шанхай ҳамкорлик ташкилоти бош котиби Нурлан Ермекбаевни қабул қилди.
—
Президент Республики Узбекистан Шавкат Мирзиёев принял генерального секретаря Шанхайской организации сотрудничества Нурлана Ермекбаева, пребывающего в нашей стране с визитом.
#Mirziyoyev#qabul#ShHT#hamkorlik
Prezident.uz|Facebook|Instagram|YouTube|X
Ўзбекистон Республикаси Президенти Шавкат Мирзиёев Шанхай ҳамкорлик ташкилотининг Президент сайловига тайёргарлик кўриш ва уни ўтказишни кузатиш бўйича миссияси бошчилигида мамлакатимизда бўлиб турган ШҲТ бош котиби Чжан Минни қабул қилди.
—
Президент Республики Узбекистан Шавкат Мирзиёев принял генерального секретаря Шанхайской организации сотрудничества Чжана Мина, пребывающего в нашей стране во главе миссии ШОС по наблюдению за ходом подготовки и проведения президентских выборов.
#Mirziyoyev#qabul#ShHT#hamkorlik
Prezident.uz|Facebook|Instagram|YouTube|Twitter
Ўзбекистон Республикаси Президенти Шавкат Мирзиёев Хитой Халқ Республикаси Раиси Си Цзиньпиннинг таклифига биноан 30 август - 3 сентябрь кунлари расмий ташриф билан ушбу мамлакатда бўлади. Давлатимиз раҳбари Шанхай ҳамкорлик ташкилоти Давлат раҳбарлари кенгаши мажлиси ва "ШҲТ плюс" форматидаги саммитда иштирок этади.
—
Президент Республики Узбекистан Шавкат Мирзиёев по приглашению Председателя Китайской Народной Республики Си Цзиньпина 30 августа – 3 сентября посетит эту страну с официальным визитом. Глава нашего государства примет участие в заседании Совета глав государств Шанхайской организации сотрудничества и саммите в формате «ШОС плюс».
#Mirziyoyev#tashrif#Xitoy#ShHT
Prezident.uz|Facebook|Instagram|YouTube|X
Ўзбекистон Республикаси Президенти Шавкат Мирзиёев Тяньцзинь шаҳрида “ШҲТ плюс” форматидаги учрашувда нутқ сўзлади.
—
Президент Республики Узбекистан Шавкат Мирзиёев выступил на встрече в формате «ШОС плюс» в городе Тяньцзине.
#Mirziyoyev#sammit#ShHT#hamkorlik
Prezident.uz|Facebook|Instagram|YouTube|X
O‘zbekiston Prezidenti Shavkat Mirziyoyev Xitoyga ShHT sammitida ishtirok etish va XXR raisi Si Szinpin bilan muzokaralar o‘tkazish uchun tashrif buyurdi. Dasturda Tyanszindagi yig‘ilishlar, Pekindagi rasmiy uchrashuvlar va G‘alabaning 80 yilligiga bag‘ishlangan tadbirlar bor.
https://yep.uz/uz/2025/08/shavkat-mirziyoyev-xitoyga-shht-si-szinpin/
#O‘zbekiston #Mirziyoyev#ShHT#Xitoy#SiSzinpin#Tyanszin#Pekin#G‘alaba80