Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример).
Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать?
В Django по умолчанию есть готовая функция slugify для таких случаев.
Но я её никогда не использую. Почему? Потому что её недостаточно!
Приведём пример
>>> from django.utils.text import slugify
>>> slugify('This is a Title')
'this-is-a-title'
Пока всё отлично
>>> slugify('This is a "Title!"')
'this-is-a-title'
Спец символы удалились, всё хорошо.
>>> slugify('Это заголовок статьи')
''
Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить
>>> slugify('Это заголовок статьи', allow_unicode=True)
'это-заголовок-статьи'
Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте.
Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою.
Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку:
🔸1. Исходный текст:
>>> text = 'Мой заголовок №10 😁!'
Взял специально посложней со специальными символами.
🔸2. Транслит
Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги.
from unidecode import unidecode
>>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山")
'N S (r) u P 1/4 Yue Shan'
Очень крутая библиотека, советую👍
В нашем случае получаем такое преобразование:
>>> text = unidecode(text)
>>> print(text)
'Moi zagolovok No. 10 !'
Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы.
А еще наш код уже поддерживает любой язык, будь то хинди или корейский.
🔸4. Фильтр символов
Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона.
>>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text)
>>> print(text)
'Moi_zagolovok_No_10_'
Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_".
🔸5. Slugify
Осталось удалить лишние символы по краям и сделать нижний регистр
>>> text = text.strip('_').lower()
>>> print(text)
'moi_zagolovok_no_10'
Получаем отличный slug! 😎
🌎 Полный код в виде функции.
______________
PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию.
#libs#tricks#django
#muzokara
Sun’iy intellekt yordamida nasoslar diagnostika qilinadi
Mahalliy ishlab chiqaruvchi tomonidan nasos agregatlarini real vaqt rejimida diagnostika qilish, holatini baholash va xarajatlarni optimallashtirish imkonini beruvchi SKION raqamli platformasi taqdimotini o‘tkazildi. Ushbu yechim to‘liq mahalliy IT-ekotizim asosida ishlab chiqilgan.
👉Batafsil
👇Bizni kuzating:
🌐web-sayt | 📷instagram | 👉telegram | ▶️youtube | 💬facebook
Анқара шаҳрида Ўзбекистон Республикаси Президенти Шавкат Мирзиёев ва Туркия Республикаси Президенти Режеп Таййип Эрдоғаннинг тор доирадаги учрашуви бўлиб ўтди.
—
В городе Анкаре состоялась встреча Президента Республики Узбекистан Шавката Мирзиёева и Президента Турецкой Республики Реджепа Тайипа Эрдогана в узком формате.
#Mirziyoyev#tashrif#Turkiya#muzokara
Prezident.uz|Facebook|Instagram|YouTube|X
Ўзбекистон Республикаси Президенти Шавкат Мирзиёев ва Россия Федерацияси Президенти Владимир Путин музокараларни расмий делегациялар иштирокида кенгайтирилган таркибда давом эттирдилар.
—
Президент Республики Узбекистан Шавкат Мирзиёев
и Президент Российской Федерации Владимир Путин
продолжили переговоры в расширенном составе с участием официальных делегаций двух стран.
#Mirziyoyev#tashrif#Rossiya#muzokara
Prezident.uz|Facebook|Instagram|YouTube|X
Кўксарой қароргоҳида Ўзбекистон Республикаси Президенти Шавкат Мирзиёев ва Россия Федерацияси Президенти Владимир Путиннинг тор доирадаги учрашуви бўлиб ўтди.
—
В резиденции «Куксарой» состоялась встреча Президента Республики Узбекистан Шавката Мирзиёева и Президента Российской Федерации Владимира Путина в узком формате.
#Mirziyoyev#tashrif#Rossiya#muzokara
Prezident.uz|Facebook|Instagram|YouTube|X
Buxoro shahrida Oʻzbekiston Respublikasi Prezidenti Shavkat Mirziyoyev va Qozogʻiston Respublikasi Prezidenti Qasim-Jomart Toqayevning uchrashuvi boʻlib oʻtdi.
—
В городе Бухаре состоялась встреча Президента Республики Узбекистан Шавката Мирзиёева с Президентом Республики Казахстан Касым-Жомартом Токаевым.
#Mirziyoyev#tashrif#Qozogiston#muzokara
Prezident.uz|Facebook|Instagram|YouTube|X
Кремлда Ўзбекистон Республикаси Президенти Шавкат Мирзиёев ва Россия Федерацияси Президенти Владимир Путиннинг тор доирадаги учрашуви бўлиб ўтди.
—
В Кремле состоялась встреча Президента Республики Узбекистан Шавката Мирзиёева и Президента Российской Федерации Владимира Путина в узком формате.
#Mirziyoyev#Rossiya#muzokara
Prezident.uz|Facebook|Instagram|YouTube|Twitter
Buxoro shahrida Oʻzbekiston Respublikasi Prezidenti Shavkat Mirziyoyev va Qozogʻiston Respublikasi Prezidenti Qasim-Jomart Toqayevning uchrashuvi boʻlib oʻtdi.
—
В городе Бухаре состоялась встреча Президента Республики Узбекистан Шавката Мирзиёева с Президентом Республики Казахстан Касым-Жомартом Токаевым.
#Mirziyoyev#tashrif#Qozogiston#muzokara
Prezident.uz|Facebook|Instagram|YouTube|X
Кремлда Ўзбекистон Республикаси Президенти Шавкат Мирзиёев ва Россия Федерацияси Президенти Владимир Путиннинг тор доирадаги учрашуви бўлиб ўтди.
—
В Кремле состоялась встреча Президента Республики Узбекистан Шавката Мирзиёева и Президента Российской Федерации Владимира Путина в узком формате.
#Mirziyoyev#Rossiya#muzokara
Prezident.uz|Facebook|Instagram|YouTube|Twitter
Oʻzbekiston Respublikasi Prezidenti Shavkat Mirziyoyev va Turkiya Respublikasi Prezidenti Rejep Tayyip Erdogʻanning tor doiradagi uchrashuvi boʻlib oʻtdi.
—
Состоялась встреча Президента Республики Узбекистан Шавката Мирзиёева и Президента Турецкой Республики Реджепа Тайипа Эрдогана в узком формате.
#Mirziyoyev#tashrif#Turkiya#muzokara
Prezident.uz|Facebook|Instagram|YouTube|X
Buxoro shahrida Oʻzbekiston Respublikasi Prezidenti Shavkat Mirziyoyev va Qozogʻiston Respublikasi Prezidenti Qasim-Jomart Toqayevning uchrashuvi boʻlib oʻtdi.
—
В городе Бухаре состоялась встреча Президента Республики Узбекистан Шавката Мирзиёева с Президентом Республики Казахстан Касым-Жомартом Токаевым.
#Mirziyoyev#tashrif#Qozogiston#muzokara
Prezident.uz|Facebook|Instagram|YouTube|X
Buxoro shahrida Oʻzbekiston Respublikasi Prezidenti Shavkat Mirziyoyev va Qozogʻiston Respublikasi Prezidenti Qasim-Jomart Toqayevning uchrashuvi boʻlib oʻtdi.
—
В городе Бухаре состоялась встреча Президента Республики Узбекистан Шавката Мирзиёева с Президентом Республики Казахстан Касым-Жомартом Токаевым.
#Mirziyoyev#tashrif#Qozogiston#muzokara
Prezident.uz|Facebook|Instagram|YouTube|X
O‘zbekiston Respublikasi Prezidenti Shavkat Mirziyoyev va Turkmaniston Prezidenti Serdar Berdimuhamedovning muzokaralari kengaytirilgan tarkibda ikki mamlakat rasmiy delegatsiyalari ishtirokida davom etdi.
—
Переговоры Президента Республики Узбекистан Шавката Мирзиёева и Президента Туркменистана Сердара Бердымухамедова продолжились в расширенном формате с участием официальных делегаций двух стран.
#Mirziyoyev#tashrif#Turkmaniston#muzokara
Prezident.uz|Facebook|Instagram|YouTube|X