Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример).
Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать?
В Django по умолчанию есть готовая функция slugify для таких случаев.
Но я её никогда не использую. Почему? Потому что её недостаточно!
Приведём пример
>>> from django.utils.text import slugify
>>> slugify('This is a Title')
'this-is-a-title'
Пока всё отлично
>>> slugify('This is a "Title!"')
'this-is-a-title'
Спец символы удалились, всё хорошо.
>>> slugify('Это заголовок статьи')
''
Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить
>>> slugify('Это заголовок статьи', allow_unicode=True)
'это-заголовок-статьи'
Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте.
Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою.
Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку:
🔸1. Исходный текст:
>>> text = 'Мой заголовок №10 😁!'
Взял специально посложней со специальными символами.
🔸2. Транслит
Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги.
from unidecode import unidecode
>>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山")
'N S (r) u P 1/4 Yue Shan'
Очень крутая библиотека, советую👍
В нашем случае получаем такое преобразование:
>>> text = unidecode(text)
>>> print(text)
'Moi zagolovok No. 10 !'
Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы.
А еще наш код уже поддерживает любой язык, будь то хинди или корейский.
🔸4. Фильтр символов
Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона.
>>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text)
>>> print(text)
'Moi_zagolovok_No_10_'
Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_".
🔸5. Slugify
Осталось удалить лишние символы по краям и сделать нижний регистр
>>> text = text.strip('_').lower()
>>> print(text)
'moi_zagolovok_no_10'
Получаем отличный slug! 😎
🌎 Полный код в виде функции.
______________
PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию.
#libs#tricks#django
#members
👍Oktyabr va Noyabr oylarida 112 ta eksportga yo‘naltirilgan kompaniya IT Park a’zosi bo‘ldi, ulardan 59 tasi AQSh, Kanada, Buyuk Britaniya, Yaponiya, Xitoy, Shveytsariya va boshqa davlatlardan xorijiy kapitalli kompaniyalar.
📈Asosiy faktlar:
- Yangi eksportchilar asosan IT va biznes xizmatlarini taqdim etishga e'tibor qaratmoqda.
- Dastlabki yil ichida 2,500+ yangi ish o‘rni yaratiladi, jumladan mintaqaviy hududlarda – mahalliy mutaxassislar yetakchi xalqaro kompaniyalarga qo‘shilish va global bozorda ishlash imkoniyatiga ega bo‘ladi.
- Asosiy eksport bozorlari: AQSh, Kanada, Yevropa va Osiyo.
🌍 Xalqaro muvaffaqiyat namunalari:
KARAM (Portugaliya-Vengriya): global bozorlarda moliyaviy rejalashtirish.
BEUKITCH EV (Malayziya): AQSh va Malayziya uchun dasturiy ta'minot ishlab chiqish.
INVERSON OPERATIONS (Shveytsariya): AQSh va Shveytsariya uchun IT-konsalting va kiberxavfsizlik.
UNLOCKWARE IT SERVICES (Kanada): Qatar, Saudiya Arabistoni, Kanada va AQShga xizmat eksporti.
FUJIYAMA LOGISTICS (Yaponiya): ta’minot zanjiri boshqaruv tizimlarini qo‘llab-quvvatlash bo‘yicha mahalliy mutaxassislar.
Umumiy prognoz qilingan eksport hajmi: birinchi yil davomida 70 million AQSh dollari!
🇺🇿O‘zbekiston IT sohasidagi qudratli davlat sifatida global e’tiborni jalb etishda davom etmoqda va o‘sish hamda hamkorlik uchun yangi imkoniyatlar yaratmoqda.
🕸 Batafsil ma'lumotni bizning veb-saytimizda o‘qing
______
👍During October and November, 112 export-oriented companies have become IT Park members, including 59 companies with foreign capital from the USA, Canada, the UK, Japan, China, Switzerland, and other countries.
📈 Key Facts:
- New exporters mostly focus in providing IT and business services.
- 2,500+ new jobs will be created wihin the first year of activity, including in regional areas -- local specialists have the opportunity to join the leading international companies and work on the global market.
- Main export markets: the USA, Canada, Europe, and Asia.
🌍 Examples of international success:
KARAM (Portugal-Hungary): financial planning for global markets.
BEUKITCH EV (Malaysia): software development for the USA and Malaysia.
INVERSON OPERATIONS (Switzerland): IT consulting and cybersecurity for the USA and Switzerland.
UNLOCKWARE IT SERVICES (Canada): exporting services to Qatar, Saudi Arabia, Canada, and the USA.
FUJIYAMA LOGISTICS (Japan): local specialists supporting supply chain management systems.
Total projected export volume: $70 million in the first year of operations!
🇺🇿Uzbekistan continues to attract global attention as an IT powerhouse, creating opportunities for growth and collaboration.
🕸 Read more on our website
Telegram | Instagram | Facebook | Youtube | LinkedIn
#members
👍 IT Park rezidenti“UIC Games” $400 000 miqdoridagi grantni e’lon qilmoqda!
Agar siz o‘yinlar ishlab chiqishga ishtiyoqmand bo‘lsangiz va bu sohadagi eng yaxshi mutaxassislar bilan jamoada ishlashni istasangiz, bu grant aynan siz uchun mo‘ljallangan.
Grant nimalar taqdim etadi:
🟢 bir yil davomida o‘yinlar ishlab chiqishni bepul o‘rganish uchun noyob imkoniyat
🟢 o‘qish davri mobaynida stipendiya
🟢 o‘qishni tugatgach kafolatlangan ish o‘rni
⭐️ Grantlar soni cheklangan. Imkoniyatni boy bermaslik uchun @UICGames_bot orqali ro‘yxatdan o‘ting!
_____________
👍 IT Park membersUIC Games Announces Grant of $400,000!
If you are passionate about game development and wish to collaborate with top professionals in the industry, this grant is designed for you.
Benefits of the Grant:
🟢 A unique opportunity to engage in a one-year, tuition-free study program in game development
🟢 A stipend provided throughout the duration of the program
🟢 Guaranteed employment upon completion of the training
⭐️ The number of grants is limited. Register through @UICGames_bot to seize this opportunity!
Telegram | Instagram | Facebook | Youtube | LinkedIn
#members
👍 IT Park rezidenti“UIC Games” $400 000 miqdoridagi grantni e’lon qilmoqda!
Agar siz o‘yinlar ishlab chiqishga ishtiyoqmand bo‘lsangiz va bu sohadagi eng yaxshi mutaxassislar bilan jamoada ishlashni istasangiz, bu grant aynan siz uchun mo‘ljallangan.
Grant nimalar taqdim etadi:
🟢 bir yil davomida o‘yinlar ishlab chiqishni bepul o‘rganish uchun noyob imkoniyat
🟢 o‘qish davri mobaynida stipendiya
🟢 o‘qishni tugatgach kafolatlangan ish o‘rni
⭐️ Grantlar soni cheklangan. Imkoniyatni boy bermaslik uchun @UICGames_bot orqali ro‘yxatdan o‘ting!
_____________
👍 IT Park membersUIC Games Announces Grant of $400,000!
If you are passionate about game development and wish to collaborate with top professionals in the industry, this grant is designed for you.
Benefits of the Grant:
🟢 A unique opportunity to engage in a one-year, tuition-free study program in game development
🟢 A stipend provided throughout the duration of the program
🟢 Guaranteed employment upon completion of the training
⭐️ The number of grants is limited. Register through @UICGames_bot to seize this opportunity!
Telegram | Instagram | Facebook | Youtube | LinkedIn
#members
Делимся лайфхаком: дарим в подарок своему мужчине костюм самого маленького размера и носим с ним по очереди 🤍
В преддверии 14 февраля, ознакомьтесь с актуальными позициями зимней капсулы в данном посте и не забывайте, что релиз спортивных костюмов состоится уже 20.02, а это значит, что их осталось совсем немного.
🔥The Religion Order | Support
@ThankStickerBot
Qué puede hacer este bot?
Envía automáticamente pegatinas de miembros de agradecimiento cuando su grupo llega a los miembros 'x'.
Idioma: Inglés
(visto en @BotsGram_cu)
#thankyou, #thanks, #group, #members, #sticker, #stickers