Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример).
Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать?
В Django по умолчанию есть готовая функция slugify для таких случаев.
Но я её никогда не использую. Почему? Потому что её недостаточно!
Приведём пример
>>> from django.utils.text import slugify
>>> slugify('This is a Title')
'this-is-a-title'
Пока всё отлично
>>> slugify('This is a "Title!"')
'this-is-a-title'
Спец символы удалились, всё хорошо.
>>> slugify('Это заголовок статьи')
''
Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить
>>> slugify('Это заголовок статьи', allow_unicode=True)
'это-заголовок-статьи'
Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте.
Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою.
Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку:
🔸1. Исходный текст:
>>> text = 'Мой заголовок №10 😁!'
Взял специально посложней со специальными символами.
🔸2. Транслит
Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги.
from unidecode import unidecode
>>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山")
'N S (r) u P 1/4 Yue Shan'
Очень крутая библиотека, советую👍
В нашем случае получаем такое преобразование:
>>> text = unidecode(text)
>>> print(text)
'Moi zagolovok No. 10 !'
Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы.
А еще наш код уже поддерживает любой язык, будь то хинди или корейский.
🔸4. Фильтр символов
Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона.
>>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text)
>>> print(text)
'Moi_zagolovok_No_10_'
Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_".
🔸5. Slugify
Осталось удалить лишние символы по краям и сделать нижний регистр
>>> text = text.strip('_').lower()
>>> print(text)
'moi_zagolovok_no_10'
Получаем отличный slug! 😎
🌎 Полный код в виде функции.
______________
PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию.
#libs#tricks#django
#Qabul2023
⚡️ Barcha hududlarda test sinovlari yakunlandi
📆 Ma’lumki, 2023-yil 1-avgust kuni 2023-2024-o‘quv yili uchun Qoraqalpog‘iston Respublikasi, viloyatlar va Toshkent shahrida OTMlarning bakalavriat ta’lim yo‘nalishlariga kirish test sinovlari boshlangan edi.
✅ Bugun, 13-avgust kuni barcha hududlarda test sinovlari yakunlandi. Bunda jarayonlar:
👉 4-avgust kuni — Farg‘ona viloyatining So‘x tumanida;
👉 11-avgust kuni — Sirdaryo viloyatida;
👉 12-avgust kuni — Buxoro, Jizzax va Xorazm viloyatlarida;
👉 13-avgust kuni — qolgan hududlarda o‘z yakuniga yetdi.
❇️ Bilimni baholash agentligi test sinovlarini tashkil etish va o‘tkazishda ishtirok etgan barcha tashkilotlarga va xodimlarga o‘z minnatdorchiligini bildiradi.
Boʻlajak talabalar safiga qoʻshiling👇
https://t.me/+9ElzpnxTm5owZmJl
https://t.me/+9ElzpnxTm5owZmJl
"Yangi O'zbekiston" universiteti Iqtisodiyot va ma'lumotlar tahlili yo'nalishida kutish rejimidagi talabgorlar diqqatiga!
✅Iqtisodiyot va ma'lumotlar tahlili yo'nalishida kutish rejimidagi talabgorlarning statusi yangilandi.
☑️ Siz o'z statusingizni quyidagi havolaga kirib, bilib olishingiz mumkin.
👉Havola
🎗Barcha o'qishga qabul qilinganlarni tabriklaymiz!
🔁English
➖➖➖➖➖➖➖➖➖➖➖➖➖➖
#qabul2023#grant
⬇️ Biz ijtimoiy tarmoqlarda:
Veb-sayt | Telegram | Instagram | Facebook
O‘qishga qabul qilingan talabalarning grant o‘rinlari to‘grisida dastlabki ma'lumot!
👍 Vazirlar Mahkamasining 2022-yil 2-iyundagi qarori bilan “Yangi O‘zbekiston” universitetining iqtidorli talabalariga davlat grantini berish tartibi to‘g‘risida nizom talablaridan kelib chiqib, 2023/2024 o‘quv yili uchun o‘qishga hujjat topshirgan va 1-kursga o‘qishga tavsiya etilgan talabalarga qancha miqdorda grant ajratilganligi to‘g‘risida dastlabki ma'lumot shakllantirildi.
👇 Siz quyidagi havola orqali kirib, imtihonlarda olgan balingizga ko‘ra universitet tomonida qancha miqdorda grant ajratilganligi to‘g‘risida bilib olishingiz mumkin.
📍Havola: https://newuu.uz/en/exam-info
🎗O‘qishga qabul qilingan barcha talabalarni tabriklaymiz!
🔁English
➖➖➖➖➖➖➖➖➖➖➖➖➖➖
#qabul2023#grant
⬇️Biz ijtimoiy tarmoqlarda:
Veb-sayt | Telegram | Instagram | Facebook
#Qabul2023#Abituriyent2023
⚡️ Test sinovi topshiriladigan fanlar majmuasi (2023-2024-o‘quv yili uchun)
✅ Abituriyentlar my.uzbmb.uz sayti orqali ro‘yxatdan o‘tishda fanlar majmuasi va ketma-ketligi bir xil bo‘lgan beshtagacha ta’lim yo‘nalishini tanlashlari mumkin.
👨🏻💻 Bunda ta’lim yo‘nalishlarini bir oliy ta’lim muassasasi yoki turli oliy ta’lim muassasalari doirasida tanlash mumkin. Shuningdek, turli ta’lim shakllarini tanlash imkoniyati ham mavjud.
📌 Ta’lim yo‘nalishlarini tanlashdagi asosiy talab bu fanlar majmuasi va ketma-ketligi bir xil bo‘lishi hisoblanadi.
🖥 Yuqoridagi faylda test sinovi topshiriladigan fanlar majmuasi tartiblangan holda joylashtirilgan bo‘lib, fanlar majmuasi va ketma-ketligi bir xil bo‘lgan ta’lim yo‘nalishlari bilan tanishish mumkin.
@wisdom_byUsmonova
#Qabul2023#Abituriyent2023
✅ Test sinovlarini o‘tkazish tartibi
🇺🇿 Bilim va malakalarni baholash agentligi tomonidan kirish imtihonlari qanday tartibda o'tkazilishi bo'yicha video yo'riqnoma e'lon qilindi.
Boʻlajak talabalar safiga qoʻshiling👇
https://t.me/+9ElzpnxTm5owZmJl
https://t.me/+9ElzpnxTm5owZmJl
#Qabul2023#Imtiyoz
Imtiyozga ega abituriyentlar to‘g‘risidagi ma’lumotlar mandat.uzbmb.uzsaytiga joylashtirildi
🖥 Bilimni baholash agentligining mandat.uzbmb.uz saytiga qo‘shimcha kvota doirasida tanlovda ishtirok etadigan imtiyozga ega abituriyentlar to‘g‘risidagi ma’lumotlar joylashtirildi.
👨🏻💻 Endilikda mandat.uzbmb.uz saytidagi “Bakalavr-2023” bo‘limining “Imtiyozli” qismidan tegishli imtiyoz turini tanlagan holda ushbu imtiyozga ega abituriyentlar to‘g‘risidagi ma’lumotlarni ko‘rish mumkin.
✅ Bunda abituriyentlarning ro‘yxati ularning to‘plagan ballari asosida tartiblanadi va mazkur imtiyoz doirasida ajratilgan qo‘shimcha qabul ko‘rsatkichlari soni ham ko‘rsatiladi.
📌 Imtiyoz asosida qo‘shimcha kvota doirasida talabalikka tavsiya etilmagan abituriyentlar barcha abituriyentlar kabi umumiy tanlovda ishtirok etadi.
Boʻlajak talabalar safiga qoʻshiling👇
https://t.me/+9ElzpnxTm5owZmJl
https://t.me/+9ElzpnxTm5owZmJl
#Qabul2023#Abituriyent2023#Statistika
2023-2024-o‘quv yili uchun ro‘yxatdan o‘tgan abituriyentlar soni haqida ma’lumot(2023-yil 12-iyul 18:00 holatiga)
🖥 Oliy ta’lim muassasalarining bakalavriatiga o‘qishga kirish uchun onlayn ro‘yxatdan o‘tgan abituriyentlar soni — 465 393 nafar.
📚 Abituriyentlarning ta’lim tili bo‘yicha taqsimoti:
🇺🇿O‘zbek tili — 402 742 nafar;
🇷🇺Rus tili — 50 336 nafar;
🔘Qoraqalpoq tili — 10 844 nafar;
🔘Boshqa tillar — 1 471 nafar.
👨🏻💻 Abituriyentlarning ta’lim shakllari bo‘yicha taqsimoti (birinchi ta’lim yo‘nalishiga nisbatan):
🔹Kunduzgi ta’lim shakli — 311 097 nafar;
🔹Kechki ta’lim shakli — 11 848 nafar;
🔹Sirtqi ta’lim shakli — 139 154 nafar;
🔹Masofaviy ta’lim shakli — 3 294 nafar.
🏢 Eng ko‘p abituriyent ro‘yxatdan o‘tgan OTMlar(birinchi ta’lim yo‘nalishiga nisbatan):
👉 O‘zbekiston milliy universiteti — 18 023 nafar;
👉 Toshkent axborot texnologiyalari universiteti — 14 220 nafar;
👉 Toshkent davlat pedagogika universiteti — 14 217 nafar;
👉Farg‘ona davlat universiteti — 14 199 nafar;
👉 Toshkent davlat iqtisodiyot universiteti — 13 808 nafar.
✅ Abituriyentlarning doimiy yashash hududi bo‘yicha birinchi 5 talik:
1️⃣Samarqand viloyati — 55 169 nafar;
2️⃣Qashqadaryo viloyati — 51 167 nafar;
3️⃣Farg‘ona viloyati — 43 916 nafar;
4️⃣Toshkent viloyati — 42 152 nafar;
5️⃣Andijon viloyati — 40 523 nafar.
Boʻlajak talabalar safiga qoʻshiling👇
https://t.me/+9ElzpnxTm5owZmJl
https://t.me/+9ElzpnxTm5owZmJl