Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример).
Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать?
В Django по умолчанию есть готовая функция slugify для таких случаев.
Но я её никогда не использую. Почему? Потому что её недостаточно!
Приведём пример
>>> from django.utils.text import slugify
>>> slugify('This is a Title')
'this-is-a-title'
Пока всё отлично
>>> slugify('This is a "Title!"')
'this-is-a-title'
Спец символы удалились, всё хорошо.
>>> slugify('Это заголовок статьи')
''
Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить
>>> slugify('Это заголовок статьи', allow_unicode=True)
'это-заголовок-статьи'
Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте.
Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою.
Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку:
🔸1. Исходный текст:
>>> text = 'Мой заголовок №10 😁!'
Взял специально посложней со специальными символами.
🔸2. Транслит
Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги.
from unidecode import unidecode
>>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山")
'N S (r) u P 1/4 Yue Shan'
Очень крутая библиотека, советую👍
В нашем случае получаем такое преобразование:
>>> text = unidecode(text)
>>> print(text)
'Moi zagolovok No. 10 !'
Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы.
А еще наш код уже поддерживает любой язык, будь то хинди или корейский.
🔸4. Фильтр символов
Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона.
>>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text)
>>> print(text)
'Moi_zagolovok_No_10_'
Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_".
🔸5. Slugify
Осталось удалить лишние символы по краям и сделать нижний регистр
>>> text = text.strip('_').lower()
>>> print(text)
'moi_zagolovok_no_10'
Получаем отличный slug! 😎
🌎 Полный код в виде функции.
______________
PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию.
#libs#tricks#django
#yangiruhiyat
Матназар Абдулҳакимнинг “Дарсдан сўнг” деб номланган ушбу шеърига Қорақалпоғистоннинг Элликқалъа тумани Бўстон шаҳрида ҳайкал ўрнатилган.
Нўноқ назмим учун афв эт, халқим,
На олим, на фозил, на сўз пириман.
Ўз вақтида дафтар топшира олмай
Қолган болаларнинг бириман.
Шеър жтаниқли актёр Меҳриддин Раҳматов томонидан маҳорат билан ўқилган.
Ушбу шеър ҳар бир ватан фарзандини уУстозларни эъзозлашга, уларни қадрига етишга ундайди.
Шеър эшитинг ва тафаккур қилинг!
@Tafakkur3
Farzandlarni ilmli qilish eng muhim maqsadimizga aylanishi lozim. Ayniqsa, qizlarimizni o‘qitaylik, ularga imkon, sharoit yaratib beraylik. Boisi ular millat tarbiyachilari, kelajak ular qo‘lida voyaga yetadi.
Prezident ham ko‘p bora "Bir qizni o‘qitsak, butun oilaga ta’lim bergan bo‘lamiz. Agar oila bilimli, ma’rifatli bo‘lsa, jamiyatning ongi, madaniy darajasi ham yuksaladi", deya ta’kidlagan edi.
Mazkur roligimiz orqali yana bir bor bu haqiqat haqida eslatmoqchi bo‘ldik.
#yangiruhiyat
@otabek_khasanov
#yangiruhiyat
Телефон бор, интернет бор, планшет бор… Лекин бола ҳаётда адашиб қоляпти. Сабаби — сифатли таълим йўқ.
Кунлик овқат билан ҳаётни тўлдириб бўлмайди. Болага ҳам фикр, ҳам дунёқараш, ҳам салоҳият керак.
Маънавият ва маърифат маркази шу ҳақда тиниқ, жонли ролик чиқарибди. Ҳар бир сатрда бола келажаги бор, кўринг ва тафаккур қилинг!
@Tafakkur3
#yangiruhiyat
Республика Маънавият ва маърифат маркази мутахассисларини эплаб бўлмай қолди. Марказ ижодкорлари томонидан яратилган навбатдаги шедевр "Худойи" қисқа метражли фильм интернетнинг ўзбек сегментида яшин тезлигида тарқалмоқда.
Ҳар бир миллатнинг келажаги — унинг фарзандлари билан белгиланади. Фарзанд эса фақат илм, тарбия ва ҳақиқий қадриятлар орқали улғайса, миллат ҳам юксалади.
Биз кўпинча “бобом илмли бўлган, момом оқила бўлган” деб фахрланамиз. Лекин шу меросни давом эттирмасак, бу сўзлар фақат тарихга айланади. Ифтихор – масъулият демак. Агар фарзандимизни илмга етакламасак, келажакда ўзгариш бўлмайди.
Тўйлар, модалар, қимматбаҳо буюмлар вақтинчалик. Илм эса абадий сармоя. Бугун фарзандимизга телефон олиб беряпмиз, лекин уни китобга етаклаяпмизми? Саволларига жавоб беряпмизми? Уни эшитяпмизми?
“Худойи” ролиги айнан шуни кўрсатади — бир бола орқали бутун авлоднинг тақдирига назар ташланади. Илмдан юз ўгирган фарзанд – жамиятнинг йўқотишидир.
Тафаккур қилайлик!
@Tafakkur3
#yangiruhiyat
Бугунги кунда ўзбек эстрадасида кўпгина хонандалар хорижий мусиқа йўналишларига — турк, к-поп, ҳинд, ёки араб услубларига эргашиб, шунга мос қўшиқлар куйлаш билан банд. Бу бир томондан санъатнинг глобаллашуви, мусиқанинг чегара билмас табиати сифатида қабул қилиниши мумкин.
Лекин шу билан бирга, миллий руҳ, маънавий замин ва маданий ўзлик масаласи сояга тушиб қолмоқда.
Олдингдан оққан сувни қадри йўқ деганларидек, бизникилар ўз меъросига беэтибор бир пайтда, турк хонандаси ўзбек миллий мусиқа дурдонаси — “Мустаҳзод” ни эҳтиром билан, нотаси, тили ва руҳига содиқ ҳолда куйлабди.
Бу ҳодиса фақат мусиқий ижро эмас — маданий ҳурмат, қалбдан қалбга мулоқот намунасидир.
Чунки “Мустаҳзод” — оддий қўшиқ эмас, у шашмақом анъаналаридаги руҳий тозалик, сўз ва овознинг маърифий уйғунлигидир. Уни ўрганиш, тушуниш ва куйлаш — санъаткордан ҳам билим, ҳам эҳтирос талаб қилади.
Бундай ҳолат бизнинг "саноаткор"ларимизни тафаккурга бошлаши керак!
Социолог, Сухроб Хидиров
@Tafakkur3
#yangiruhiyat
Sohibqiron Amir Temur haqida nimalarni bilasiz?
Izohda siz oʻz javoblaringizni yozib qoldiring!
👉Rasmiy sahifalarimiz:
TELEGRAM | INSTAGRAM | FACEBOOK