Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример).
Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать?
В Django по умолчанию есть готовая функция slugify для таких случаев.
Но я её никогда не использую. Почему? Потому что её недостаточно!
Приведём пример
>>> from django.utils.text import slugify
>>> slugify('This is a Title')
'this-is-a-title'
Пока всё отлично
>>> slugify('This is a "Title!"')
'this-is-a-title'
Спец символы удалились, всё хорошо.
>>> slugify('Это заголовок статьи')
''
Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить
>>> slugify('Это заголовок статьи', allow_unicode=True)
'это-заголовок-статьи'
Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте.
Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою.
Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку:
🔸1. Исходный текст:
>>> text = 'Мой заголовок №10 😁!'
Взял специально посложней со специальными символами.
🔸2. Транслит
Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги.
from unidecode import unidecode
>>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山")
'N S (r) u P 1/4 Yue Shan'
Очень крутая библиотека, советую👍
В нашем случае получаем такое преобразование:
>>> text = unidecode(text)
>>> print(text)
'Moi zagolovok No. 10 !'
Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы.
А еще наш код уже поддерживает любой язык, будь то хинди или корейский.
🔸4. Фильтр символов
Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона.
>>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text)
>>> print(text)
'Moi_zagolovok_No_10_'
Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_".
🔸5. Slugify
Осталось удалить лишние символы по краям и сделать нижний регистр
>>> text = text.strip('_').lower()
>>> print(text)
'moi_zagolovok_no_10'
Получаем отличный slug! 😎
🌎 Полный код в виде функции.
______________
PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию.
#libs#tricks#django
AAASUBS С ГОРДОСТЬЮ ПРЕДСТАВЛЯЕТ:
Mitch Hedberg — Do You Believe In Gosh? (2008)
Третий и заключительный альбом в карьере неповторимого Митча Хедберга в моей озвучке. Альбом вышел посмертно, потому как 30 марта 2005 года Митч умер от передозировки наркотиками (героин, кокаин и другие).
Таким образом, я озвучил всего Митча Хедберга. Огромное спасибо моим бустерам! Релиз будет эксклюзивом для Бусти до дня рождения Митча, 24 февраля, после чего вся дискография Хедберга будет доступна в общем доступе. Скажем АЛЛИЛУЙЯ!!!
А пока ловите рандомные пять минут с концерта.
ВСЕХ С НАСТУПАЮЩИМИ ПРАЗДНИКАМИ!!!
#aaadubs#mitchhedberg
AAASUBS С ГОРДОСТЬЮ ПРЕДСТАВЛЯЕТ:
Mitch Hedberg — Mitch All Together (2003)
Второй альбом легендарного Митча Хедберга в моей озвучке. Посему уже два из трёх альбомов Митча доступны в русской озвучке, ну разве не прекрасно?!
Релиз посвящается моим дорогим бустерам. Первые две недели будет доступен исключительно на Бусти (ссылка: https://boosty.to/aaasubs). После этого выложу на канале.
Как наберём 10 бустеров, в работу уйдёт последний альбом Митча!
Все остальные ловите пока первые 6 минут с этого легендарного альбома.
Поздравляю всех с прошедшими праздниками!
#aaadubs#mitchhedberg
AAASUBS С ГОРДОСТЬЮ ПРЕДСТАВЛЯЕТ:
Mitch Hedberg — Do You Believe In Gosh? (2008)
Сегодня Митчу Хедбергу исполнилось бы 57 лет, но он раньше употреблял наркотики.
В эту знаменательную дату выкладываю в общий доступ последний существующий альбом Митча, "А Ты Веришь в Боженьку?" в моей озвучке.
Релиз всех трёх альбомов стал возможен из-за поддержки всех людей, указанных в начальных титрах, я люблю вас, ребята! Stay Tuned ❤️Впереди ещё много крутых релизов!
Таким образом, я озвучил всего Митча Хедберга. Смотрите и слушайте везде, где хотите (аудиофайл в телеге постом ранее). Где непонятно, вставлены аннотации, таймкоды ниже:
03:40 Процент от Ведра
08:00 Воздушный Шар
09:06 Всадник без Головы
11:50 Отели и Кровати
15:47 Фил
19:11 Рестораны
21:10 Морепродукты
23:21 Чайные Лыжи
26:45 Канальная Смекалка
29:02 Пылесосист
31:38 Ремень
34:33 Газировка
Мой Boosty
#aaadubs#mitchhedberg#albums
Mitch Hedberg — Mitch All Together (2003)
Последний прижизненный альбом великого Митча Хедберга. Третий альбом 'Do You Believe in Gosh?' вышел уже после его смерти (записан он был за два месяца до кончины Митча).
В видеоряде присутствуют аннотации и подсказки к непонятным местам. Залил на все платформы, слушайте откуда хотите (даже в сраный Дзен залил).
Релиз стал возможен благодаря моим крутым бустерам! Если вам нравится мой труд, лучшей благодарностью будет подписка на Бусти, ну или пишите в личку, скажу куда слать донат 😁.
Последний альбом Хедберга уже в работе.
Таймкоды:
00:25 Этот диск будет в магазинах
03:40 Сендвичи
05:59 НЕ трек №5, НЕ жонглирование бензопилами
07:07 Зубы
09:00 Шоколадки
11:06 Дома
13:25 Газировка
15:59 Трубка
18:03 Визитки
20:26 Кунжутные семечки
21:52 Три лёгких платежа
26:23 Стрелки
29:18 Спасён плавучестью цитруса
30:43 Кровать и Завтрак
35:40 Бутафорская трава
#aaadubs#mitchhedberg#albums
Mitch Hedberg — Strategic Grill Locations (1999)
Этой озвучкой я особенно горжусь, потому что хотел сделать её уже много лет и наконец-то сделал. Посвящаю её своим бустерам (thank you, three people!). Если наберём ещё троих бустеров, то немедленно начну работу над вторым альбомом Митча (всего их у него три). Так что если понравилось, подписывайтесь! Ссылка на Boosty: https://boosty.to/aaasubs
Можете кинуть донат по реквизитам ниже:
СБЕРБАНК — 4276160926766784
РАЙФФАЙЗЕН — 4627291477080394
Ещё можете поздравить меня с днём рождения в комментариях.
ВСЕХ С НАСТУПАЮЩИМИ!
Таймкоды:
00:25 Шутки на CD-диске
03:12 Коалы
05:43 Мелирование
07:48 Ты был хорош
10:00 Тоже бреется
12:00 Минибар
15:01 Берет и панкейки
16:56 Бумажник на липучке
19:35 Только в химчистке
21:11 Азартные игры
23:26 Моё ожерелье
26:12 Актёрская игра
29:18 Линн
32:01 Помидоры
34:37 Шесть людей меня не убедят
37:35 Печеньки
40:46 Овсянка
43:36 Лягушка Смэки
46:17 Медведи и лягухи
49:18 Пожарный выход
52:29 Дюфрейны
#aaadubs#mitchhedberg#albums