Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример).
Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать?
В Django по умолчанию есть готовая функция slugify для таких случаев.
Но я её никогда не использую. Почему? Потому что её недостаточно!
Приведём пример
>>> from django.utils.text import slugify
>>> slugify('This is a Title')
'this-is-a-title'
Пока всё отлично
>>> slugify('This is a "Title!"')
'this-is-a-title'
Спец символы удалились, всё хорошо.
>>> slugify('Это заголовок статьи')
''
Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить
>>> slugify('Это заголовок статьи', allow_unicode=True)
'это-заголовок-статьи'
Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте.
Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою.
Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку:
🔸1. Исходный текст:
>>> text = 'Мой заголовок №10 😁!'
Взял специально посложней со специальными символами.
🔸2. Транслит
Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги.
from unidecode import unidecode
>>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山")
'N S (r) u P 1/4 Yue Shan'
Очень крутая библиотека, советую👍
В нашем случае получаем такое преобразование:
>>> text = unidecode(text)
>>> print(text)
'Moi zagolovok No. 10 !'
Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы.
А еще наш код уже поддерживает любой язык, будь то хинди или корейский.
🔸4. Фильтр символов
Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона.
>>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text)
>>> print(text)
'Moi_zagolovok_No_10_'
Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_".
🔸5. Slugify
Осталось удалить лишние символы по краям и сделать нижний регистр
>>> text = text.strip('_').lower()
>>> print(text)
'moi_zagolovok_no_10'
Получаем отличный slug! 😎
🌎 Полный код в виде функции.
______________
PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию.
#libs#tricks#django
Sin lugar a dudas las #competenciasdigitales, están siendo protagonistas de los últimos años dadas las nuevas reglas del juego: pandemia, entornos #VUCA, nuevos modelos de negocios, #productividad, relevos generacionales (como reto para la #sostenibilidad) y otras más que hemos podido encontrar en los diferentes espacios de trabajo donde he participado.
Esto lleva a que cada uno de nosotros tome el asunto con mucha responsabilidad, tanto personal como laboral, ya que las ventajas derivadas de un buen #digitalmindset, se ven a todo nivel: desde calidad de vida hasta mejores ingresos, ya no es suficiente que seas muy bueno en tu actividad base (técnica) profesional... la arena es digital.
👇🏽👇🏽👇🏽👇🏽Les comparto este informe elaborado por Wiley llamado Digital Skills Gap Index (#DSGI), el cual identifica y evalúa factores como la fortaleza digital, resiliencia y capacidad de respuesta digital. Es un buen punto de partida, para entender las dinámicas de los países y de qué manera derivamos acciones para nuestras organizaciones.
Fuente: https://lnkd.in/dJmsBvqa
¿Cómo ves a tu país?, comparte algunas ideas para enriquecer la comunidad. 📲📲
Белок из агавы: отходы мескаля превращают в инновационный пищевой продукт
Ранее мы публиковали пост о текиле и ее производстве из сердца голубой агавы - в Мексике нашли способ превратить отходы от производства в высокоценный источник белка.
Исследовательская группа под руководством Ауреи Рамирес Хименес из Технологического института Монтеррея (штат Керетаро) разработала технологию получения одноклеточных белков из bagazo de agave — волокнистого остатка, остающегося после перегонки мескаля.
Как это работает?
Учёные используют процесс ферментации: в среду, содержащую bagazo, добавляют специально подобранные микроорганизмы (дрожжи, бактерии или грибы), которые преобразуют органический материал в белковую биомассу. Эта масса затем может быть переработана в пищевую добавку или комбикорм.
Почему это важно?
👉 Альтернатива животному белку
👉 Утилизация агропромышленных отходов
👉 Производство экологически чистого, доступного белка
👉 Поддержка циркулярной экономики в сельском хозяйстве
Сегодня отходы агавы в огромных объёмах выбрасываются или сжигаются, нанося вред окружающей среде. Новый подход позволяет превратить этот балласт в ценный ресурс — с минимальными затратами и высокой питательной ценностью.
Результаты исследования уже прошли лабораторные испытания, а сейчас команда работает над масштабированием процесса для промышленного применения.
Для Мексики, мирового лидера в производстве мескаля, это может стать настоящим технологическим прорывом в сфере устойчивого питания.
#Наука#Мексика#Биотехнологии#Агава#Мескаль#ПротеинБудущего#Экология#ЦиркулярнаяЭкономика#Sostenibilidad#AgaveInnovación
👉Всегда свежие новости о странах Латинской Америки!
Мексиканские острова: один из самых успешных проектов по восстановлению природы в мире
Мексика получила признание от ООН за масштабную программу восстановления экосистем на островах, реализуемую уже почти 30 лет. Проект стал одной из трёх новых флагманских инициатив по глобальному восстановлению, наряду с программами в Испании и Мозамбике.
Что сделано:
▪️ Восстановлено 85% колоний морских птиц
▪️ Убрали 60 популяций инвазивных видов (включая коз и диких кошек)
▪️ Восстановлены леса, кустарники и редкие травы
▪️ Разработаны протоколы биобезопасности и охраны экосистем
▪️ Поддержаны местные сообщества и научные группы
Один из центральных примеров — остров Гваделупе, на который в XIX веке были завезены дикие козы. За 150 лет они уничтожили 90% леса и всю подлесную флору. После того, как их убрали, было восстановлено более 1000 гектаров леса, а остров снова стал точкой обитания для исчезающих видов.
Морские птицы, как индикаторы здоровья океанов, возвращаются на острова благодаря программе. Для привлечения альбатросов использовались макеты птиц, звуки и подкормка птенцов — методика сработала, и колонии начали восстанавливаться.
Дикая кошка, также завезённая на острова, стала серьёзной угрозой: отсутствующие у птиц защитные механизмы приводили к массовой гибели. Программа по удалению кошек стала частью комплексной стратегии восстановления баланса.
Почему это важно
— В Мексике — более 4000 островов, на которых обитает 8% всех наземных позвоночных страны
— В 14 раз больше эндемиков, чем на материке
— За 100 лет вымерло 20 видов позвоночных
— Проект охватывает более 100 000 гектаров островных территорий
— Заявка от Мексики выбрана из 200 претендентов из 80 стран
Восстановление природы приводит не только к сохранению видов, но и к образованию природных резервов пресной воды, устойчивому туризму и научным открытиям. Это вклад, который выходит за пределы границ — ведь океан принадлежит всем, как подчёркивают экологи.
#Мексика#Экология#Острова#Биоразнообразие#UNEP#Природа#Океаны#Guadalupe#Conservación#Endemicos#Sostenibilidad#RestauraciónEcológica
👉Всегда свежие новости о странах Латинской Америки!