Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример).
Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать?
В Django по умолчанию есть готовая функция slugify для таких случаев.
Но я её никогда не использую. Почему? Потому что её недостаточно!
Приведём пример
>>> from django.utils.text import slugify
>>> slugify('This is a Title')
'this-is-a-title'
Пока всё отлично
>>> slugify('This is a "Title!"')
'this-is-a-title'
Спец символы удалились, всё хорошо.
>>> slugify('Это заголовок статьи')
''
Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить
>>> slugify('Это заголовок статьи', allow_unicode=True)
'это-заголовок-статьи'
Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте.
Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою.
Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку:
🔸1. Исходный текст:
>>> text = 'Мой заголовок №10 😁!'
Взял специально посложней со специальными символами.
🔸2. Транслит
Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги.
from unidecode import unidecode
>>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山")
'N S (r) u P 1/4 Yue Shan'
Очень крутая библиотека, советую👍
В нашем случае получаем такое преобразование:
>>> text = unidecode(text)
>>> print(text)
'Moi zagolovok No. 10 !'
Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы.
А еще наш код уже поддерживает любой язык, будь то хинди или корейский.
🔸4. Фильтр символов
Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона.
>>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text)
>>> print(text)
'Moi_zagolovok_No_10_'
Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_".
🔸5. Slugify
Осталось удалить лишние символы по краям и сделать нижний регистр
>>> text = text.strip('_').lower()
>>> print(text)
'moi_zagolovok_no_10'
Получаем отличный slug! 😎
🌎 Полный код в виде функции.
______________
PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию.
#libs#tricks#django
🪙#Bitcoin follows #M2 with a delay of 8 weeks
#M2 Global Money Supply is an indicator of the country's money supply, which evaluates all the cash available to each person on hand or on short—term bank deposits.
Как стоит думать про денежные агрегаты в 2025 (по моему мнению).
Сразу вывод: текущие темпы роста денежной массы выглядят низкими. В январе-июле 2025 М2Х выросла на 0,9%, М2 на 2,4%. Ожидаемые ЦБ до конца года 6-9% по М2 реалистичны.
—
Вы видели, что в данных ЦБ вроде бы довольно неплохой рост рублёвой денежной массы М2 (на 7,2%) и денежной массы с учётом валюты М2Х (на 5%) с начала января по начало августа. Но есть нюанс - это рост с учётом "сезонной коррекции", SA. Без неё рост гораздо ниже - у М2Х = 0,9%, у М2 = 2,4%.
Что такое SA? Вы берёте "прошлые годы" и смотрите, на сколько должны были бы расти М2 и М2Х с учётом "стандартных для этого времени года трендов". Например, в 1 квартале ВВП почти всегда снижается по сравнению с 4 кварталом предыдущего года - из-за праздников (меньше производим) и расходов перед новым годом (покупаем подарки). Но это "несправедливое" мнение про первый квартал - раз он всегда ниже, надо смотреть относительно стандартной динамики первого квартала и сравнивать с ней.
В каких-то ситуациях (например, с подсчётом ВВП) без SA не обойтись - иначе мы получим искажённые результаты про темпы роста. При этом сумма квартальных данных в рублях для обычного ВВП и со снятой сезонностью почти одинакова.
А в каких-то SA может оказаться не самой удобной концепцией. И мне кажется, с М2 как раз такая проблема. Посмотрите на файл ЦБ: обычные (не SA) данные на 1 января 2025 показывают М2Х примерно 131 трлн руб., М2Х SA 127 трлн руб.! То есть расхождение на "отчётную дату" (а начало года выглядит такой) может достигать нескольких триллионов.
Второй момент - если смотреть с начала года, то по моим подсчётам обычно рост М2Х (и М2) за август-декабрь года заметно превосходил рост за январь-июль. Среднее для М2Х с 2014 по 2025 за первые семь месяцев равно 2,5%, а за последние пять - целых 9,3% (для М2 соответственно 3,0% и 9,5%). Поэтому небольшие темпы роста в 2025 не должны излишне пугать - возможно, за остаток года рост будет побольше.
Но надо понимать, что часть роста М2 и М2Х в конце года - дефициты бюджета. Они закрывались в декабрях (это отлично видно именно по данным последнего месяца в 2022-24, рост М2 был порядка 2-3 трлн руб.). В 2025 мы не ждём такого роста М2 под конец года, потому что федбюджет авансирует расходы, и дефицит уже выглядит близким к итоговому по году. И вдобавок мы живём с высокой ставкой, которая затрудняет рост кредитования.
А значит... SA данные могут информировать нас неточно. Реальный рост "количества денег" совсем не быстрый, это заметно отражается на спросе и замедлении экономики, а также торможении инфляции. Не понимаю, почему коллеги ожидают бурного роста.
#M2#M2X#Inflation#CB#Russia
Bybit Faces $1.4B Hack; CEO Assures Solvency
Bybit CEO confirms all client assets are 1:1 backed after a significant $1.4 billion hack. The exchange is taking loans to manage withdrawals amidst increased traffic. Hackers executed the breach through a transaction signing manipulation, transferring $1.5 billion in wrapped ETH. All other wallets remain secured, and funds within are safe for normal operations. The situation has raised concerns similar to those seen before the FTX collapse. More details
In other news, U.S. Senate Banking Committee is set to discuss bipartisan crypto legislative frameworks on February 26. Source
#Bybit#Crypto#Bitcoin#ETH#Blockchain#Hack#DeFi#VPN#Web3#Finance#Regulation#Senate#Legislation#M2#BankRun#Assets#Investments#Security#Technology
🚀 AI TRENDS | MiniMax M2.7 Open Source Launches Globally with Key Partnerships
On April 13, Jin10 reported that MiniMax, a domestic AI model company, announced the global open-source release of MiniMax M2.7 on April 12. According to Jin10, the launch involved collaborations with major chip manufacturers and inference platforms, including Huawei Ascend, Moore Threads, Muxi, Kunlunxin, NVIDIA, Together AI, Fireworks, and Ollama. On the first day of the open-source release, the model integration and inference adaptation were successfully completed.
#AI#MiniMax#M2.7 #OpenSource#GlobalLaunch#Partnerships#HuaweiAscend#MooreThreads#Muxi#Kunlunxin#NVIDIA#TogetherAI#Fireworks#Ollama#InferencePlatforms#ChipManufacturers