TGTGInsighttelegram intelligenceLIVE / telegram public index
← Python Заметки

TGINSIGHT SIMILAR POSTS

Најди сличен содржај

Изворен канал @pythonotes · Post #121 · 20 јул.

Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример). Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать? В Django по умолчанию есть готовая функция slugify для таких случаев. Но я её никогда не использую. Почему? Потому что её недостаточно! Приведём пример >>> from django.utils.text import slugify >>> slugify('This is a Title') 'this-is-a-title' Пока всё отлично >>> slugify('This is a "Title!"') 'this-is-a-title' Спец символы удалились, всё хорошо. >>> slugify('Это заголовок статьи') '' Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить >>> slugify('Это заголовок статьи', allow_unicode=True) 'это-заголовок-статьи' Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте. Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою. Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку: 🔸1. Исходный текст: >>> text = 'Мой заголовок №10 😁!' Взял специально посложней со специальными символами. 🔸2. Транслит Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги. from unidecode import unidecode >>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山") 'N S (r) u P 1/4 Yue Shan' Очень крутая библиотека, советую👍 В нашем случае получаем такое преобразование: >>> text = unidecode(text) >>> print(text) 'Moi zagolovok No. 10 !' Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы. А еще наш код уже поддерживает любой язык, будь то хинди или корейский. 🔸4. Фильтр символов Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона. >>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text) >>> print(text) 'Moi_zagolovok_No_10_' Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_". 🔸5. Slugify Осталось удалить лишние символы по краям и сделать нижний регистр >>> text = text.strip('_').lower() >>> print(text) 'moi_zagolovok_no_10' Получаем отличный slug! 😎 🌎 Полный код в виде функции. ______________ PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию. #libs#tricks#django

Резултати

Пронајдени 1 слични објави

Пребарај: #vage

当前筛选 #vage清除筛选

Укрепляю базу: сделал пару покупочек 🛒📈 #ETF на мировую экономику Решил немного расширить широкую позицию по рынку. Да, есть опасения по поводу конфликтов, да, есть ещё куча иных обстоятельств, но я хочу верить, что с миром ничего не станет, поэтому считаю небольшое довложение разумным. Но с оговорками: в этот раз с меньшим участием Дяди Сэма. Обойдёмся без классических #MSCI World, а то они чрезмерно любят американские активы. 🔹#GERD— L&G Gerd Kommer Multifactor — Индекс использует хитрое взвешивание активов: 50% по рыночной капитализации и 50% по ВВП страны. Это снижает доминацию компаний из США с их огромными показателями «перекупленности». Охват: Более 4000 акций, включая малую капитализацию (Small Caps) и развивающиеся рынки (Emerging Markets). 🔹#PSRW— Invesco FTSE RAFI All-World 3000 — Индекс, где активы взвешены на основе выручки, кэш-флоу, дивидендов и балансовой стоимости. Такой подход исключает переоцененные «акции роста», преобладающие на рынке США, и естественным образом балансирует портфель в сторону стоимостных активов Европы и Азии. Охват: 3000 акций со всего мира, включая развивающиеся рынки. #Облигации Исходя из последнего отчёта, они сильно отклоняются от моей целевой аллокации, поэтому решил добавить пару фондов. Все они «распределяющие» (Dist), что подразумевает стабильный кэш-флоу. В условиях грядущей нестабильности, которую я продолжаю ждать по уже не раз описанным причинам, это даст возможность докупать подешевевшие активы на живые деньги. 🔹#VAGE— Vanguard Global Agg Bond (EUR Hedged) — Фонд аккумулирует более 11 000 выпусков облигаций (государственных и корпоративных), по сути охватывая весь «серьезны» мировой долговой рынок. Он хеджирован под евро: это должно спасти от курсовых колебаний, если доллар будет дальше валиться или если Европа выйдет победителем из кризиса и наша общая валюта начнёт укрепляться. Бонус — фонд платит дивиденды ежемесячно 💶 🔹#IEAC— iShares Core EUR Corporate — Долги крупных компаний инвестиционного рейтинга в EUR. Предлагают доходность чуть выше государственных бумаг при сохранении высокого кредитного качества. Внутри — более 4 000 выпусков корпоративных облигаций ультра-класса развитых экономик. Обычно в послесловие задаю какой-то вопрос, на который редко кто отвечает. Честно, я напоминаю сам себе дятла, так что в этот раз без него 😎