TGTGInsighttelegram intelligenceLIVE / telegram public index
← Python Заметки

TGINSIGHT SIMILAR POSTS

Најди сличен содржај

Изворен канал @pythonotes · Post #121 · 20 јул.

Регулярно требуется преобразовать какой-либо текст в максимально совместимый текст для URL, имени файла, имени объекта в каком-то софте и тд. Требования совместимости простые: в тексте должны быть только допустимые символы. Обычно это a-z, 0-9 и "_" или "-". То есть, только прописные буквы латинского алфавита и цифры (как пример). Допустим, нам нужно название статьи в блоге преобразовать в slug для добавления его в URL этой статьи. Как это лучше всего сделать? В Django по умолчанию есть готовая функция slugify для таких случаев. Но я её никогда не использую. Почему? Потому что её недостаточно! Приведём пример >>> from django.utils.text import slugify >>> slugify('This is a Title') 'this-is-a-title' Пока всё отлично >>> slugify('This is a "Title!"') 'this-is-a-title' Спец символы удалились, всё хорошо. >>> slugify('Это заголовок статьи') '' Вот и приехали 😢. Если текст не английский то буквы просто игнорируются. Можно это поправить >>> slugify('Это заголовок статьи', allow_unicode=True) 'это-заголовок-статьи' Но тогда мы не вписываемся в условие. У нас появилась кириллица в тексте. Так как я часто пишу сайты для русскоязычных пользователей эта проблема весьма актуальна. Я не использую стандартную функцию и всегда пишу свою. Оригинал я не беру в расчёт и пишу полностью свою функцию. И так, по порядку: 🔸1. Исходный текст: >>> text = 'Мой заголовок №10 😁!' Взял специально посложней со специальными символами. 🔸2. Транслит Необходимо сделать транслит всех символов в латиницу. Здесь очень выручает библиотека unidecode. Помимо простого транслита кириллицы в латиницу она умеет преобразовывать спец символы и иероглифы в текстовые аналоги. from unidecode import unidecode >>> unidecode("Ñ Σ ® µ ¶ ¼ 月 山") 'N S (r) u P 1/4 Yue Shan' Очень крутая библиотека, советую👍 В нашем случае получаем такое преобразование: >>> text = unidecode(text) >>> print(text) 'Moi zagolovok No. 10 !' Отличный транслит. Смайл просто удалился, хотя я ждал что-то вроде :). Ну и ладно, всë равно невалидные символы. А еще наш код уже поддерживает любой язык, будь то хинди или корейский. 🔸4. Фильтр символов Unidecode не занимается фильтрацией по недопустимым символам. Это мы делаем в следующем шаге через regex. Просто заменим все символы на "_" если они вне указанного диапазона. >>> text = re.sub(r'[^a-zA-Z0-9]+', '_', text) >>> print(text) 'Moi_zagolovok_No_10_' Символ "+" в паттерне выручает когда несколько недопустимых символов идут рядом. Все они заменяются на один символ "_". 🔸5. Slugify Осталось удалить лишние символы по краям и сделать нижний регистр >>> text = text.strip('_').lower() >>> print(text) 'moi_zagolovok_no_10' Получаем отличный slug! 😎 🌎 Полный код в виде функции. ______________ PS. Проверку что в строке остался хоть один допустимый символ я бы вынес в отдельную функцию. #libs#tricks#django

Резултати

Пронајдени 2 слични објави

Пребарај: #humanities

当前筛选 #humanities清除筛选

«Социальная дилемма»: о цифровой этике и не только В летнем режиме смещаем фокус с digital на humanities и немного экспериментируем с рубриками. Сегодня мы вряд ли можем позволить себе решительно удалить все аккаунты в соцсетях и неделями не заглядывать в интернет (хотя бы для поддержания жизнеспособности своих проектов), но если есть потребность пересмотреть характер отношений с «матрицей» – рекомендуем ознакомиться с фильмом «Социальная дилемма» Джеффа Орловски. Это оригинальный документальный фильм от Netflix, который рассказывает об алгоритмах социальных сетей. История не нова: инженеры и разработчики, ориентированные на извлечение максимальной прибыли, используют манипулятивные методы, чтобы удержать внимание пользователей и заставить нас проводить в социальных сетях как можно больше времени. Но, кажется, это вопрос глобального характера: дело не только в том, что покупатель получает свой товар – трансформируются мышление, поведение и образ жизни людей. 💬 «Существует простая истина. Если вы не платите за товар – значит, вы и есть товар», – утверждает один из главных героев фильма, специалист по этике дизайна Google Тристан Харрис. Тристан вместе со многими другими бывшими высокопоставленными инженерами таких медиагигантов как Facebook*, Google, Apple, Twitter (*Meta, которой принадлежат Instagram и Facebook, признана экстремистской в России) основал «Центр гуманных технологий». Также затрагивается тема «капсулирования» пользователей в своих информационных коконах: алгоритмы старательно не показывают нам то, что вызывает у нас негативные эмоции и то, с чем мы не хотели бы соглашаться. К чему это приводит? К поляризации общественных групп и росту социальной напряжённости: люди ментально оказываются практически в разных реальностях. Что можно почитать на эту тему? Книга Surveillance Valley Яши Левина (в русской версии – «Интернет как оружие» издательства Индивидуум) #социальныесети#этика#humanities#чтопосмотреть#чтопочитать

🎓🇷🇺Κρατικό Πανεπιστήμιο του Βορονέζ Θέλετε να σπουδάσετε σε ένα κορυφαίο ρωσικό πανεπιστήμιο με διεθνή φήμη; Το διεθνές περιοδικό Higher Education Discovery σας παρουσιάζει το Κρατικό Πανεπιστήμιο του Βορονέζ (VSU), ένα πανεπιστήμιο που προσφέρει ένα ευρύ φάσμα προγραμμάτων σπουδών: από τις ανθρωπιστικές και κοινωνικές επιστήμες έως τις φυσικές και εφαρμοσμένες επιστήμες, καθώς και τη θεμελιώδη ιατρική. ▶️ Για περισσότερες πληροφορίες, επισκεφθείτε την ιστοσελίδα μας https://clck.ru/3FMA4T 🎓🇷🇺Воронежский государственный университет Хотите получить качественное образование в российском классическом университете? Международный журнал Higher Education Discovery представляет Воронежский государственный университет, который предлагает широкий спектр направлений от гуманитарных и социальных наук до естественных и точных, включая фундаментальную медицину. ▶️ Прочитать подробную информацию можно здесь https://clck.ru/3FMAKZ #ОбразованиевРоссии#educationinrussia#HED#VoronezhStateUniversity#HigherEducationDiscovery#RussianUniversities#StudyAbroad#VSU#InternationalEducation#QualityEducation#RussianCulture#StudentLife#GlobalOpportunities#Humanities#SocialSciences#MedicalEducation#NaturalSciences#EngineeringStudies#RussianLanguage#AcademicExcellence