TGTGInsighttelegram intelligenceLIVE / telegram public index
← Python Заметки

TGINSIGHT SIMILAR POSTS

Најди сличен содржај

Изворен канал @pythonotes · Post #210 · 3 фев.

Что делать если нужно поставить какую-то Python-библиотеку а root-прав нет? То есть в систему библиотеку никак и ничего не поставить. Есть как минимум два способа это решить правильно! 🔸 Сделать виртуальное окружение и ставить там что угодно. Это позволит создать полностью независимое исполняемое окружение для ваших приложений. Все библиотеки будут храниться в домашней директории юзера а значит доступ на запись имеется. Создать очень просто: python3 -m venv ~/venvs/myenvname Теперь активируем окружение # Linux source ~/venvs/myenvname/bin/activate # Windows %userprofile%\venvs\myenvname\Scripts\activate.bat Можно ставить любые библиотеки и запускать приложение. Это стандартный метод работы с любым проектом. Если еще не используете его, то пора начинать. Даже при наличии root доступа! 🔸 Бывает, что нет возможности запустить приложение из своего виртуального окружения. Например, его запускает какой-то сервис от вашего юзера и вставить активацию окружения вы не можете. В этом случае можно установить библиотеки для Python не глобально в систему, а только для юзера. Выполните этот код в консоли: python3 -m site Вы получите что-то такое: sys.path = [ '/home/user', '/usr/lib/python37.zip', '/usr/lib/python3.7', '/usr/lib/python3.7/lib-dynload', '/home/user/.local/lib/python3.7/site-packages', ... ] USER_BASE: '/home/user/.local' USER_SITE: '/home/user/.local/lib/python3.7/site-packages' ENABLE_USER_SITE: True Нас интересует параметр USER_SITE. Это путь к пользовательским библиотекам, которые доступны по умолчанию, если они есть. Именно сюда будут устанавливаться модули если добавить флаг --user при установке чего-либо через pip pip install --user requests Для этой команды не нужны root-права. После неё можно запускать системный интерпретатор без виртуальных окружений и установленная библиотека будет доступна для текущего юзера. Параметр USER_BASE показывает корневую директорию для хранения user-библиотек. Её можно изменить с помощью переменной окружения PYTHONUSERBASE export PYTHONUSERBASE=~/pylibs python3 -m site ... USER_BASE: '/home/user/pylibs' USER_SITE: '/home/user/pylibs/lib/python3.7/site-packages' Получается некоторое подобие виртуального окружения для бедных 😁 которое можно менять через эту переменную (не делайте так!Лучше venv!) 🔸 Дописывание пути в PYTHONPATH Этот способ не входит в список "двух правильных", но тоже рабочий. Здесь придётся сделать всё несколько сложней. Сначала ставим библиотеку в любое место указывая путь установки pip3 install -t ~/mylibs modulename Библиотека установится без привязки к какому-либо интерпретатору. То есть по умолчанию не будет видна. Теперь в нужный момент добавляем этот путь в sys.path или в PYTHONPATH. Не буду советовать так делать. Единственный раз когда этот способ мне пригодился и решил поставленную задачу, это при создании общей библиотеки для кластера компьютеров. Модули лежат в сети и подгружаются для всех из одного и того же места. То есть обновлять файлы требуется только один раз а не на всех хосты отдельно. Минусы такого подхода: ▫️Нужно всем хостам пробить нужный путь в .bashrc или ещё куда-то чтобы он сетапился на старте. ▫️Чем больше хостов тем больше нагрузка на сеть. Иногда такой способ не подходит именно по этой причине. Тогда Ansible вам в помощь. ▫️Не очень подходит если хосты с разными операционками. Некоторые библиотеки различаются для Linux и Windows (там, где есть бинарники) и приходится мудрить более сложные схемы. #tricks#basic

Резултати

Пронајдени 2 слични објави

Пребарај: #urbandata

当前筛选 #urbandata清除筛选
О городах и данных

@datainthecity · Post #3 · 04.09.2020 г., 19:38

Начну с одного из своих любимых примеров использования городских данных из столицы Шотландии, Эдинбурга. Каждый август там проходит международный фестиваль Edinburgh Festival Fringe, на который приезжают тысячи туристов и, конечно, стандартное расписание транспорта этого относительно небольшого города не справляется с такой нагрузкой. Чтобы подстроить работу автобусов и поездов ( многие туристы ночуют вне Эдинбурга) под спрос, городские власти совместно с департаментом транспорта и университетом Эдинбурга, собирают статистику с учреждений-участников фестиваля о времени проведения их мероприятий и количестве зарегистрировавшихся, и, исходя из этого, определяют в какие часы, какое количество дополнительных рейсов и куда должно быть направлено. Говорят, что регулируют даже светофоры. Система пока не настроена, чтобы работать реал-тайм, поэтому решения принимаются заранее на основе ожидаемых цифр и исторических данных. В целом, это понятный и эффективный пример того, как данные помогают избежать перегруженности транспорта во время массовых мероприятий. Может и нашим властям попробовать вместо того, чтобы закрывать метро, подстраивать работу транспорта под спрос? #urbandata#urbanalytics#scotland#smartcity

О городах и данных

@datainthecity · Post #19 · 08.09.2020 г., 07:32

Качество инфраструктуры-важный, но не единственный параметр при принятии решения о переезде в новый район. Другой вопрос, которые возникает в головах у многих : "а кто мои будущие соседи?". "С кем будет учиться ребенок в школе, безопасно ли вечером на площадке у дома, будут ли у меня партнеры по бегу?" . Здесь я вас разочарую : в России на эти вопросы вам ответят только бабушки на лавочке у подъезда. А вот в Европе, и в частности Британии, такую бабушку заменяет .. перепись населения! Да, та самая, которая проводится раз в 10 лет и во время которой незнакомые люди с бумажными анкетами, спрашивают вас, сколько человек у вас в семье и кто вы по-национальности Дело в том, что в Британии результаты переписи населения предназначены для аудитории значительно шире российской,а потому и данных собирается в разу больше. Сравните. В России: " цель.. - формирование федеральных информационных ресурсов". В Британии: "перепись.. дает лицам, принимающим решения в национальных и местных органах власти, общественных группах, благотворительных организациях и предприятиях, возможность лучше обслуживать сообщества и отдельных лиц. в Соединенном Королевстве". В России есть 10 показателей в разрезе регионов, в Британии 104 в 13 географических разрезах от страны до почтового индекса ( 15-20 квартир). Как результат, в России максимум, что я могу узнать, что в Тюменской области в городах живут 343тыс рабочего населения возрастом от 20-30 лет; в Британии, что в Ливерпуле в районе центрального железнодорожного вокзала живет 3700 человек от 20 до 35 лет, из которых 114 - владельцы собственного бизнеса на фул-тайм и 18 из них еще параллельно учатся. Заметили разницу? Кроме того в Британии помимо основной анкеты про пол/возраст/национальность есть еще расширенная, по которой опрашивают выборочно, но так чтобы составить полное представление о каждом районе. Вопросы такие: сколько часов в день у них уходит на дорогу на работу, как часто члены семьи ездят на машине/велосипеде/автобусе, как давно переехали в эту квартиру, какой процент дохода тратите на коммунальные услуги и т.д. Все эти данные крайне важны для политиков,городских планировщиков, социальных служб, исследователей и да, для тех, кто выбирает новый район для жизни, ведь с точностью до 20 квартир можно многое узнать про соседей. Британский сайт переписи : https://www.nomisweb.co.uk/census/2011/data_finder Российский сайт переписи: https://vpngis.gks.ru:8443/ #census#opendata#urbandata#datainthecity#перепись2021