TGTGInsighttelegram intelligenceLIVE / telegram public index
← Python Заметки

TGINSIGHT SIMILAR POSTS

Најди сличен содржај

Изворен канал @pythonotes · Post #210 · 3 фев.

Что делать если нужно поставить какую-то Python-библиотеку а root-прав нет? То есть в систему библиотеку никак и ничего не поставить. Есть как минимум два способа это решить правильно! 🔸 Сделать виртуальное окружение и ставить там что угодно. Это позволит создать полностью независимое исполняемое окружение для ваших приложений. Все библиотеки будут храниться в домашней директории юзера а значит доступ на запись имеется. Создать очень просто: python3 -m venv ~/venvs/myenvname Теперь активируем окружение # Linux source ~/venvs/myenvname/bin/activate # Windows %userprofile%\venvs\myenvname\Scripts\activate.bat Можно ставить любые библиотеки и запускать приложение. Это стандартный метод работы с любым проектом. Если еще не используете его, то пора начинать. Даже при наличии root доступа! 🔸 Бывает, что нет возможности запустить приложение из своего виртуального окружения. Например, его запускает какой-то сервис от вашего юзера и вставить активацию окружения вы не можете. В этом случае можно установить библиотеки для Python не глобально в систему, а только для юзера. Выполните этот код в консоли: python3 -m site Вы получите что-то такое: sys.path = [ '/home/user', '/usr/lib/python37.zip', '/usr/lib/python3.7', '/usr/lib/python3.7/lib-dynload', '/home/user/.local/lib/python3.7/site-packages', ... ] USER_BASE: '/home/user/.local' USER_SITE: '/home/user/.local/lib/python3.7/site-packages' ENABLE_USER_SITE: True Нас интересует параметр USER_SITE. Это путь к пользовательским библиотекам, которые доступны по умолчанию, если они есть. Именно сюда будут устанавливаться модули если добавить флаг --user при установке чего-либо через pip pip install --user requests Для этой команды не нужны root-права. После неё можно запускать системный интерпретатор без виртуальных окружений и установленная библиотека будет доступна для текущего юзера. Параметр USER_BASE показывает корневую директорию для хранения user-библиотек. Её можно изменить с помощью переменной окружения PYTHONUSERBASE export PYTHONUSERBASE=~/pylibs python3 -m site ... USER_BASE: '/home/user/pylibs' USER_SITE: '/home/user/pylibs/lib/python3.7/site-packages' Получается некоторое подобие виртуального окружения для бедных 😁 которое можно менять через эту переменную (не делайте так!Лучше venv!) 🔸 Дописывание пути в PYTHONPATH Этот способ не входит в список "двух правильных", но тоже рабочий. Здесь придётся сделать всё несколько сложней. Сначала ставим библиотеку в любое место указывая путь установки pip3 install -t ~/mylibs modulename Библиотека установится без привязки к какому-либо интерпретатору. То есть по умолчанию не будет видна. Теперь в нужный момент добавляем этот путь в sys.path или в PYTHONPATH. Не буду советовать так делать. Единственный раз когда этот способ мне пригодился и решил поставленную задачу, это при создании общей библиотеки для кластера компьютеров. Модули лежат в сети и подгружаются для всех из одного и того же места. То есть обновлять файлы требуется только один раз а не на всех хосты отдельно. Минусы такого подхода: ▫️Нужно всем хостам пробить нужный путь в .bashrc или ещё куда-то чтобы он сетапился на старте. ▫️Чем больше хостов тем больше нагрузка на сеть. Иногда такой способ не подходит именно по этой причине. Тогда Ansible вам в помощь. ▫️Не очень подходит если хосты с разными операционками. Некоторые библиотеки различаются для Linux и Windows (там, где есть бинарники) и приходится мудрить более сложные схемы. #tricks#basic

Резултати

Пронајдени 46 слични објави

Пребарај: #gis

当前筛选 #gis清除筛选
AI для Всех

@nn_for_science · Post #1517 · 16.06.2023 г., 20:24

Выделение объектов на Лидаре с помощью ML LiDAR (Light identification, Detection and Ranging) - крутая штука. Это технология получения и обработки информации с помощью активных оптических систем (лазеров). Такой "лазерный дальнометр" для картирования объектов в 3Д и еще с координатами. Используется повсеместно в куче индустрий от беспилотных автомобилей до майнинга. Даже на айфонах есть (но не на моем 😢). На картинке, например, "лидарная" карта залива Линнхейвен в Вирджинии 🤩. Но я даже не про красивые картинки. Они же просто красивые, а пользы сами по себе приносят мало. Польза есть, если, например, из этих моделей, по сути точек с координатами, вытаскивать реальные объекты. То есть делать сегментацию 💡. Об этом и интересная статья на Медиуме: Introducing Segment-Lidar: Revolutionizing Unsupervised Instance Segmentation of Aerial LiDAR Data, которая рассказывает как применять крутейший алгоритм по выделению объектов SAM от компании Meta для выделения объектов на геопространственных данных, полученных с помощью Лидара (картинка 2). Статья, собственно, представляет собой пошаговую инструкцию, как это делать с помощью модуля в Питоне segment-lidar. 📖Medium 💻Github #GIS#ML

Hashtags

Earth&Climate Tech

@earth_climate_tech · Post #320 · 16.06.2023 г., 17:18

Выделение объектов на Лидаре с помощью ML LiDAR (Light identification, Detection and Ranging) - крутая штука. Это технология получения и обработки информации с помощью активных оптических систем (лазеров). Такой "лазерный дальнометр" для картирования объектов в 3Д и еще с координатами. Используется повсеместно в куче индустрий от беспилотных автомобилей до майнинга. Даже на айфонах есть (но не на моем 😢). На картинке, например, "лидарная" карта залива Линнхейвен в Вирджинии 🤩. Но я даже не про красивые картинки. Они же просто красивые, а пользы сами по себе приносят мало. Польза есть, если, например, из этих моделей, по сути точек с координатами, вытаскивать реальные объекты. То есть делать сегментацию 💡. Об этом и интересная статья на Медиуме: Introducing Segment-Lidar: Revolutionizing Unsupervised Instance Segmentation of Aerial LiDAR Data, которая рассказывает как применять крутейший алгоритм по выделению объектов SAM от компании Meta для выделения объектов на геопространственных данных, полученных с помощью Лидара (картинка 2). Статья, собственно, представляет собой пошаговую инструкцию, как это делать с помощью модуля в Питоне segment-lidar. 📖Medium 💻Github #GIS#ML

Hashtags

独立人指南

@Dulirenorg · Post #806 · 31.07.2021 г., 16:25

The essential wilderness navigator(野外导航指南) :Author: [US] David Seidman, Paul Cleveland :Year: 2001 :Pages: 175 :ISBN: 9780071361101 #booklist📚#gis

Data Science Jobs

@datasciencejobs · Post #2631 · 26.03.2025 г., 07:17

#вакансия#ML#datascience#computervision#fulltime#CV#GIS Вакансия: Computer Vision Engineer Компания: «ОЭЗ ППТ «Алабуга» Локация: Республика Татарстан, г. Елабуга Формат работы: Офис ЗП: от 375 000 ₽ Мы расширяем штат и ищем увлеченного инженера по компьютерному зрению для работы над инновационными проектами в сфере ГИС. Чем предстоит заниматься: - разработка и доработка моделей для детектирования и сопровождения объектов; - определение расстояния до объектов и ориентация в пространстве по видеоданным; - полный цикл разработки CV моделей: от постановки задачи до готового решения; - оптимизация и внедрение собственных моделей; - разработка внутренних инструментов для эксплуатации моделей; - интеграция CV в прикладные решения; - в перспективе координация Data Science команды. Требования к кандидату: - уверенные знания нейронных сетей (CNN, RNN, YOLO, семантическая сегментация); - опыт работы с Python и библиотеками для анализа данных (Pandas, NumPy, Scikit-learn, TensorFlow, PyTorch, Keras); - опыт работы с микрокомпьютерами (Raspberry Pi, Orange Pi) и NPU модулями; - умение работать с видеопотоками (RTSP, MJPEG); - умение анализировать задачи и данные, а также предлагать эффективные технические решения; - опыт в обработке изображений и анализе данных; - знание Docker и CI/CD (GitLab CI, Jenkins, Bamboo); - ответственность и нацеленность на результат. - опыт работы с камерами и 3D сканерами будет плюсом. Условия: - работа в крупной и стабильной компании – в структуре самой большой ОЭЗ в Европе; - стабильная, официальная и своевременная заработная плата (обсуждается по результатам собеседования); - график работы: 5/2 с 8:00 до 17:00; - транспорт до работы; - доступ к инфраструктуре мирового класса, включая современные офисы с необходимым для работы оборудованием и жилые комплексы; - гарантия профессионального роста и участие в уникальных и стратегических проектах. Если Вы ищете возможности для роста и готовы погрузиться в масштабные проекты, которые приносят реальную пользу, свяжитесь с нами! Контакты для связи:@anastasiya_alabuga

Data Science Jobs

@datasciencejobs · Post #2605 · 12.03.2025 г., 12:02

#вакансия#ML#datascience#computervision#fulltime#CV#GIS Вакансия: Computer Vision Engineer Компания: «ОЭЗ ППТ «Алабуга» Локация: Республика Татарстан, г. Елабуга Формат работы: Офис ЗП: от 375 000 ₽ Мы расширяем штат и ищем увлеченного инженера по компьютерному зрению для работы над инновационными проектами в сфере геоинформационных систем. Чем предстоит заниматься: - разработка и доработка моделей для детектирования и сопровождения объектов; - определение расстояния до объектов и ориентация в пространстве по видеоданным; - полный цикл разработки CV моделей: от постановки задачи до готового решения; - оптимизация и внедрение собственных моделей; - разработка внутренних инструментов для эксплуатации моделей; - интеграция CV в прикладные решения; - написание кода для обработки изображений с использованием Python, TensorFlow, PyTorch и др. - в перспективе координация Data Science команды. Требования к кандидату: - уверенные знания нейронных сетей (CNN, RNN, YOLO, семантическая сегментация); - опыт работы с Python и библиотеками для анализа данных (Pandas, NumPy, Scikit-learn, TensorFlow, PyTorch, Keras); - опыт работы с микрокомпьютерами (Raspberry Pi, Orange Pi) и NPU модулями; - умение работать с видеопотоками (RTSP, MJPEG); - умение анализировать задачи и данные, а также предлагать эффективные технические решения; - опыт в обработке изображений и анализе данных; - знание Docker и CI/CD (GitLab CI, Jenkins, Bamboo); - ответственность и нацеленность на результат. - опыт работы с камерами и 3D сканерами будет плюсом. Условия: - работа в крупной и стабильной компании – в структуре самой большой ОЭЗ в Европе; - стабильная, официальная и своевременная заработная плата (обсуждается по результатам собеседования); - график работы: 5/2 с 8:00 до 17:00; - транспорт до работы; - доступ к инфраструктуре мирового класса, включая современные офисы с необходимым для работы оборудованием и жилые комплексы; - гарантия профессионального роста и участие в уникальных и стратегических проектах. Если Вы ищете возможности для роста и готовы погрузиться в масштабные проекты, которые приносят реальную пользу, свяжитесь с нами! Контакты для связи:@anastasiya_alabuga

Маленький преданонс. В августе-ноябре 2018 года мы в Информационная культура и Ассоциация участников рынка данных, а конкретно я лично проводили обследование открытых интерфейсов государственных информсистем и иных информационных систем под госрегулированием на предмет раскрытия из них персональных данных пользователей. Только на основе общедоступной информации. Результаты не были публичными, их направили в Минсвязь, Роскомнадзор, Генпрокуратуру, что-то всё ещё в работе, а многое уже исправлено. Около половины найденного - это сведения из удостоверяющих центров, государственных и не очень. И как раз в их случае большая часть найденного уже исправлена, а остальные не исправят пока их явно не "пнешь" похоже. Лично я долго думал что делать с найденным. Можно ли делать общедоступными результаты этого исследования? Можно ли рассказывать о путях вылова раскрытия перс. данных в информационных системах. В итоге ту часть исследования которая касается удостоверяющих центров мы будем делать общедоступной. Это подробный анализ систем с конкретными путями воспроизведения и скриншотами по 17 УЦ в которых выявлена эта история (из примерно 50% существующих которые мы проверили). Сейчас есть развилка: 1. Сделать это в виде собственного доклада, после перепроверки и дополнения информацией о том что было исправлено в итоге после чего рассылать пресс-релиз. 2. Поделиться с одним из крупных федеральных изданий под то что у них будет 1-2 журналиста готовых проверить то что тогда было выявлено и что исправлено и написать об этом качественный материал сославшись на Инфокультуру и Ассоциацию. Может быть даже провести это исследование повторно охватив 100% УЦ. Если есть идеи и предложения как это лучше сделать - пишите мне на [email protected] #openness#investigations#gis#personaldata

ПретходнаСтраница 1 од 4Следна