TGINSIGHT SIMILAR POSTS
Изворен канал @pythonotes · Post #335 · 29 мар.
В Linux стандартными средствами можно использовать часть оперативной памяти как диск. Для этого требуется указать тип монтирования tmpfs в команде mount mount -t tmpfs -o size=5G tmpfs /mnt/ram Теперь путь /mnt/ram можно использовать как обычный каталог. Для чего это может быть нужно? ▫️ Скорость работы с таким каталогом выше чем многие SSD и тем более HDD. ▫️ Если у вас очень быстрый SSD на NVMe M.2 то такой способ особо не прибавит вам скорости, но поможет сохранить ресурс SSD когда требуется обрабатывать очень много мелких файлов и оперативка позволяет выделить нужный объем. ▫️ Оперативка это энергозависимая память, поэтому выключении питания все файлы безвозвратно теряются. Такой "non persistent" каталог гарантирует удаление временных файлов. Я написал небольшой скрипт для условного теста и сравнения скорости копирования файлов между SSD и RAM. Вот мои результаты: Single File Size: 30.0Gb ssd > ssd: 0:00:12.850 / 2.3Gb/s sdd > ram: 0:00:06.453 / 4.6Gb/s ram > ram: 0:00:06.995 / 4.3Gb/s ram > sdd: 0:00:06.217 / 4.8Gb/s Dir size: 32.7Gb, File count: 11127 ssd > ssd: 0:00:15.063 / 2.2Gb/s sdd > ram: 0:00:08.486 / 3.9Gb/s ram > ram: 0:00:08.032 / 4.1Gb/s ram > sdd: 0:00:07.026 / 4.7Gb/s Скрипт для теста ↗️ На моём железе прирост скорости ~2x. Плюс экономия ресурса SSD. В Windows такой фишки по умолчанию нет, но обязательно найдутся аналогичные решения #linux#triks
Пребарај: #dl
@repo_science · Post #4131 · 18.05.2024 г., 21:06
#DL 📱 Zeus New Pytorch Ecosystem Tool Zeus is an open source toolkit for measuring and optimizing power consumption of deep learning workloads. 🖥Github ----- Main channel: @repo_science Coupons: @freecoupons_reposcience -----
Hashtags
@amneumarkt · Post #706 · 21.11.2025 г., 07:53
#dl Introducing more symmetries in attention https://github.com/NVIDIA/torch-harmonics https://neurips.cc/virtual/2025/loc/san-diego/poster/117783
Hashtags
@amneumarkt · Post #691 · 05.10.2025 г., 07:41
#dl Park, Chanwook, Sourav Saha, Jiachen Guo, Hantao Zhang, Xiaoyu Xie, Miguel A. Bessa, Dong Qian, et al. 2025. “Unifying Machine Learning and Interpolation Theory via Interpolating Neural Networks.” Nature Communications 16 (1): 1–12. https://www.nature.com/articles/s41467-025-63790-8
Hashtags
@amneumarkt · Post #683 · 28.06.2025 г., 07:04
#dl A few cool ideas in this model. Introducing Gemma 3n: The developer guide - Google Developers Blog https://developers.googleblog.com/en/introducing-gemma-3n-developer-guide/
Hashtags
@amneumarkt · Post #681 · 14.06.2025 г., 08:43
#dl So tensorflow and jax are deprecated in the transformers package. https://github.com/huggingface/transformers/pull/38758
Hashtags
@amneumarkt · Post #662 · 21.02.2025 г., 07:42
#dl Sure, nobody uses it anyways.
Hashtags
@amneumarkt · Post #625 · 03.10.2024 г., 21:31
#dl PyTorch Native Architecture Optimization: torchao | PyTorch https://pytorch.org/blog/pytorch-native-architecture-optimization/
Hashtags
@amneumarkt · Post #624 · 03.10.2024 г., 18:07
#dl https://soumith.ch/blog/2024-10-02-training-10k-scale.md.html
Hashtags
@amneumarkt · Post #602 · 20.07.2024 г., 05:48
#dl There is this new lib called scale. One could compile CUDA code to use it on AMD GPU. https://docs.scale-lang.com/manual/how-to-use/ I don't know who is more pissed off, NVidia or AMD.
Hashtags
@amneumarkt · Post #556 · 16.03.2024 г., 09:09
#dl This repo is really nice. yuanchenyang/smalldiffusion: Simple and readable code for training and sampling from diffusion models https://github.com/yuanchenyang/smalldiffusion
Hashtags
@amneumarkt · Post #506 · 13.11.2023 г., 08:30
#dl Google & USC benchmarked a prompt based forecasting method, and the results are amazing. Cao D, Jia F, Arik SO, Pfister T, Zheng Y, Ye W, et al. TEMPO: Prompt-based Generative Pre-trained Transformer for time series forecasting. arXiv [cs.LG]. 2023. Available: http://arxiv.org/abs/2310.04948
Hashtags
@amneumarkt · Post #484 · 12.06.2023 г., 06:13
#dl https://twitter.com/armin_kekic/status/1667181047480479751?s=20
Hashtags