TGTGInsighttelegram intelligenceLIVE / telegram public index
← GitHub Trends

TGINSIGHT SIMILAR POSTS

Find similar content

Source channel @githubtrending · Post #14974 · Jul 19

#cplusplus ik_llama.cpp is an improved version of llama.cpp that runs faster on CPUs and hybrid GPU/CPU setups. It supports many new advanced quantization methods, which help models use less memory and run more efficiently. It also offers better performance for special models like DeepSeek and MoE, with faster prompt processing and token generation. You can run it on various hardware, including Android, and it has features to control where model data is stored (CPU or GPU). This means you get quicker AI responses and can handle bigger or more complex models smoothly on your computer or device[2][1][4]. https://github.com/ikawrakow/ik_llama.cpp

Hashtags

Results

1 similar post found

Search: #functiongemma

当前筛选 #functiongemma清除筛选
Семён: Нейросети в каждый дом

@semasci · Post #1394 · 12/22/2025, 05:14 AM

Google выпустила ИИ, который работает в телефоне БЕЗ интернета 🤯 Это FunctionGemma. Модель, которая все меняет. 📱Что это? —270 млн параметров (в 6600 раз меньше GPT-4!) —Весит всего 288 МБ (меньше мобильной игры) —Работает полностью на устройстве —Никаких серверов, облака и отправки данных ⚡Как работает? Вы говорите:«Добавь контакт Маша, +7 999 123-45-67» → ИИ понимает команду → Превращает её в код → Телефон выполняет. Всё за 0,3 секунды. Без интернета. 🔒Почему это прорыв? •Конфиденциальность: данные никуда не уходят •Скорость: 126 токенов/сек, ответы мгновенные •Эффективность: 25 диалогов = всего 0,75% батареи •Оффлайн: работает где угодно — в метро, самолёте, горах 🎯Что уже умеет? —Ставить будильники —Создавать встречи в календаре —Включать/выключать умные устройства —Прокладывать маршруты —Вести простой трекинг (например, выпитой воды) 🚀 Но главное — это смена парадигмы. Не «чем больше модель — тем лучше», а «правильный ИИ для правильной задачи». Маленькая,но идеально обученная модель на устройстве может быть лучше огромного облачного ИИ. Будущее ИИ — не в дата-центрах, а в вашем кармане. И оно уже здесь. Где попробовать? →Скачать: ollama pull functiongemma →Документация: https://ai.google.dev/gemma/docs/functiongemma →Модель: https://huggingface.co/google/functiongemma-270m-it P.S. Если интересно — лайк и репост помогают каналу расти! Подписывайтесь, чтобы не пропустить главное об ИИ. #GoogleAI#FunctionGemma#оффлайнИИ Https://t.me/semasci