TGTGInsightтелеграм анализLIVE / telegram public index
← Такты, стеки, два колеса

TGINSIGHT SIMILAR POSTS

Намери подобно съдържание

Изходен канал @clockstackwheels · Post #851 · 2.08

Впервые использовал нейросетку для реальной практической пользы в коммерческом заказе. У заказчика есть база данных, куда информация вносится кое-как. Представьте, что вы составляете каталог, например, книг, и в базе данных предусмотрены поля: "Автор книги", "Название книги", "Число страниц" и ещё десяток других полей с информацией. Но заполняют эту базу другие люди, которых вы не контролируете, поэтому информация может случайным образом лежать в любом произвольном поле, быть введена с ошибками, опечатками и так далее. В реальном заказе были не книги, я просто привожу пример такой же задачи. Вот как это может выглядеть: 1. В поле "Автор" написано "Лондон, Дж. Белый Клык", поле "Название" при этом пустое. 2. В поле "Название" написано "150-страничный сборник рецептов", поле "Число страниц" пустое 3. В поле "Название" написано "джеклондон мартин иден", поле с автором пустое 4. В поле "Автор" написано "150-стр.3изд,доп.перераб инструкция по пользованию подстанциями типа ТП-13, М.Васильев москва 98" ...и так далее. А нужно искать нормально по автору, названию, числу страниц, городу и году издания. Никакими прямыми алгоритмами это не берётся: регулярки, поиск по ключевым словам, морфология, нечёткая логика — всё это либо даёт много ложноположительных результатов, либо (если подкрутить пороговые значения) вообще перестаёт искать. И вот тут в какой-то момент мы решили попробовать запрашивать через API GPT. Нейросетке задаётся следующий промт: "Есть следующая информация: «150-страничный роман джеклондон мартин иден». Если здесь есть то, что похоже на имя автора книги, напиши мне его, иначе ответь null". И, надо сказать, даже 3.5 справляется с этой работой очень хорошо. Получилось сравнительно без ошибок разметить около 80% данных (остальные с ошибками даже после нейросетки). Но, важный нюанс. Сначала мы пытались поймать все данные одним запросом: "GPT, выведи мне JSON, в котором есть автор, название, число страниц...", но тесты показали, что значительно эффективнее будет отдельно спросить 5 раз про 5 разных типов данных. Да, это расходует больше токенов, но они и так сравнительно дёшевы. Кстати, API у OpenAI безбожно глючит даже на платном тарифе. Обещанных 3500 запросов в минуту нет даже приблизительно. По факту удаётся отправлять около 200-300 запросов в минуту, потом оно вываливается в таймауты или ошибку 429, нужно делать какие-то умные паузы, ждать итд. Над этим всем пришлось повозиться, зато результат вполне ощутимый. #dev

Hashtags

Резултати

Намерени 17 подобни публикации

Търсене: #sqlite

当前筛选 #sqlite清除筛选
Android Broadcast

@android_broadcast · Post #8752 · 04.03.2025 г., 09:33

Как мы ускорили работу с базой данных в Android-приложении (11м) Разработчик поделился опытом, какие практики применялись для ускорения работы с SQLite в Android: неоптимальные обращения к БД в циклах и их последствия. Также не стоит хранить JSON-объекты в виде строк в БД (это кажется слишком очевидным). Команда столкнулась с этими проблемами, объяснила, почему это плохо, и как можно исправить ситуацию, чтобы производительность приложения не снижалась из-за обращений к БД. #android#sqlite#производительность

Android Broadcast

@android_broadcast · Post #9557 · 13.10.2025 г., 13:18

🤖Скрытые угрозы Room: почему база тормозит и как это исправить Важные советы всем кто используют Room, чтобы база работала быстро: 👉Индексы — ваши лучшие друзья: без них запросы деградируют до O(n) 👉Транзакции важны: SQLite разработан для эффективной пакетной обработки 👉Разбиение на страницы крайне важно: никогда не пытайтесь одновременно обрабатывать тысячи строк 👉Режим Write-Ahead Logging (WAL) критически важен, особенно для параллельных операций чтения и записи 👉Настраивайте схему БД для практической производительности, а не только для академической нормализации Больше полезных советов в статье #android#room#sqlite

Android Broadcast

@android_broadcast · Post #8664 · 11.02.2025 г., 06:00

Выполнение запросов SQLite на множестве потоков может привести к замедлению вашего приложения🤯 Разработчик делает классный разбор того, как работают запросы SQLite в Android и как их оптимизировать. Статья - параллельность в Android SQLite (EN,11м) Основные выводы: 👉 Используйте забандленную версию SQLite (добавит около 1 Мб за каждый ABI) 👉 Если работает с несколькими БД через ROOM, то задавайте CoroutineContext или Executor для выполнения запросов 👉Больше полезного в статье, почитай. Она того стоит #android#room#sqlite#jetpack

Android Broadcast

@android_broadcast · Post #8662 · 10.02.2025 г., 08:50

📹 В Jetpack Room есть возможность использовать не встроенный в Android ОС SQLite, а вместо этого использовать самую свежую версию (вес около 1 МБ для каждого ABI). Это позволит использовать единую версию SQLite на всех устройствах и получать преимущества в скорости работы от новых функций. Причем эта возможность доступна для всех поддерживаемых платформ, которые поддерживает Room: Android, iOS, Desktop. 📹Доклад с Droidcon от гуглера о том, как это сделать (EN, 15м) 🔗Подробности в документации #android#sqlite#room#jetpack

Android Broadcast

@android_broadcast · Post #8617 · 30.01.2025 г., 09:07

🚀 Вышел Room 2.7.0-alpha13 Библиотека мигрирует на Kotlin 2.0+ и весь проект должен будет тоже использовать её. Хотите KMP - точно надо будет мигрировать на Kotlin 2.0 Это последний альфа релиз и дальше будет Beta и уже совсем скоро релиз. #android#kmp#jetpack#jetpackupdate#sqlite

探索号

@seeker_rc · Post #20233 · 11.05.2026 г., 08:25

💡 大产品小细节 想到微信以 sqlite 的方式把数据储存在手机上,可能占 100G 空间 考虑到储存周期推动手机价格上涨,微信的实际使用成本可能反而是所有软件里最高昂的 当然可能这也是相对的,说明人的储存相对于机器的储存更廉价 / 当然 WhatsApp 好像也是把储存放在手机上的 via 大产品小细节 标签: #储存#手机#sqlite ⚡️探索号频道 ⚡️探索者频道 ⚡️探索者交流群 ⚡️ Youtube 频道:科技探索者 每天推荐有趣内容,欢迎订阅、转发。

DOFH - DevOps from hell

@dofh_ru · Post #3530 · 30.12.2024 г., 20:57

🗜 In search of a faster SQLite - ребята взяли и переписали SQLite на Rust и утверждают, что смогли добиться серьёзного прироста в производительности при сохранении совместимости с SQLite непосредственно. Проект называется Limbo, вот здесь о нём можно почитать подробнее... - Статья: https://avi.im/blag/2024/faster-sqlite/ - Github: https://github.com/tursodatabase/limbo #sqlite#напочитать#limbo

Android Broadcast

@android_broadcast · Post #8678 · 12.02.2025 г., 19:31

🚀 Вышла первая Beta версия Room 2.7.0. Самое важное нововведение - переход на KMP с поддержкой Android, iOS и Desktop 🔥🔥🔥. Также на Android теперь можно использовать SQLite из артефакта, а не только тот что в Android ОС #android#kmp#jetpack#room#sqlite

Android Broadcast

@android_broadcast · Post #8928 · 10.04.2025 г., 04:17

🚀 Вышел Jetpack Sqlite 2.5.0 с поддержкой KMP и добавлением абстракция над реализация SQLite в платформе или вовсе поставлять реализацию SQLite вместе с вашим приложением, чтобы всегда иметь самую свежую версий движка БД. #sqlite#jetpack#android#ios#desktop

12
ПредишнаСтр. 1 от 2Следваща