TGTGInsightтелеграм анализLIVE / telegram public index
← Такты, стеки, два колеса

TGINSIGHT SIMILAR POSTS

Намери подобно съдържание

Изходен канал @clockstackwheels · Post #851 · 2.08

Впервые использовал нейросетку для реальной практической пользы в коммерческом заказе. У заказчика есть база данных, куда информация вносится кое-как. Представьте, что вы составляете каталог, например, книг, и в базе данных предусмотрены поля: "Автор книги", "Название книги", "Число страниц" и ещё десяток других полей с информацией. Но заполняют эту базу другие люди, которых вы не контролируете, поэтому информация может случайным образом лежать в любом произвольном поле, быть введена с ошибками, опечатками и так далее. В реальном заказе были не книги, я просто привожу пример такой же задачи. Вот как это может выглядеть: 1. В поле "Автор" написано "Лондон, Дж. Белый Клык", поле "Название" при этом пустое. 2. В поле "Название" написано "150-страничный сборник рецептов", поле "Число страниц" пустое 3. В поле "Название" написано "джеклондон мартин иден", поле с автором пустое 4. В поле "Автор" написано "150-стр.3изд,доп.перераб инструкция по пользованию подстанциями типа ТП-13, М.Васильев москва 98" ...и так далее. А нужно искать нормально по автору, названию, числу страниц, городу и году издания. Никакими прямыми алгоритмами это не берётся: регулярки, поиск по ключевым словам, морфология, нечёткая логика — всё это либо даёт много ложноположительных результатов, либо (если подкрутить пороговые значения) вообще перестаёт искать. И вот тут в какой-то момент мы решили попробовать запрашивать через API GPT. Нейросетке задаётся следующий промт: "Есть следующая информация: «150-страничный роман джеклондон мартин иден». Если здесь есть то, что похоже на имя автора книги, напиши мне его, иначе ответь null". И, надо сказать, даже 3.5 справляется с этой работой очень хорошо. Получилось сравнительно без ошибок разметить около 80% данных (остальные с ошибками даже после нейросетки). Но, важный нюанс. Сначала мы пытались поймать все данные одним запросом: "GPT, выведи мне JSON, в котором есть автор, название, число страниц...", но тесты показали, что значительно эффективнее будет отдельно спросить 5 раз про 5 разных типов данных. Да, это расходует больше токенов, но они и так сравнительно дёшевы. Кстати, API у OpenAI безбожно глючит даже на платном тарифе. Обещанных 3500 запросов в минуту нет даже приблизительно. По факту удаётся отправлять около 200-300 запросов в минуту, потом оно вываливается в таймауты или ошибку 429, нужно делать какие-то умные паузы, ждать итд. Над этим всем пришлось повозиться, зато результат вполне ощутимый. #dev

Hashtags

Резултати

Намерени 2 подобни публикации

Търсене: #paura

当前筛选 #paura清除筛选
Savino Balzano

@savinobalzano · Post #757 · 25.09.2024 г., 15:00

https://x.com/SavinoBalzano/status/1838956477412671791?t=7zr8BT_F7_hp0I-qp5fG1A&s=19 Si esulta perché il #coraggio e l'#amore hanno prevalso sull'#odio e la #paura: raggiunte le 500 mila firme per il #ReferendumCittadinanza. Bene. Domandina per quelli buoni, per gli esponenti del #PD, ad esempio: se la normativa attuale è vergognosa (peraltro fu Amato, nel 1992, a introdurla) e manifestazione di odio e paura, perché non l'avete mai modificata nei vostri lunghissimi anni di #governo? Si, perché il Partito Democratico - nonostante non abbia mai vinto le elezioni - è praticamente sempre stato in maggioranza (forse, "democratico" solo di nome). Chi vi ha impedito di far prevalere in quei lunghi anni l'amore e il coraggio? di tempo per spazzare via odio e paura ne avete avuto moltissimo in effetti. Le nostre regole sulla #cittadinanza non ci hanno impedito (dati Eurostat 2022) di piazzarci al quinto posto per cittadinanze concesse in rapporto alla popolazione. Inoltre, nel 2019, Migration Policy Group attestava che ottenere la cittadinanza italiana fosse più facile che ottenere quella spagnola e che la difficoltà di ottenere la tedesca fosse assai simile alla nostra. In effetti, molto più semplice era ottenere la francese e abbiamo visto cosa ha comportato in termini di cattiva integrazione e instabilità sociale. Occhio poi a un fatto: la nostra normativa in materia di ricongiungimento familiare è piuttosto semplificata e l'allargamento della concessione della cittadinanza deve essere ponderato anche in considerazione di questo aspetto. La contraddizione di fondo è però un'altra: la #sinistrucola ci deve spiegare, oltre a dare ai migranti un bel pezzo di carta, cos'altro voglia offrire loro: caporalato? sfruttamento? precarietà? Come le integriamo, dignotosamente, tutte queste persone, con quali risorse? Soprattutto se nel frattempo si continua ad applaudire a un'#UE che insiste nel chiedere un poderoso taglio alla spesa pubblica. La questione riguarda tutti, dal momento che chi non riesce ad integrarsi rischia di dover delinquere per sopravvivere e di insicurezza ne patiamo già troppa. Voi che siete quelli buoni e coraggiosi, fateci sapere che tocca fare. Altrimenti? Altrimenti avremo contato più di 500 mila ipocriti. La mia a #5Notizie, #RadioCusanoCampus.

É sempre difficile confrontarsi con la propria oscurità. #vaporonda#vaporwave#vapourwave#vaporart#seapunk#webpunk#glitch#glitchart#glitchartistscollective#chillwave#aesthetic#vaporwaveaesthetic#vaporwaveaesthetics#malinconia#melancholy#tristezza#sadness#sadboy#lofi#oscurità#darkness#ombra#shadow#paura#fear