TGTGInsightтелеграм анализLIVE / telegram public index
← Такты, стеки, два колеса

TGINSIGHT SIMILAR POSTS

Намери подобно съдържание

Изходен канал @clockstackwheels · Post #851 · 2.08

Впервые использовал нейросетку для реальной практической пользы в коммерческом заказе. У заказчика есть база данных, куда информация вносится кое-как. Представьте, что вы составляете каталог, например, книг, и в базе данных предусмотрены поля: "Автор книги", "Название книги", "Число страниц" и ещё десяток других полей с информацией. Но заполняют эту базу другие люди, которых вы не контролируете, поэтому информация может случайным образом лежать в любом произвольном поле, быть введена с ошибками, опечатками и так далее. В реальном заказе были не книги, я просто привожу пример такой же задачи. Вот как это может выглядеть: 1. В поле "Автор" написано "Лондон, Дж. Белый Клык", поле "Название" при этом пустое. 2. В поле "Название" написано "150-страничный сборник рецептов", поле "Число страниц" пустое 3. В поле "Название" написано "джеклондон мартин иден", поле с автором пустое 4. В поле "Автор" написано "150-стр.3изд,доп.перераб инструкция по пользованию подстанциями типа ТП-13, М.Васильев москва 98" ...и так далее. А нужно искать нормально по автору, названию, числу страниц, городу и году издания. Никакими прямыми алгоритмами это не берётся: регулярки, поиск по ключевым словам, морфология, нечёткая логика — всё это либо даёт много ложноположительных результатов, либо (если подкрутить пороговые значения) вообще перестаёт искать. И вот тут в какой-то момент мы решили попробовать запрашивать через API GPT. Нейросетке задаётся следующий промт: "Есть следующая информация: «150-страничный роман джеклондон мартин иден». Если здесь есть то, что похоже на имя автора книги, напиши мне его, иначе ответь null". И, надо сказать, даже 3.5 справляется с этой работой очень хорошо. Получилось сравнительно без ошибок разметить около 80% данных (остальные с ошибками даже после нейросетки). Но, важный нюанс. Сначала мы пытались поймать все данные одним запросом: "GPT, выведи мне JSON, в котором есть автор, название, число страниц...", но тесты показали, что значительно эффективнее будет отдельно спросить 5 раз про 5 разных типов данных. Да, это расходует больше токенов, но они и так сравнительно дёшевы. Кстати, API у OpenAI безбожно глючит даже на платном тарифе. Обещанных 3500 запросов в минуту нет даже приблизительно. По факту удаётся отправлять около 200-300 запросов в минуту, потом оно вываливается в таймауты или ошибку 429, нужно делать какие-то умные паузы, ждать итд. Над этим всем пришлось повозиться, зато результат вполне ощутимый. #dev

Hashtags

Резултати

Намерени 10 подобни публикации

Търсене: #deva

当前筛选 #deva清除筛选
Ultimora.net - POLITICS

@Ultimorapolitics · Post #37627 · 26.04.2022 г., 13:35

#Sondaggi#Turchia Sondaggio di ASAL: #AKP|Destra: 36% (+1,5) #CHP|S&D: 25% (-1) #İYİ|Centro-destra: 12% #HDP|S&D: 10,5% (+0,5) #MHP|Estrema destra: 9% #DEVA|Centro: 2% #YRP|Estrema destra islamica: 1% #SP|Estrema destra islamica: 1% #GP|Centro-destra: 1% Data rilevazione: 8-10 aprile +/-: 15-18 marzo Intervistati: 2100 @UltimoraPolitics

Ultimora.net - POLITICS

@ultimoraPOLITICS · Post #39591 · 17.05.2022 г., 14:04

#Sondaggi#Turchia Sondaggio di AKAM: #CHP|S&D: 30,5% (-1) #AKP|Destra: 29,5% (-1,5) #İYİ|Centro-destra: 13% #HDP|S&D: 10% #MHP|Estrema destra: 6% #DEVA|Centro: 5% (+1) #ZAFER|Destra kemalista: 2% (+1) #GP|Centro-destra: 2% (+1) #SP|Estrema destra islamica: 1% Data rilevazione: 27 aprile-3 maggio +/-: 24-29 marzo Intervistati: 2460 @UltimoraPolitics

Ultimora.net - POLITICS

@ultimoraPOLITICS · Post #39874 · 06.06.2022 г., 20:50

#Sondaggi#Turchia Sondaggio di AKAM: #CHP|S&D: 31% (+0,5) #AKP|Destra: 29,5% #İYİ|Centro-destra: 13% #HDP|S&D: 9% (-1) #MHP|Estrema destra: 5% (-1) #DEVA|Centro: 5% #GP|Centro-destra: 2% #ZAFER|Destra kemalista: 2% #SP|Estrema destra islamica: 1% #YRP|Estrema destra islamica: 1% (+1) Data rilevazione: 26 maggio-1° giugno +/-: 27 aprile-3 maggio Intervistati: 1500 @UltimoraPolitics

Ultimora.net - POLITICS

@UltimoraPOlitics · Post #39180 · 10.05.2022 г., 16:12

#Sondaggi#Turchia Sondaggio di İEA: #AKP|Destra: 32% #CHP|S&D: 26% #İYİ|Centro-destra: 17% (+2) #HDP|S&D: 12% #MHP|Estrema destra: 7% (-1) #DEVA|Centro: 2% (-1) #SP|Estrema destra islamica: 1% (;1) #YRP|Estrema destra islamica: 1% #GP|Centro-destra: 0,5% (-0,5) #ZAFER|Destra kemalista: 0,5% (+0,5) Data rilevazione: 4-7 aprile +/-: marzo Intervistati: 1500 @UltimoraPolitics

Ultimora.net - POLITICS

@UltimoraPOlitics · Post #38418 · 05.05.2022 г., 15:30

#Sondaggi#Turchia Sondaggio di MetroPOLL: #AKP|Destra: 32% (-2) #CHP|S&D: 22% (-2) #İYİ|Centro-destra: 19% (+3) #HDP|S&D: 12% (-1) #MHP|Estrema destra: 7% (+2) #DEVA|Centro: 2% #SP|Estrema destra islamica: 1% #YRP|Estrema destra islamica: 1% #GP|Centro-destra: 1% #ZAFER|Destra kemalista: 1% (+1) Data rilevazione: 14-20 aprile +/-: marzo Intervistati: 2164 @UltimoraPolitics

Ultimora.net - POLITICS

@UltimoraPOlitics · Post #39292 · 12.05.2022 г., 12:15

#Sondaggi#Turchia Sondaggio di Artıbir: #AKP|Destra: 30% #CHP|S&D: 27% #İYİ|Centro-destra: 14% #HDP|S&D: 13% #MHP|Estrema destra: 6% (-1) #DEVA|Centro: 5% (+1) #GP|Centro-destra: 2% #SP|Estrema destra islamica: 2% #YRP|Estrema destra islamica: 1% (+1) #MP|Centro-sinistra kemalista: 0,4% #ZAFER|Destra kemalista: 0,3% Data rilevazione: 21-30 aprile +/-: 20-28 marzo Intervistati: 1500 @UltimoraPolitics

Ultimora.net - POLITICS

@Ultimorapolitics · Post #37805 · 28.04.2022 г., 18:02

#Sondaggi#Turchia Sondaggio di MAK: #AKP|Destra: 29% (-1) #CHP|S&D: 27% (+1) #İYİ|Centro-destra: 15% #HDP|S&D: 8% (-1) #MHP|Estrema destra: 7% #DEVA|Centro: 3% #GP|Centro-destra: 3% #BTP|Centro kemalista alevista: 1% #SP|Estrema destra islamica: 1% #HÜDAPAR|Estrema destra curda islamica: 1% #YRP|Estrema destra islamica: 1% Data rilevazione: 7-18 aprile +/-: 7-18 marzo Intervistati: 5750 @UltimoraPolitics

Ultimora.net - POLITICS

@ultimoraPOLITICS · Post #39317 · 12.05.2022 г., 18:40

#Sondaggi#Turchia Sondaggio di ORC: #AKP|Destra: 28% #CHP|S&D: 24% #İYİ|Centro-destra: 18% (+1) #HDP|S&D: 9% (+0,5) #MHP|Estrema destra: 7% (-1) #GP|Centro-destra: 2% #DEVA|Centro: 2% #SP|Estrema destra islamica: 2% #TDP|Centro-sinistra kemalista: 2% (+0,5) #YRP|Estrema destra islamica: 1% #BTP|Centro kemalista alevista: 1% #MP|Centro-sinistra kemalista: 1% #BBP|Estrema destra islamica: 1% (+0,5) #DP|Centro-destra: 1% Data rilevazione: 5-8 maggio +/-: 17-22 aprile Intervistati: 5300 @UltimoraPolitics

Ultimora.net - POLITICS

@Ultimorapolitics · Post #37788 · 28.04.2022 г., 13:53

#Sondaggi#Turchia Sondaggio di ORC: #AKP|Destra: 28% #CHP|S&D: 24% (+1) #İYİ|Centro-destra: 17% #HDP|S&D: 8,5% (-0,5) #MHP|Estrema destra: 8% #GP|Centro-destra: 2% (-1) #DEVA|Centro: 2% (-1) #SP|Estrema destra islamica: 2% (+0,5) #TDP|Centro-sinistra kemalista: 1,5% (+0,5) #YRP|Estrema destra islamica: 1% #BTP|Centro kemalista alevista: 1% #MP|Centro-sinistra kemalista: 1% #ZAFER|Destra kemalista: 1% (+1) #DP|Centro-destra: 1% #HÜDAPAR|Estrema destra curda islamica: 0,5% (-0,5) #BBP|Estrema destra islamica: 0,5% (+0,5) Data rilevazione: 17-22 aprile +/-: 31 marzo-3 aprile Intervistati: 4385 @UltimoraPolitics