TGINSIGHT SIMILAR POSTS
Изходен канал @clockstackwheels · Post #851 · 2.08
Впервые использовал нейросетку для реальной практической пользы в коммерческом заказе. У заказчика есть база данных, куда информация вносится кое-как. Представьте, что вы составляете каталог, например, книг, и в базе данных предусмотрены поля: "Автор книги", "Название книги", "Число страниц" и ещё десяток других полей с информацией. Но заполняют эту базу другие люди, которых вы не контролируете, поэтому информация может случайным образом лежать в любом произвольном поле, быть введена с ошибками, опечатками и так далее. В реальном заказе были не книги, я просто привожу пример такой же задачи. Вот как это может выглядеть: 1. В поле "Автор" написано "Лондон, Дж. Белый Клык", поле "Название" при этом пустое. 2. В поле "Название" написано "150-страничный сборник рецептов", поле "Число страниц" пустое 3. В поле "Название" написано "джеклондон мартин иден", поле с автором пустое 4. В поле "Автор" написано "150-стр.3изд,доп.перераб инструкция по пользованию подстанциями типа ТП-13, М.Васильев москва 98" ...и так далее. А нужно искать нормально по автору, названию, числу страниц, городу и году издания. Никакими прямыми алгоритмами это не берётся: регулярки, поиск по ключевым словам, морфология, нечёткая логика — всё это либо даёт много ложноположительных результатов, либо (если подкрутить пороговые значения) вообще перестаёт искать. И вот тут в какой-то момент мы решили попробовать запрашивать через API GPT. Нейросетке задаётся следующий промт: "Есть следующая информация: «150-страничный роман джеклондон мартин иден». Если здесь есть то, что похоже на имя автора книги, напиши мне его, иначе ответь null". И, надо сказать, даже 3.5 справляется с этой работой очень хорошо. Получилось сравнительно без ошибок разметить около 80% данных (остальные с ошибками даже после нейросетки). Но, важный нюанс. Сначала мы пытались поймать все данные одним запросом: "GPT, выведи мне JSON, в котором есть автор, название, число страниц...", но тесты показали, что значительно эффективнее будет отдельно спросить 5 раз про 5 разных типов данных. Да, это расходует больше токенов, но они и так сравнительно дёшевы. Кстати, API у OpenAI безбожно глючит даже на платном тарифе. Обещанных 3500 запросов в минуту нет даже приблизительно. По факту удаётся отправлять около 200-300 запросов в минуту, потом оно вываливается в таймауты или ошибку 429, нужно делать какие-то умные паузы, ждать итд. Над этим всем пришлось повозиться, зато результат вполне ощутимый. #dev
Hashtags
Търсене: #ecp
@UltimoraPOlitics · Post #38299 · 04.05.2022 г., 12:02
#Sondaggi#Spagna Sondaggio di 40db: #PSOE|S&D: 26% (+0,5) #PP|EPP: 26% (+3) #VOX|ECR: 18% (-1) #UP (#Podemos-#IU-#ECP-#AV)|LEFT: 10% (-2) #Cs|RE: 3% (-1) #MP|Sinistra: 3% (-0,5) Data rilevazione: 20-25 aprile +/-: 22-28 marzo Intervistati: 2000 @UltimoraPolitics
@Ultimorapolitics · Post #37358 · 22.04.2022 г., 19:02
#Sondaggi#Spagna Sondaggio di Simple Lógica: #PP|EPP: 28% (+5) #PSOE|S&D: 27% (-4) #VOX|ECR: 18% (-1) #UP (#Podemos-#IU-#ECP-#AV)|LEFT: 11% (+1) #MP|Sinistra: 4% (+1) #Cs|RE: 2,5% (+0,5) Data rilevazione: 1°-7 aprile +/-: 1°-10 marzo Intervistati: 1048 @UltimoraPolitics
@libertaeragione · Post #3899 · 23.07.2023 г., 18:58
#Elezioni#Spagna Intention poll di TV3 in #Catalogna: #PSC|S&D: 13 seggi #ERC|G/EFA: 9 #Junts|NI: 9 #PP|EPP: 8-9 #Sumar (#IU-#Podemos-#ECP-#CatComú)|LEFT: 6 #Vox|ECR: 1-2 #CUP|Sinistra indipendentista: 1 @OsservatorioEsteri
@Ultimorapolitics · Post #37343 · 22.04.2022 г., 17:21
#Sondaggi#Spagna Sondaggio di Sigma Dos: #PSOE|S&D: 26% (-0,5) #PP|EPP: 25,5% (+2,5) #VOX|ECR: 17,5% (-2,5) #UP (#Podemos-#IU-#ECP-#AV)|LEFT: 11% #MP|Sinistra: 3,5% (+0,5) #ERC|G/EFA: 3% #Junts|NI: 3% (+1) #Cs|RE: 2,5% (-1,5) #PNV|RE: 2% Data rilevazione: 5-7 aprile +/-: 2 marzo Intervistati: 2400 @UltimoraPolitics
@Ultimorapolitics · Post #37330 · 22.04.2022 г., 14:31
#Sondaggi#Spagna Sondaggio di SW Demoscopia: #PSOE|S&D: 25% (-1) #PP|EPP: 24% (+1) #VOX|ECR: 21% (+2) #UP (#Podemos-#IU-#ECP-#AV)|LEFT: 10% (-3) #ERC|G/EFA: 4% (+4) #MP|Sinistra: 3% (+0,5) #Cs|RE: 2% (-1) #Junts|NI: 2% (+2) #PNV|RE: 2% (+2) #EHBildu|LEFT: 1% (+1) #CUP|Sinistra catalana separatista: 1% (+1) #CC-#NC|RE|G/EFA: 1% (+1) #NA/#UPN|Centro-destra navarro unionista: 0,3% (+0,3) #PRC|Centro-sinistra cantabro: 0,2% (+0,2) Data rilevazione: 11-18 aprile +/-: 23-24 novembre Intervistati: 1205 @UltimoraPolitics
@ultimoraPOLITICS · Post #39329 · 13.05.2022 г., 08:33
#Sondaggi#Spagna Sondaggio di SocioMétrica: #PSOE|S&D: 25% (-1) #PP|EPP: 25% (+2) #VOX|ECR: 19% (-0,5) #UP (#Podemos-#IU-#ECP-#AV)|LEFT: 11% (-1) #ERC|G/EFA: 3% #MP|Sinistra: 3% #Cs|RE: 3% #Junts|NI: 2% #PNV|RE: 2% #EHBildu|LEFT: 1% #EV|Grande tenda localista: 1% #CUP|Sinistra catalana separatista: 1% #BNG|G/EFA: 1% #CC|RE: 0,5% (-0,1) #NA/#UPN|Centro-destra navarro unionista: 0,4% #PRC|Centro-sinistra cantabro: 0,1% (-0,1) Data rilevazione: 4-7 maggio +/-: 9 aprile Intervistati: 1000 @UltimoraPolitics
@ultimoraPOLITICS · Post #39337 · 13.05.2022 г., 13:40
#Sondaggi#Spagna Sondaggio di IMOP: #PP|EPP: 26% (+0,5) #PSOE|S&D: 26% #VOX|ECR: 20% (+1) #UP (#Podemos-#IU-#ECP-#AV)|LEFT: 11% (-1) #ERC|G/EFA: 3% #Cs|RE: 2% #MP|Sinistra: 2% (-1) #Junts|NI: 2% #PNV|RE: 2% (+0,5) #EHBildu|LEFT: 1% #CUP|Sinistra catalana separatista: 1% #BNG|G/EFA: 1% #CC|RE: 0,3% #NA/#UPN|Centro-destra navarro unionista: 0,2% #PRC|Centro-sinistra cantabro: 0,2% #TE|Regionalisti di Teruel: 0,1% Data rilevazione: 24 aprile-8 maggio +/-: 11-23 aprile Intervistati: 1303 @UltimoraPolitics