TGINSIGHT SIMILAR POSTS
Изходен канал @clockstackwheels · Post #851 · 2.08
Впервые использовал нейросетку для реальной практической пользы в коммерческом заказе. У заказчика есть база данных, куда информация вносится кое-как. Представьте, что вы составляете каталог, например, книг, и в базе данных предусмотрены поля: "Автор книги", "Название книги", "Число страниц" и ещё десяток других полей с информацией. Но заполняют эту базу другие люди, которых вы не контролируете, поэтому информация может случайным образом лежать в любом произвольном поле, быть введена с ошибками, опечатками и так далее. В реальном заказе были не книги, я просто привожу пример такой же задачи. Вот как это может выглядеть: 1. В поле "Автор" написано "Лондон, Дж. Белый Клык", поле "Название" при этом пустое. 2. В поле "Название" написано "150-страничный сборник рецептов", поле "Число страниц" пустое 3. В поле "Название" написано "джеклондон мартин иден", поле с автором пустое 4. В поле "Автор" написано "150-стр.3изд,доп.перераб инструкция по пользованию подстанциями типа ТП-13, М.Васильев москва 98" ...и так далее. А нужно искать нормально по автору, названию, числу страниц, городу и году издания. Никакими прямыми алгоритмами это не берётся: регулярки, поиск по ключевым словам, морфология, нечёткая логика — всё это либо даёт много ложноположительных результатов, либо (если подкрутить пороговые значения) вообще перестаёт искать. И вот тут в какой-то момент мы решили попробовать запрашивать через API GPT. Нейросетке задаётся следующий промт: "Есть следующая информация: «150-страничный роман джеклондон мартин иден». Если здесь есть то, что похоже на имя автора книги, напиши мне его, иначе ответь null". И, надо сказать, даже 3.5 справляется с этой работой очень хорошо. Получилось сравнительно без ошибок разметить около 80% данных (остальные с ошибками даже после нейросетки). Но, важный нюанс. Сначала мы пытались поймать все данные одним запросом: "GPT, выведи мне JSON, в котором есть автор, название, число страниц...", но тесты показали, что значительно эффективнее будет отдельно спросить 5 раз про 5 разных типов данных. Да, это расходует больше токенов, но они и так сравнительно дёшевы. Кстати, API у OpenAI безбожно глючит даже на платном тарифе. Обещанных 3500 запросов в минуту нет даже приблизительно. По факту удаётся отправлять около 200-300 запросов в минуту, потом оно вываливается в таймауты или ошибку 429, нужно делать какие-то умные паузы, ждать итд. Над этим всем пришлось повозиться, зато результат вполне ощутимый. #dev
Hashtags
Търсене: #ldem
@UltimoraPOlitics · Post #38504 · 06.05.2022 г., 13:36
#Elezioni#RegnoUnito#Amministrative Calcolo della BBC su più di 700 consigli riguardante le elezioni generali: #LAB|S&D: 35% #CON|ECR: 30% #LDEM|RE: 19% Altri: 16% NB: Le elezioni locali non sono come quelle generali. @UltimoraPolitics
@UltimoraPOlitics · Post #38447 · 05.05.2022 г., 23:26
#Elezioni#RegnoUnito#Amministrative 6 consigli scrutinati su 146: #LAB|S&D: 37 seggi (-1 rispetto al 2018) #CON|ECR: 20 (-1) #LDEM|RE: 8 (+2) Indipendenti: 2 Consigli comunali vinti: #LAB|S&D: 4 #CON|ECR: 2 @UltimoraPolitics
@libertaeragione · Post #3811 · 05.05.2023 г., 14:15
#Elezioni#RegnoUnito#Locali#Inghilterra Proiezione della BBC se tutta la Gran Bretagna avesse avuto la possibilità di votare alle elezioni locali oggi: #LAB|S&D: 35% #CON|Centro-destra: 26% #LDEM|RE: 20% Altri partiti: 19% @OsservatorioEsteri
@UltimoraPOlitics · Post #38525 · 06.05.2022 г., 15:01
#Elezioni#RegnoUnito#Amministrative Leader dei #LDEM|RE Ed #Davey: "Sono entusiasta di tutti quei seggi oltre il Blue Wall in cui, francamente, non ci siamo da molto tempo. I risultati sono come un momento storico per il partito e afferma, le placche tettoniche della politica britannica si stanno spostando. I conservatori sono stati trascinati giù da un primo ministro screditato, se Boris Johnson rimane al suo posto, i liberaldemocratici prenderanno i loro seggi." @UltimoraPolitics
@UltimoraPOlitics · Post #38450 · 06.05.2022 г., 01:13
#Elezioni#RegnoUnito#Amministrative 27 consigli scrutinati su 146: #LAB|S&D: 244 seggi (-9 rispetto al 2018) #CON|ECR: 160 (-21) #LDEM|RE: 63 (+14) Indipendenti: 25 #Greens|G/EFA: 16 (+12) Associazioni dei residenti: 13 (+4) Consigli comunali vinti: #CON|ECR: 12 #LAB|S&D: 8 Senza controllo: 7 @UltimoraPolitics
@UltimoraPOlitics · Post #38449 · 06.05.2022 г., 00:23
#Elezioni#RegnoUnito#Amministrative 17 consigli scrutinati su 146: #LAB|S&D: 134 seggi (-8 rispetto al 2018) #CON|ECR: 88 (-2) #LDEM|RE: 27 (+6) Indipendenti: 15 (-2) #Greens|G/EFA: 8 (+6) Consigli comunali vinti: #CON|ECR: 8 #LAB|S&D: 6 Senza controllo: 3 @UltimoraPolitics
@ultimoraPOLITICS · Post #39367 · 13.05.2022 г., 19:27
#Sondaggi#RegnoUnito Sondaggio di Techne: #LAB|S&D: 39% (-1) #CON|ECR: 34% #LDEM|RE: 11% (+1) #Greens|G/EFA: 6% (+1) #SNP|G/EFA: 4% Data rilevazione: 11-12 maggio +/-: 4-5 maggio Intervistati: 1634 @UltimoraPolitics
@UltimoraPOlitics · Post #39222 · 10.05.2022 г., 20:02
#Sondaggi#RegnoUnito Sondaggio di Savanta ComRes: #LAB|S&D: 39% (-1) #CON|ECR: 34% #LDEM|RE: 11% (+2) #SNP|G/EFA: 4% #Greens|G/EFA: 3% (-1) Data rilevazione: 6-8 maggio +/-: 22-24 aprile Intervistati: 2161 @UltimoraPolitics
@Ultimorapolitics · Post #38035 · 30.04.2022 г., 11:05
#Sondaggi#RegnoUnito Sondaggio di Savanta ComRes: #LAB|S&D: 40% #CON|ECR: 35% (+1) #LDEM|RE: 9% #SNP|G/EFA: 4% #Greens|G/EFA: 4% Data rilevazione: 22-24 aprile +/-: 8-10 aprile Intervistati: 2231 @UltimoraPolitics
@Ultimorapolitics · Post #38014 · 29.04.2022 г., 19:21
#Sondaggi#RegnoUnito Sondaggio di Techne: #LAB|S&D: 40% #CON|ECR: 35% (+1) #LDEM|RE: 9% (-1) #Greens|G/EFA: 6% (+1) #SNP|G/EFA: 4% Data rilevazione: 27-28 aprile +/-: 20-21 aprile Intervistati: 1633 @UltimoraPolitics
@Ultimorapolitics · Post #37342 · 22.04.2022 г., 17:02
#Sondaggi#RegnoUnito Sondaggio di Techne: #LAB|S&D: 40% (-1) #CON|ECR: 34% #LDEM|RE: 10% (+1) #Greens|G/EFA: 5% #SNP|G/EFA: 4% Data rilevazione: 20-21 aprile +/-: 12-13 aprile Intervistati: 1631 @UltimoraPolitics
@UltimoraPOlitics · Post #38461 · 06.05.2022 г., 02:37
#Elezioni#RegnoUnito#Amministrative Consiglio di #Newcastle, risultati definitivi: #LAB|S&D: 19 seggi (-1) #LDEM|RE: 7 (+1) Indipendenti: 1 Attuale composizione del Consiglio comunale: #LAB|S&D: 51 #LDEM|RE: 21 Indipendenti: 3 Newcastle Independents: 3 I LAB mantengono il controllo del Consiglio. @UltimoraPolitics