TGINSIGHT SIMILAR POSTS
Изходен канал @clockstackwheels · Post #851 · 2.08
Впервые использовал нейросетку для реальной практической пользы в коммерческом заказе. У заказчика есть база данных, куда информация вносится кое-как. Представьте, что вы составляете каталог, например, книг, и в базе данных предусмотрены поля: "Автор книги", "Название книги", "Число страниц" и ещё десяток других полей с информацией. Но заполняют эту базу другие люди, которых вы не контролируете, поэтому информация может случайным образом лежать в любом произвольном поле, быть введена с ошибками, опечатками и так далее. В реальном заказе были не книги, я просто привожу пример такой же задачи. Вот как это может выглядеть: 1. В поле "Автор" написано "Лондон, Дж. Белый Клык", поле "Название" при этом пустое. 2. В поле "Название" написано "150-страничный сборник рецептов", поле "Число страниц" пустое 3. В поле "Название" написано "джеклондон мартин иден", поле с автором пустое 4. В поле "Автор" написано "150-стр.3изд,доп.перераб инструкция по пользованию подстанциями типа ТП-13, М.Васильев москва 98" ...и так далее. А нужно искать нормально по автору, названию, числу страниц, городу и году издания. Никакими прямыми алгоритмами это не берётся: регулярки, поиск по ключевым словам, морфология, нечёткая логика — всё это либо даёт много ложноположительных результатов, либо (если подкрутить пороговые значения) вообще перестаёт искать. И вот тут в какой-то момент мы решили попробовать запрашивать через API GPT. Нейросетке задаётся следующий промт: "Есть следующая информация: «150-страничный роман джеклондон мартин иден». Если здесь есть то, что похоже на имя автора книги, напиши мне его, иначе ответь null". И, надо сказать, даже 3.5 справляется с этой работой очень хорошо. Получилось сравнительно без ошибок разметить около 80% данных (остальные с ошибками даже после нейросетки). Но, важный нюанс. Сначала мы пытались поймать все данные одним запросом: "GPT, выведи мне JSON, в котором есть автор, название, число страниц...", но тесты показали, что значительно эффективнее будет отдельно спросить 5 раз про 5 разных типов данных. Да, это расходует больше токенов, но они и так сравнительно дёшевы. Кстати, API у OpenAI безбожно глючит даже на платном тарифе. Обещанных 3500 запросов в минуту нет даже приблизительно. По факту удаётся отправлять около 200-300 запросов в минуту, потом оно вываливается в таймауты или ошибку 429, нужно делать какие-то умные паузы, ждать итд. Над этим всем пришлось повозиться, зато результат вполне ощутимый. #dev
Hashtags
Търсене: #con
@ultimoraPOLITICS · Post #40248 · 13.07.2022 г., 06:51
#RegnoUnito Iniziano oggi le primarie dei #CON|ECR per decidere il sostituto di Boris Johnson: alle 14:30 ci sarà il primo scrutinio. Segui le primarie su @UltimoraPolitics24
Hashtags
@libertaeragione · Post #4180 · 22.05.2024 г., 16:18
#RegnoUnito Rishi #Sunak (#CON|Centro-destra): "Annuncio ufficialmente la convocazione delle elezioni anticipate per il 4 luglio 2024". @OsservatorioEsteri
Hashtags
@libertaeragione · Post #3786 · 17.04.2023 г., 12:48
#RegnoUnito Il Premier Rishi #Sunak (#CON|Centro-destra) è stato indagato dall'organismo di controllo degli standard del Parlamento per una possibile mancata dichiarazione di interesse. Sunak è indagato per stabilire se una dichiarazione di interessi fosse "aperta e franca", secondo le regole stabilite dal commissario per gli standard. Secondo la BBC, l'indagine si riferisce a un'azienda di assistenza all'infanzia in cui sua moglie ha delle quote. @OsservatorioEsteri
Hashtags
@libertaeragione · Post #3781 · 10.04.2023 г., 21:17
#RegnoUnito Il Primo Ministro Rishi #Sunak (#CON|Centro-destra) ha annunciato che le elezioni generali si terranno nell'autunno del 2024. @OsservatorioEsteri
Hashtags
@libertaeragione · Post #3790 · 21.04.2023 г., 10:22
#RegnoUnito Il Vicepremier e Segretario alla Giustizia Dominic #Raab (#CON|Centro-destra) si è dimesso a seguito della conclusione di un'inchiesta sulle accuse di mobbing mosse contro di lui. @OsservatorioEsteri
Hashtags
@ultimoraPOLITICS · Post #40205 · 07.07.2022 г., 08:13
#RegnoUnito ❗️Termina l'era Boris #Johnson (#CON|ECR): dopo le dimissioni di massa il primo ministro britannico ha annunciato le dimissioni. @UltimoraPolitics
Hashtags
@ultimoraPOLITICS · Post #40107 · 24.06.2022 г., 09:06
#RegnoUnito ❗️Boris #Johnson e i #CON sconfitti alle suppletive. I Tories perdono entrambi i collegi andati al voto. @UltimoraPolitics
Hashtags
@ULTIMORAPOLITICS · Post #41827 · 19.10.2022 г., 11:21
#RegnoUnito Liz #Truss (#CON|ECR) al Parlamento: "Dimissioni? Sono una combattente, non mollo" @UltimoraPolitics
Hashtags
@orizzontipolitici · Post #233 · 24.09.2019 г., 09:59
#RegnoUnito#Brexit La Corte Suprema ha deciso che la decisione del governo di Boris #Johnson (#CON|ECR) di sospendere il Parlamento è illegale.
Hashtags
@UltimoraPOlitics · Post #38347 · 05.05.2022 г., 06:16
#RegnoUnito#Elezioni#Amministrative Urne Aperte in molte città del Regno Unito per le elezioni amministrative. Di seguito un recap delle sfide più importanti di questa tornata elettorale: 📌 Nord Irlanda - Si vota per le elezioni dell'assemblea, i nazionalisti irlandesi di #SF|LEFT potrebbero per la prima volta avere la maggior relativa 📌 Elezioni comunali nelle grandi città, tra cui Glasgow, Leeds, Manchester, Birmingham e le circoscrizioni di Londra 📌 Probabile crollo dei #CON|ECR: secondo i sondaggi, potrebbero perdere fino a 500 seggi. @UltimoraPolitics
@Ultimorapolitics · Post #38049 · 30.04.2022 г., 14:58
#RegnoUnito Neil #Parish (#CON|ECR), il parlamentare che è stato sorpreso a guardare materiale pornografico alla Camera dei Comuni, ha rimosso la sua frusta conservatrice, cioè è stato espulso dal gruppo parlamentare e quindi siederà come indipendente. Parish…
Hashtags
@Ultimorapolitics · Post #37835 · 29.04.2022 г., 14:39
#RegnoUnito Neil #Parish (#CON|ECR), il parlamentare che è stato sorpreso a guardare materiale pornografico alla Camera dei Comuni, ha rimosso la sua frusta conservatrice, cioè è stato espulso dal gruppo parlamentare e quindi siederà come indipendente. Parish adesso dovrà affrontare due indagini, che potrebbero portare alla sua espulsione dalla Camera dei Comuni. @UltimoraPolitics
Hashtags