TGINSIGHT SIMILAR POSTS
Изходен канал @clockstackwheels · Post #851 · 2.08
Впервые использовал нейросетку для реальной практической пользы в коммерческом заказе. У заказчика есть база данных, куда информация вносится кое-как. Представьте, что вы составляете каталог, например, книг, и в базе данных предусмотрены поля: "Автор книги", "Название книги", "Число страниц" и ещё десяток других полей с информацией. Но заполняют эту базу другие люди, которых вы не контролируете, поэтому информация может случайным образом лежать в любом произвольном поле, быть введена с ошибками, опечатками и так далее. В реальном заказе были не книги, я просто привожу пример такой же задачи. Вот как это может выглядеть: 1. В поле "Автор" написано "Лондон, Дж. Белый Клык", поле "Название" при этом пустое. 2. В поле "Название" написано "150-страничный сборник рецептов", поле "Число страниц" пустое 3. В поле "Название" написано "джеклондон мартин иден", поле с автором пустое 4. В поле "Автор" написано "150-стр.3изд,доп.перераб инструкция по пользованию подстанциями типа ТП-13, М.Васильев москва 98" ...и так далее. А нужно искать нормально по автору, названию, числу страниц, городу и году издания. Никакими прямыми алгоритмами это не берётся: регулярки, поиск по ключевым словам, морфология, нечёткая логика — всё это либо даёт много ложноположительных результатов, либо (если подкрутить пороговые значения) вообще перестаёт искать. И вот тут в какой-то момент мы решили попробовать запрашивать через API GPT. Нейросетке задаётся следующий промт: "Есть следующая информация: «150-страничный роман джеклондон мартин иден». Если здесь есть то, что похоже на имя автора книги, напиши мне его, иначе ответь null". И, надо сказать, даже 3.5 справляется с этой работой очень хорошо. Получилось сравнительно без ошибок разметить около 80% данных (остальные с ошибками даже после нейросетки). Но, важный нюанс. Сначала мы пытались поймать все данные одним запросом: "GPT, выведи мне JSON, в котором есть автор, название, число страниц...", но тесты показали, что значительно эффективнее будет отдельно спросить 5 раз про 5 разных типов данных. Да, это расходует больше токенов, но они и так сравнительно дёшевы. Кстати, API у OpenAI безбожно глючит даже на платном тарифе. Обещанных 3500 запросов в минуту нет даже приблизительно. По факту удаётся отправлять около 200-300 запросов в минуту, потом оно вываливается в таймауты или ошибку 429, нужно делать какие-то умные паузы, ждать итд. Над этим всем пришлось повозиться, зато результат вполне ощутимый. #dev
Hashtags
Търсене: #partei
@ultimoraPOLITICS · Post #39467 · 15.05.2022 г., 23:19
#Elezioni#Germania#Regionali#NRW Proiezione dei risultati definitivi di Wahlrecht: #CDU|EPP: 35,7% #SPD|S&D: 26,7% #Grüne|G/EFA: 18,2% #FDP|RE: 5,9% #AfD|ID: 5,4% #Linke|LEFT: 2% #TIER|LEFT: 1,1% #PARTEI|NI: 1,1% #DieBasis|No-vax: 0,8% #FW|RE: 0,7% #Volt|G/EFA: 0,6% @UltimoraPolitics
@UltimoraPOlitics · Post #38819 · 08.05.2022 г., 19:39
#Elezioni#Germania#Regionali#SchleswigHolstein 2803 sezioni su 2910: #CDU|EPP: 43,5% #Grüne|G/EFA: 18,2% #SPD|S&D: 15,9% #FDP|RE: 6,4% #SSW|G/EFA: 5,8% #AfD|ID: 4,4% #Linke|LEFT: 1,6% #DieBasis|No-vax: 1,1% #PARTEI|NI: 0,7% #TIER|LEFT: 0,7% #FW|RE: 0,6% #Piraten|G/EFA: 0,3% #Volt|G/EFA: 0,3% #Zukunft|Centro: 0,1% #Humanisten|Progressisti: 0,1% #PfG|Ricerca medica: 0,1% @UltimoraPolitics
@UltimoraPOlitics · Post #38818 · 08.05.2022 г., 18:34
#Elezioni#Germania#Regionali#SchleswigHolstein 2416 sezioni su 2910: #CDU|EPP: 43,4% #Grüne|G/EFA: 18,2% #SPD|S&D: 15,7% #FDP|RE: 6,4% #SSW|G/EFA: 5,9% #AfD|ID: 4,6% #Linke|LEFT: 1,7% #DieBasis|No-vax: 1,1% #PARTEI|NI: 0,8% #TIER|LEFT: 0,7% #FW|RE: 0,6% #Piraten|G/EFA: 0,3% #Volt|G/EFA: 0,3% #Zukunft|Centro: 0,1% #Humanisten|Progressisti: 0,1% #PfG|Ricerca medica: 0,1% @UltimoraPolitics
@UltimoraPOlitics · Post #38817 · 08.05.2022 г., 18:15
#Elezioni#Germania#Regionali#SchleswigHolstein 2181 sezioni su 2910: #CDU|EPP: 43,5% #Grüne|G/EFA: 18% #SPD|S&D: 15,7% #FDP|RE: 6,4% #SSW|G/EFA: 5,9% #AfD|ID: 4,7% #Linke|LEFT: 1,7% #DieBasis|No-vax: 1,2% #PARTEI|NI: 0,8% #TIER|LEFT: 0,7% #FW|RE: 0,6% #Piraten|G/EFA: 0,4% #Volt|G/EFA: 0,3% #Zukunft|Centro: 0,1% #Humanisten|Progressisti: 0,1% #PfG|Ricerca medica: 0,1% @UltimoraPolitics
@UltimoraPOlitics · Post #38816 · 08.05.2022 г., 17:45
#Elezioni#Germania#Regionali#SchleswigHolstein 1628 sezioni su 2910: #CDU|EPP: 43,6% #Grüne|G/EFA: 17,8% #SPD|S&D: 15,7% #FDP|RE: 6,3% #SSW|G/EFA: 5,9% #AfD|ID: 4,7% #Linke|LEFT: 1,7% #DieBasis|No-vax: 1,2% #PARTEI|NI: 0,8% #TIER|LEFT: 0,7% #FW|RE: 0,6% #Piraten|G/EFA: 0,4% #Volt|G/EFA: 0,3% #Zukunft|Centro: 0,1% #Humanisten|Progressisti: 0,1% #PfG|Ricerca medica: 0,1% @UltimoraPolitics
@UltimoraPOlitics · Post #38815 · 08.05.2022 г., 17:38
#Elezioni#Germania#Regionali#SchleswigHolstein 1381 sezioni su 2910: #CDU|EPP: 43,9% #Grüne|G/EFA: 17,5% #SPD|S&D: 15,6% #FDP|RE: 6,4% #SSW|G/EFA: 5,8% #AfD|ID: 4,9% #Linke|LEFT: 1,7% #DieBasis|No-vax: 1,2% #PARTEI|NI: 0,8% #TIER|LEFT: 0,7% #FW|RE: 0,6% #Piraten|G/EFA: 0,4% #Volt|G/EFA: 0,3% #Zukunft|Centro: 0,1% #Humanisten|Progressisti: 0,1% #PfG|Ricerca medica: 0,1% @UltimoraPolitics
@UltimoraPOlitics · Post #38814 · 08.05.2022 г., 17:31
#Elezioni#Germania#Regionali#SchleswigHolstein 1135 sezioni su 2910: #CDU|EPP: 44% #Grüne|G/EFA: 17,3% #SPD|S&D: 15,5% #FDP|RE: 6,4% #SSW|G/EFA: 5,8% #AfD|ID: 4,9% #Linke|LEFT: 1,7% #DieBasis|No-vax: 1,2% #PARTEI|NI: 0,8% #TIER|LEFT: 0,7% #FW|RE: 0,6% #Piraten|G/EFA: 0,4% #Volt|G/EFA: 0,3% #Zukunft|Centro: 0,1% #PfG|Ricerca medica: 0,1% #Humanisten|Progressisti: 0,1% @UltimoraPolitics
@UltimoraPOlitics · Post #38811 · 08.05.2022 г., 17:13
#Elezioni#Germania#Regionali#SchleswigHolstein 727 sezioni su 2910: #CDU|EPP: 45% #Grüne|G/EFA: 16,2% #SPD|S&D: 15,2% #FDP|RE: 6,6% #SSW|G/EFA: 6% #AfD|ID: 5,1% #Linke|LEFT: 1,6% #DieBasis|No-vax: 1,2% #PARTEI|NI: 0,8% #TIER|LEFT: 0,7% #FW|RE: 0,4% #Piraten|G/EFA: 0,4% #Volt|G/EFA: 0,3% #Zukunft|Centro: 0,1% #PfG|Ricerca medica: 0,1% #Humanisten|Progressisti: 0,1% @UltimoraPolitics
@UltimoraPOlitics · Post #38809 · 08.05.2022 г., 16:58
#Elezioni#Germania#Regionali#SchleswigHolstein 404 sezioni su 2910: #CDU|EPP: 46,7% #Grüne|G/EFA: 14,8% #SPD|S&D: 14,7% #FDP|RE: 6,7% #SSW|G/EFA: 5,9% #AfD|ID: 5,3% #Linke|LEFT: 1,5% #DieBasis|No-vax: 1,3% #PARTEI|NI: 0,8% #TIER|LEFT: 0,7% #FW|RE: 0,6% #Piraten|G/EFA: 0,4% #Volt|G/EFA: 0,3% #Zukunft|Centro: 0,2% #PfG|Ricerca medica: 0,1% #Humanisten|Progressisti: 0,1% @UltimoraPolitics
@UltimoraPOlitics · Post #38803 · 08.05.2022 г., 16:42
#Elezioni#Germania#Regionali#SchleswigHolstein 125 sezioni su 2910: #CDU|EPP: 48,9% #Grüne|G/EFA: 13,7% #SPD|S&D: 13,3% #FDP|RE: 7,1% #AfD|ID: 5,9% #SSW|G/EFA: 5,5% #Linke|LEFT: 1,3% #DieBasis|No-vax: 1,3% #PARTEI|NI: 0,7% #FW|RE: 0,7% #TIER|LEFT: 0,7% #Piraten|G/EFA: 0,4% #Volt|G/EFA: 0,3% #PfG|Ricerca medica: 0,1% #Humanisten|Progressisti: 0,1% #Zukunft|Centro: 0% @UltimoraPolitics
@libertaeragione · Post #3993 · 09.10.2023 г., 09:08
#Elezioni#Germania#Regionali#Assia Risultati definitivi: Affluenza: 66% #CDU|EPP: 34,6% #AfD|ID: 18,4% #SPD|S&D: 15,1% #Grüne|G/EFA: 14,8% #FDP|RE: 5% #FW|RE: 3,5% #Linke|LEFT: 3,1% #TIER|LEFT: 1,5% #Volt|G/EFA: 1% #PARTEI|NI: 0,8% #dieBasis|No-vax: 0,5% #Piraten|G/EFA: 0,3% #V3|Animalisti: 0,3% #Humanisten|Umanisti di centro: 0,2% #ABG|Anti-corruzione: 0,2% #ÖDP|G/EFA: 0,2% #Klimaliste|Verdi: 0,2% #Verjüngungsforschung|Pro-ricerca sulla medicina contro l'invecchiamento: 0,1% #APPD|Anarchici satirici: 0,1% #DKP|Estrema sinistra: 0,1% #DNM|Centro: 0% @OsservatorioEsteri