TGINSIGHT SIMILAR POSTS
Изходен канал @clockstackwheels · Post #851 · 2.08
Впервые использовал нейросетку для реальной практической пользы в коммерческом заказе. У заказчика есть база данных, куда информация вносится кое-как. Представьте, что вы составляете каталог, например, книг, и в базе данных предусмотрены поля: "Автор книги", "Название книги", "Число страниц" и ещё десяток других полей с информацией. Но заполняют эту базу другие люди, которых вы не контролируете, поэтому информация может случайным образом лежать в любом произвольном поле, быть введена с ошибками, опечатками и так далее. В реальном заказе были не книги, я просто привожу пример такой же задачи. Вот как это может выглядеть: 1. В поле "Автор" написано "Лондон, Дж. Белый Клык", поле "Название" при этом пустое. 2. В поле "Название" написано "150-страничный сборник рецептов", поле "Число страниц" пустое 3. В поле "Название" написано "джеклондон мартин иден", поле с автором пустое 4. В поле "Автор" написано "150-стр.3изд,доп.перераб инструкция по пользованию подстанциями типа ТП-13, М.Васильев москва 98" ...и так далее. А нужно искать нормально по автору, названию, числу страниц, городу и году издания. Никакими прямыми алгоритмами это не берётся: регулярки, поиск по ключевым словам, морфология, нечёткая логика — всё это либо даёт много ложноположительных результатов, либо (если подкрутить пороговые значения) вообще перестаёт искать. И вот тут в какой-то момент мы решили попробовать запрашивать через API GPT. Нейросетке задаётся следующий промт: "Есть следующая информация: «150-страничный роман джеклондон мартин иден». Если здесь есть то, что похоже на имя автора книги, напиши мне его, иначе ответь null". И, надо сказать, даже 3.5 справляется с этой работой очень хорошо. Получилось сравнительно без ошибок разметить около 80% данных (остальные с ошибками даже после нейросетки). Но, важный нюанс. Сначала мы пытались поймать все данные одним запросом: "GPT, выведи мне JSON, в котором есть автор, название, число страниц...", но тесты показали, что значительно эффективнее будет отдельно спросить 5 раз про 5 разных типов данных. Да, это расходует больше токенов, но они и так сравнительно дёшевы. Кстати, API у OpenAI безбожно глючит даже на платном тарифе. Обещанных 3500 запросов в минуту нет даже приблизительно. По факту удаётся отправлять около 200-300 запросов в минуту, потом оно вываливается в таймауты или ошибку 429, нужно делать какие-то умные паузы, ждать итд. Над этим всем пришлось повозиться, зато результат вполне ощутимый. #dev
Hashtags
Търсене: #chips
@communia · Post #36993 · 03.09.2023 г., 08:58
#Chips Suben los costes de fabricación, lo que no erosiona los márgenes (aún) pero sí concentra aún más toda la producción avanzada en un puñado de empresas https://elchapuzasinformatico.com/2023/09/fabricar-procesadores-2-nm-mas-caros/
Hashtags
@communia · Post #37828 · 10.01.2024 г., 08:38
#guerratecnológica. Guerra de precios de #chips https://www.xataka.com.mx/componentes/china-rompe-industria-chips-precios-bajos-aliados-estados-unidos-tienen-unica-alternativa-ponerse-al-dia
Hashtags
@communia · Post #37337 · 21.10.2023 г., 08:55
En la #guerratecnológica... #chips https://www.xataka.com/empresas-y-economia/asml-acaba-confesar-como-sera-agujero-que-sanciones-eeuu-a-china-van-a-hacer-su-negocio
Hashtags
@communia · Post #36971 · 01.09.2023 г., 07:42
#Tecnología#chips. Intel, TSMC y el ejército de #EEUU (a través de DARPA) dejan entrever un procesador avanzado que funciona con luz ... Sin aclarar ni capacidades reales ni hoja de ruta para la producción https://elchapuzasinformatico.com/2023/08/intel-cpu-fotonica-8-nucleos-528-hilos-7-nm-arquitectura-risc-v/
Hashtags
@communia · Post #37452 · 30.10.2023 г., 07:39
#GuerraTecnológica. #China acelera la sustitución de hardware y #chips https://elchapuzasinformatico.com/2023/10/china-cambia-hardware-occidental-nacional-telecomunicaciones-bancos/
Hashtags
@communia · Post #37008 · 06.09.2023 г., 07:02
#China hacia la autosuficiencia en la producción de #chips. #GuerraTecnológica https://www.digitimes.com/news/a20230904PD227/china-semiconductor-equipment-self-sufficiency.html
Hashtags
@communia · Post #37527 · 07.11.2023 г., 08:48
#EEUU intenta atraer a #Brasil con industria de #chips para alejarlo de #China https://www.infobae.com/america/america-latina/2023/11/06/estados-unidos-le-ofrecio-a-brasil-convertirse-en-una-de-las-fabricas-de-chips-mas-importantes-del-mundo/
@communia · Post #37460 · 31.10.2023 г., 07:17
#China a tres años del liderazgo en CPUs de #EEUU . #GuerraTecnológica#chips https://elchapuzasinformatico.com/2023/10/loongson-3a6000-vs-intel-i3-10100f-vs-amd-ryzen-5-3100-ipc/
@communia · Post #37231 · 11.10.2023 г., 06:48
#guerratecnológica#China supera el cerco de #EEUU en #chips «Como indica la publicación del portal francés, SMEE (una empresa china de fabricación y producción de chips) ha anunciado que a finales de este mismo año comenzará a producir chips en sus nuevas máquinas litográficas de 28 nm. Hasta ahora, los equipos más avanzados de China creados por la mano de obra nacional podían desarrollar chips de 90 nm, muy por detrás de las de 5 nm de firmas como TSMC (Taiwán), Samsung (Corea del Sur) e Intel (Estados Unidos). Y, aunque 28 nm sigue estando muy lejos de las citadas unas líneas atrás, supone un avance importante respecto a las de 90 nm con las que operaba China.» https://www.3djuegos.com/tecnologia/noticias/china-supera-ultima-jugarreta-estados-unidos-sorprende-fecha-su-primer-equipo-desarrollo-avanzado-chips
@communia · Post #37079 · 27.09.2023 г., 19:23
#GuerraTecnológica. #China usará aceleradores de partículas (aún más capitalización) para fabricar las nuevas obleas de #chips y eludir sanciones de #EEUU https://www.tomshardware.com/news/china-aims-to-use-particle-accelerator-to-build-chips-and-evade-euv-sanctions
@communia · Post #37145 · 05.10.2023 г., 09:14
#Corea del Sur. #guerratecnológica. Samsung reduce a la mitad la producción de #chips de memoria para subir sus precios https://elchapuzasinformatico.com/2023/10/samsung-para-produccion-chips-memoria-subida-precio/
Hashtags
@communia · Post #37133 · 04.10.2023 г., 18:10
#guerratecnológica#China quiere alcanzar la independencia en #chips y semiconductores para el #cocheeléctrico para evitar las consecuencias del bloqueo de abastecimientos desde #EEUU https://www.digitimes.com/news/a20231003PD204/china-ev-automotive-semiconductor-supply-chain.html