Amazon Nova möjliggör multimodal informationssökning inom tillverkningsindustrin

Amazon Web Services (AWS) har introducerat en ny lösning, Amazon Nova Multimodal Embeddings, utformad för att förbättra sökningen efter information i komplexa tillverkningsdokument. Teknologin kartlägger text och bilder till ett gemensamt vektorrymd, vilket underlättar åtkomsten till information som traditionellt har varit svår att nå.

Traditionella textsökningar misslyckas ofta när svaren finns inbäddade i tekniska ritningar, CAD-modeller eller fotografier istället för i ren text. AWS nya system integrerar dessa olika modaliteter, vilket gör det möjligt att hämta relevanta ritningar med en textfråga och textspecifikationer med en bildfråga. Detta representerar ett betydande framsteg för sektorer som flyg-, bil- och tung industri, där dokumentationen per definition är mångfacetterad.

Den nya funktionaliteten demonstrerades genom att bygga ett multisöksystem för dokumentation inom flygindustrin med hjälp av Amazon Nova Multimodal Embeddings i kombination med Amazon Bedrock och Amazon S3 Vectors. Systemets prestanda utvärderades med 26 frågor relaterade till tillverkning, och resultaten jämfördes med enbart textsökning.

Betydelsen av multimodala sökningar inom tillverkning understryks av att arbetsordrar, inspektionsrapporter och materialcertifikat ofta innehåller både text och visuell information. Detta kan inkludera monteringsanvisningar med illustrativa fotografier eller röntgenbilder av svetsfogar tillsammans med tillhörande mätvärden. Den nya tekniken öppnar nya möjligheter för datautnyttjande och effektivisering av processer.