Bing Visual Search är en ny funktion i Bings bildsök verktyg som gör att du kan markera objekt i bilder för att köra sökningar för dem.
Den nya funktionen, som är live redan på Bing, ger dig alternativ för att söka efter föremål eller personer som visas i bilder som returneras av Bing Image Search tool.
Själva processen fungerar på ungefär samma sätt som du skulle fånga en rektangulär skärmdump på skärmen. Du rita en rektangel runt objektet, Bing identifierar den, och ger resultat som matchar det.
Låt oss ta en närmare titt på hur det hela fungerar.
Bing Visuell Sökning
Första du gör är att chef över till Bing, och kör en sökning med sökmotorn image search tool.
Välj ett av de resultat som du är intresserad av. Du kommer att märka den nya “sök i denna bild” – ikonen för att Bing Bilder som visas i det övre vänstra hörnet av bilden. När du klickar på den, Visual Search tool är laddad så att du kan markera ett objekt eller en person på skärmen för att köra att söka på Bing.
Det Visuella verktyget Söka på Bing visar ett urval rektangel på skärmen som du kan flytta runt och ändra i storlek. Detta fungerar genom att dra och släppa. Du kan också rita en ny rektangel på skärmen istället, det gamla tas bort när du gör så.
Bing returnerar information när du flyttar rektangel, eller ändra dess storlek. Det är inte nödvändigtvis så att “relaterade bilder” ändra när du gör det, men de kan beroende på ditt val.
Visual Search-funktionen visas bara om bilder, vilket innebär att du inte kan använda det till andra saker. En möjlighet att identifiera element på en bild skulle säkert vara användbart också.
Allt du får just nu men är en lista över bilden för att Bing anser är kopplade till det markerade området på bilden.
Identifieringen fungerar förvånansvärt väl för vissa frågor. Medan du bör inte förvänta sig 100% procent matcher, speciellt när flera bilder tillbaka, det fungerar bättre än omvänd bild sökmotorer.
Microsoft konstaterar att detta fungerar riktigt bra för shopping relaterade sökningar. Markera en ljuskrona i din dröm hem och få kristallkronor som ser ut som det (eller liknande) i resultaten. Allt du behöver göra sedan är att följa länkarna för att ta reda på hur mycket det kostar, och där kan du köpa den.
Microsoft avslöjar hur det nya Visual Search tool processer frågor:
- Det första steget är bilden förståelse för steg. Microsoft använder bildbehandling tjänster för att “utföra object detection, utvinning av olika bild-funktioner, inklusive DNN funktioner, funktioner erkännande, och ytterligare funktioner som används för att duplicera upptäckt”.
- Sedan kommer Texten Fråga Slutledning steg. Bing försöker beskriva bilden med hjälp av test baserat på resultaten av bildbehandling tjänster.
- En utlösande scenario är sedan köra som identifierar olika scenarier för bildsökning.
- Nästa upp är bilden matchning med hjälp av Bing Visuella Ord funktion som “gör det möjligt för oss att kvantisera en tät funktion vektor i en uppsättning diskreta visuella ord”.
- Bild kandidater som sedan rangordnas i det sista steget, och det bästa matchande bilder returneras som resultat.
Dom
Bing Visual Search är en lovande funktion som fungerade riktigt bra under testerna. Dina resultat kan variera beroende på vad du söker för och markera på bilderna dock. Om du kör vissa sökningar, låt mig veta hur det gick för dig.
Jag önskar att Microsoft skulle förbättra den grundläggande funktionen i framtiden för att återgå sms: a resultat också.
Nu är Du: Vad är din syn på Bing Visuell Sökning?