Gesture Interaction

Lift-off for augmented reality and gesture focus @Mobile World Congress

Augmented reality and gesture control will change the future – and that future is already here. This was the message from Mobile World Congress (MWC) 2019, which has just taken place in Barcelona. The solutions on show in Barcelona demonstrated how augmented reality and touchless interaction with hand gestures will revolutionise how we experience our […]

Augmented reality and gesture control will change the future – and that future is already here.
This was the message from Mobile World Congress (MWC) 2019, which has just taken place in Barcelona.

The solutions on show in Barcelona demonstrated how augmented reality and touchless interaction with hand gestures will revolutionise how we experience our physical environment.

Testing the Crunchfish-pinch and the customer experience

Among the headline makers was Microsoft, which unveiled its second iteration of HoloLens, the world’s leading AR glasses. HoloLens 2 uses touchless gestures as its main control technology. See the presentation at https://youtu.be/k_eNxzn9DT0.

Besides HoloLens, more and more companies are making smart AR glasses, AR software and optical display technology. This is great news for us at Crunchfish and our AR technology, which enables all forms of interaction with a simple pinch gesture.

Another eye-catching innovation came from LG, which exhibited mobile phones with 3D sensors and touchless gesture control. LG also showed how smart AR glasses will be part of the consumer experience through its collaboration with Nreal.

Meanwhile, our friends at Vuzix reused the CES booth setup to show how the Blade can be used in everyday life.

Crunchfish exhibited in the Swedish pavilion and in the Infineon booth. Besides showing our gesture control technology integrated in smart glasses from Vuzix, Realwear, Epson, LLVision and RealMax, we proudly showed a demo of how our gesture control technology can be used for controlling lamps in smart homes.

Using hand gestures to interact with virtual AR objects gives the user a more immersive experience compared to when interacting with a screen or using a HW control device.

In the Infineon booth the demo consisted of a Philips Hue lamp that could be controlled by a UI only visible in AR when pointing the mobile device at the lamp. By using gestures to interact with the UI, the lamp could then be turned on/off, dimmed and change colour. The UI could also be moved around in 3D to be placed wherever the user would like to have it. See the demo film https://youtu.be/bO_t4lFjO_Y

We demonstrated how our technology adds value in smart AR glasses together with our hardware partners and one of our software partners, Nibiru. With Infineon, we displayed how it can be used in a mobile AR and smart home context.

We were delighted to see substantial interest from hardware and software makers alike. Visitors ranged from Samsung and HTC to RealMax, Volvo Cars and PTC – to name a few.

Like them, we look forward to being part of the AR and gesture control revolution. And in helping to shape a future that has already arrived.


Reflektioner från världen största mobilmässa

Mobile World Congress i Barcelona avslutas idag. En enorm smältdegel där branschfolk från hela världen kommer samman för att mötas och visa upp den senaste produktutvecklingen på ett gigantiskt mässområde, stort som 20 fotbollsplaner. Parallellt arrangeras även MWCs start-up mässa 4YFN, med fokus på framtiden 4 Years From Now på Barcelonas näst största kongressanläggning närmare […]

Mobile World Congress i Barcelona avslutas idag. En enorm smältdegel där branschfolk från hela världen kommer samman för att mötas och visa upp den senaste produktutvecklingen på ett gigantiskt mässområde, stort som 20 fotbollsplaner. Parallellt arrangeras även MWCs start-up mässa 4YFN, med fokus på framtiden 4 Years From Now på Barcelonas näst största kongressanläggning närmare stan. Vi var där i syfte att förstå trenderna inom närhetsbaserad interaktion och geststyrning samt hitta potentiella partners för vår m-handels satsning Blippit. Detta är våra personliga tankar från mässan. En annan rapport följer från vårt utställande geststyrningsteam efter mässan.

Crunchfish ställer ut i den svenska paviljongen tillsammans med en tjugotal andra bolag. Vi visar upp vår interaktionsteknologi för AR där vi med en enda nyp-gest kan erbjuda all form av interaktion, även om enheten bara är utrustad med en vanlig 2D kamerasensor. Det är den sensor som finns i dagens mobiler och även viktig för smarta AR-glasögon om de skall vara tillräckligt nätta för att volymmarknaden för privat bruk skall öppnas upp.

Henrik Winberg och Joakim Nydemark i Crunchfish monter på MWC

Marknaden för smarta AR-glasögon är idag fokuserad på industriella tillämpningar och det visades upp massor av ny teknologi inom området. Crunchfish står även i Infineons monter för exemplifiera vad vår interaktion kan göra tillsammans med deras avancerade time-of-flight sensorer.

Microsoft är marknadsledare inom smarta AR-glasögon med Hololens. De har också fokus på industriell tillämpning. Under mässan lanserade de sin andra generation av produkten. https://youtu.be/k_eNxzn9DT0 Vi gläds över att Microsoft visar upp handgester som huvudsaklig interaktionsmetod i Hololens 2 med sin inbyggda time-of-flight sensor. Det stärker vår övertygelse att vi är på rätt väg med vår interaktionslösning och kommer vara attraktiva på marknaden, inte minst eftersom vi möjliggör för nättare AR-glasögon för industriella tillämpningar och den kommande konsumentmarknaden.

Med Hololens 2 erbjuds utökade möjligheter att skapa och interagera med virtuella objekt, så kallade hologram. De talar även om att koordinater i rymden, så kallade SLAM-punkter, skall kunna delas mellan olika AR-enheter, inklusive mobil AR. Det öppnar upp för att AR-applikationer kommer att kunna interagera med varandra när de visualiserar samma augmentering eller förstärkning av verkligheten.

Möjligheten för olika AR-applikationer att uppleva samma virtuella objekt kommer att snabba på standardiseringen av AR-interaktionen. Det är positivt för Crunchfish eftersom vi erbjuder en homogen gestinteraktion, oavsett om användaren kör en AR-applikation i mobilen eller i smarta AR-glasögon. Microsoft kommer fortsätta att utveckla geststyrning för Hololens och vi för alla andra AR-enheter och AR-applikationer.

Joachim och Iris Barcia, Keima

När det gäller kontaktlös interaktion för m-handel visade mässan i huvudsak upp NFC interaktion med kortterminaler eller scanning av QR-koder som är vanligt på den kinesiska marknaden. Vi såg inte mycket på mässan av bluetooth-baserad interaktion, som Crunchfish Proximity har utvecklat åt Blippit. Det är positivt eftersom vi då har ett försprång med bluetooths många fördelar över både NFC och QR-koder som närhetsbaserad interaktion, samtidigt som vår patentsökta blippfunktion åstadkommer samma sak i absolut närhet.

Blippits egenutvecklade appterminal som ger mobila appar access till butikskassan har potential att bli en global game changer för betalning i butik. Som tidigare annonserats kommer vi att visa upp lösningen i ClearOns monter på Innoday 21 mars i Stockholm med Swish som app. På MWC sökte vi efter fintech-bolag som levererar tekniklösningar för butikshandeln för att förstå vad de erbjöd och hur deras lösning kunde komplettera Blippits lösning. Vi träffade ett handfull bolag som erbjöd betalväxlar som Blippit skulle kunna integrera sig mot.

Franska Ingenico marknadsför sig som global ledare för sömlös betalning. I deras monter hamnade vi i bra diskussioner om hur Blippits innovativa appterminal kunde komplettera deras erbjudande på världsmarknaden. Kommer att bli spännande att följa upp de diskussionerna. Vi sökte även efter Verifone som är Ingenicos amerikanska huvudkonkurrent, men de var inte närvarande som utställare på mässan.

Vid besök på MWCs 4YFN-mässa inne i Barcelona hade vi förväntat oss att bara hitta start-ups, men där fann vi även Amazon som utställare. Kanske inte förvånande ändå eftersom deras Amazon Go är ett framtidskoncept för butikshandeln samtidigt som de driver digitalisering av dagligvaruhandeln med deras köp av Whole Foods kedjan i USA för några år sedan. Vi hade en trevlig diskussion även med dem om appterminalens möjligheter som också kommer bli kul att följa upp.

Sammanfattningsvis känner vi oss efter hektiska dagar på mässan mycket optimistiska inför framtiden. Crunchfish har världsledande interaktionsteknologier för både AR och fysisk handel och vi kommer få bra utväxling på vår position när dessa marknader nu tar fart.

Vid pennan:
Crunchfishs grundare Paul Cronholm och styrelseordförande Joachim Samuelsson


Experience the Hololens 2 interaction in a smartphone

Crunchfish offers the “Hololens 2 gesture interaction” for smart phones and smart AR-glasses already today. Experience it and meet the Crunchfish team in the Swedish pavilion and in the Infineon booth at MWC. If you have seen the Microsoft presentation of the Hololens 2 interaction you will notice how striking similar both the UI and […]

Crunchfish offers the “Hololens 2 gesture interaction” for smart phones and smart AR-glasses already today.

Experience it and meet the Crunchfish team in the Swedish pavilion and in the Infineon booth at MWC.

If you have seen the Microsoft presentation of the Hololens 2 interaction you will notice how striking similar both the UI and the gesture interaction is to what Crunchfish offers already today for smart phones. See the demo film.
 Visit Crunchfish at MWC and experience true immersive interaction in augmented reality by using Crunchfish’s latest touchless gesture interaction.

You find us in the Swedish pavilion (Hall 7 E41&F41) and in Infineon’s booth (Hall 6 C41).

For more information, please contact:

Henrik Winberg, Sales Director,
+46 702 126 129,
henrik.winberg@crunchfish.com

Joakim Nydemark, CEO,
+46 706 351 609,
joakim.nydemark@crunchfish.com

About Crunchfish
Crunchfish develops and markets patented interaction solutions for augmented reality and m-commerce. Our technologies make it possible to control AR glasses and consumer electronics with gestures. We are a world leader in this field, with installed software in tens of millions of devices in partnership with customers including OPPO, Epson and Lenovo. In m-commerce we focus on near-field interaction, operating through our subsidiary Crunchfish Proximity. Using proprietary app terminal and software we provide touch-based voucher redemption and payments through a joint venture company, Blippit, in partnership with ClearOn. Headquartered in Sweden, Crunchfish was founded in 2010 and has been listed on Nasdaq First North since 2016.

Crunchfish erhåller patent inom AR/VR interaktion

Crunchfish har erhållit förhandsbesked om patent avseende AR/VR-interaktion av svenska patent och registreringsverket PRV. Patentet skyddar hur användaren får visuell hjälp med att förstå vilken gest som aktiverar ett virtuellt objekt i smarta AR-glasögon eller VR-hjälmar. Detta är bolagets 23:e patent inom geststyrning och har därmed lyckats patentera 11 av 12 uppfinningar inom området. Dessutom […]

Crunchfish har erhållit förhandsbesked om patent avseende AR/VR-interaktion av svenska patent och registreringsverket PRV. Patentet skyddar hur användaren får visuell hjälp med att förstå vilken gest som aktiverar ett virtuellt objekt i smarta AR-glasögon eller VR-hjälmar. Detta är bolagets 23:e patent inom geststyrning och har därmed lyckats patentera 11 av 12 uppfinningar inom området. Dessutom har Crunchfish patent för 11 av 18 uppfinningar inom närhetsbaserad interaktion.

Avancerad bildbehandling och artificiell intelligens möjliggör för elektronik att förstå handgester och översätta dem till kommandon. Med geststyrning uppstår nya interaktions­möjligheter att styra enheter utan att fysiskt vidröra dem. Detta är särskilt viktigt inom AR/VR, eftersom ingen pekskärm finns tillgänglig, och användaren med fördel interagerar med handgester. Antingen tillsammans med, eller istället för, att använda fysiska knappar, röst, ögonstyrning eller handkontroller.

Patentet skyddar uppfinningen att hjälpa användaren i produkter som smarta AR-glasögon eller VR-hjälmar förstå vilken gest som aktiverar ett virtuellt objekt, genom att visa en transparant handikon över objektet.

Detta patent gäller till maj 2037 och bolaget har även lämnat in en internationell PCT-ansökan som granskats och konstaterats patenterbar. PCT-ansökan ger Crunchfish en frist till november 2019 att bestämma de marknader där bolaget avser att söka nationella patent. Typiskt ansöker bolaget om patent i Europa, USA och Kina 30 månader efter inlämningen av den initiala svenska patentansökningen.

Bolaget har en stark patentportfölj som skyddar ett brett spektrum av uppfinningar på valda nyckelmarknader. Beviljandet innebär att bolaget lyckats patentera 11 av 12 uppfinningar inom geststyrningsområdet.

Bifogad översikt förklarar patentportföljen inom geststyrningsområdet genom att relatera uppfinningarna till användarflödet. Tre patent relaterar till hur kameran aktiveras eller deaktiveras vid geststyrning, fem uppfinningar skyddar hur användaren interagerar med konsumentelektroniken, samt fyra patent skyddar hur Crunchfish skapar snabba och strömsnåla geststyrningsalgoritmer.

Crunchfishs patentportfölj
Crunchfish har, nationellt och internationellt, 58 aktiva patent och patentansökningar inom två teknologiområden – geststyrning och närhetsbaserad interaktion. Det finns 12 unika uppfinningar inom geststyrning varav 11 har fått avisering om patentering samt 18 unika uppfinningar inom närhetsbaserad interaktion av vilka 11 blivit beviljade. Bolaget äger samtliga sina patent och patentansökningar utan begränsningar.

Crunchfish strategi är att skydda bolagets teknologi på alla geografiska marknader som bedöms vara av betydelse. Crunchfish har för avsikt att utöka sin patentportfölj kontinuerligt till utvalda marknader och genom nya uppfinningar inom både geststyrning och närhetsbaserad interaktion.

För ytterligare information kontakta:

Styrelseordförande och bolagets IP-ansvarig Joachim Samuelsson 0708 464 788, joachim.samuelsson@crunchfish.com

VD Joakim Nydemark 0706 351 609,
joakim.nydemark@crunchfish.com

Certified Adviser: Sedermera Fondkommission, epost: ca@sedermera.se, telefon 040-615 14 10

Denna information är sådan information som Crunchfish AB är skyldigt att offentliggöra enligt EU:s Marknads­missbruksförordning. Informationen lämnades, genom ovanstående personers försorg, för offentliggörande den 21 februari 2019. 

Om Crunchfish – crunchfish.com

Crunchfish AB utvecklar och marknadsför patenterade interaktionslösningar för augmented reality och mobil handel. Inom AR erbjuder bolaget mjukvara för geststyrning av AR-glasögon och annan konsumentelektronik. Mjukvaran är en av de ledande i världen och finns i tiotals miljoner enheter på marknaden genom kunder som OPPO, Epson och Lenovo. Verksamheten kring Mobil handel bedrivs i dotterbolaget Crunchfish Proximity med fokus på närhetsbaserad interaktion. Med egenutvecklad appterminal och mjukvara möjliggörs blippbar kupong­inlösen och betalning. Kommersialiseringen görs i samarbete med ClearOn i det gemensamma bolaget Blippit. Crunchfish är noterat på Nasdaq First North sedan 2016. Företaget grundades 2010 med huvudkontor i Malmö.

Ladda ner som PDF


Experience Touchless Gesture interaction in AR

Meet the Crunchfish team in the Swedish pavilion 
and on the Infineon booth at MWC, 25-28 February 2019. Experience true immersive interaction in augmented reality by using Crunchfish’s latest touchless gesture interaction. In the Swedish pavilion (Hall 7 E41&F41) and in Infineon’s booth (Hall 6 C41), we will demonstrate how to cross the border between […]

Meet the Crunchfish team in the Swedish pavilion 
and on the Infineon booth at MWC, 25-28 February 2019.

Experience true immersive interaction in augmented reality by using Crunchfish’s latest touchless gesture interaction. In the Swedish pavilion (Hall 7 E41&F41) and in Infineon’s booth (Hall 6 C41), we will demonstrate how to cross the border between your reality and the augmented reality in mobile AR and smart AR glasses. Infineon Technologies AG is a world leader in semiconductor solutions that make life easier, safer and greener.

For more information, please contact:

Henrik Winberg, Sales Director,
+46 702 126 129,
henrik.winberg@crunchfish.com

Joakim Nydemark, CEO,
+46 706 351 609,
joakim.nydemark@crunchfish.com

About Crunchfish
Crunchfish develops and markets patented interaction solutions for augmented reality and m-commerce. Our technologies make it possible to control AR glasses and consumer electronics with gestures. We are a world leader in this field, with installed software in tens of millions of devices in partnership with customers including OPPO, Epson and Lenovo. In m-commerce we focus on near-field interaction, operating through our subsidiary Crunchfish Proximity. Using proprietary app terminal and software we provide touch-based voucher redemption and payments through a joint venture company, Blippit, in partnership with ClearOn. Headquartered in Sweden, Crunchfish was founded in 2010 and has been listed on Nasdaq First North since 2016.

Crunchfish utökar samarbetet med OPPO

Nasdaq First North-noterade Crunchfish utökar samarbetet med världens fjärde största mobiltelefontillverkare – OPPO. Inom ramen för ett tilläggsavtal kommer mobiltelefoner under varumärkena OPPO och Realme att använda Crunchfishs mjukvara för geststyrning. Avtalet löper under 1 år med möjlighet till förlängning. Tilläggsavtalet inkluderar en licens för användning av några fördefinierade gester inom ett specifikt applikationsområde och […]

Nasdaq First North-noterade Crunchfish utökar samarbetet med världens fjärde största mobiltelefontillverkare – OPPO. Inom ramen för ett tilläggsavtal kommer mobiltelefoner under varumärkena OPPO och Realme att använda Crunchfishs mjukvara för geststyrning. Avtalet löper under 1 år med möjlighet till förlängning. Tilläggsavtalet inkluderar en licens för användning av några fördefinierade gester inom ett specifikt applikationsområde och initiala ordervärdet är 200,000 USD.

Tillägget av licensavtalet innebär att ett flertal nya telefonmodeller under varumärkena OPPO och Realme kommer med Crunchfishs mjukvara för geststyrning under 2019. Överens­kommelsen bygger på befintligt grundavtal som löper sedan tidigare och som består av både licens- och supportkomponenter.

Tilläggsavtalet löper till och med slutet av december 2019 med möjlighet till förlängning.

”Samarbeten med ledande globala leverantörer på mobiltelefonmarknaden är strategiskt viktigt för oss, eftersom dessa företag är aktiva inom AR och kommer att spela en central roll som leverantörer av såväl AR i mobilen som av AR-glasögon till slutkonsument. OPPO är en av de ledande aktörerna med en produktinriktning som ligger i linje med hur vi ser på mark­naden och vi är därför väldigt glada över det fortsatta förtroendet som leverantör ” säger Joakim Nydemark, VD på Crunchfish.

För ytterligare information kontakta:

Joakim Nydemark, VD
Telefon: 0706 351 609
Epost: ir@crunchfish.com


Certified Adviser: Sedermera Fondkommission
Epost: ca@sedermera.se, telefon 040-615 14 10

Denna information är sådan information som Crunchfish AB är skyldigt att offentliggöra enligt EU:s Marknadsmissbruksförordning. Informationen lämnades, genom ovanstående kontaktpersons försorg, för offentliggörande den 5 februari 2019

Om Crunchfish

Crunchfish utvecklar och marknadsför Augmented Reality-teknik för m-handel och industriella samt sociala applikationer. Vår mjukvara gör det möjligt att styra elektronik med gester och möjliggör AR i en tredje parts applikation. Crunchfishs teknik är licensierad till både hårdvaruproducenter och applikations-utvecklare och finns för närvarande tillgänglig i enheter och applikationer från globala spelare. Crunchfish är noterat på Nasdaq First North sedan 2016. Företaget grundades 2010 och är baserat i Sverige. Besök crunchfish.com för mer information.

Ladda ner som PDF