Video: Phaser - Fast Forward (Official Video) (September 2024)
Virtual och augmented reality var heta ämnen på SXSW i år, men konversationerna sträckte sig utöver headset. För att vara verkligt uppslukande måste erfarenheterna integrera alla fem sinnen. Syn, ljud, beröring, lukt och till och med smak.
Crum är också adjungerad professor vid Stanford University i Center for Computer Research in Music and Acoustics och Program in Symbolic Systems. Crum var på SXSW som en del av IEEE: s Tech for Humanity-serie. Hon förstår ljud och mycket mer.
Costa: Vallmo, tack så mycket för att du gick med oss idag.
Crum: Tack för att du har mig. Det är fantastiskt att vara här.
Så vi kommer att prata om klyftor, vi kommer att prata om förstärkt verklighet, vi kommer att prata om kanske lite virtuell verklighet, kanske vi kommer att prata om de smärtlösa migrän som vi två upplever från tid till annan till tid. Först av allt, din roll på Dolby. Hur ser en arbetsdag ut för dig? Vad gör du när du kommer till kontoret?
Vi har ett stort team av beräknade neurovetenskapsmän och människor som är experter på sensorisk perception. Om du tittar tillbaka på Dolbys historia och går tillbaka, till och med 50 år, i kärnan i företaget, har det alltid varit en förståelse för mänsklig erfarenhet. Jag tror att det hjälpte till att skilja hur vi tänker på byggteknik.
Så dagligen, människorna i mitt team och de människor jag arbetar med ser vi över teknologier. Vi är inte bara ljud längre, det handlar verkligen om en holistisk känsla. Vi har laboratorier, och det finns många experiment som pågår under hela dagen.
Vår nya byggnad har upp till 100 laboratorier, men vi har några fantastiska biofysiska laboratorier. Min bakgrund är som neurofysiolog - samma sak med många människor i våra team. Och det finns mänsklig fysiologi som händer dagligen för att tänka på ny teknik, och det finns mycket väldigt ledande arbete med att tänka på hur vi upplever information som är flersensorisk och verkligen tittar på hur vi ska konsumera innehåll i framtiden som är så rik och vad det kommer att betyda för hur det påverkar våra kroppar, hur det påverkar hur vi samarbetar med andra och våra sinnen.
En av de saker som du har pratat om på utställningen och att vi har täckt mycket mer på PCMag är detta härliga segment. Hearables är inte ett ord som jag tror att många av vår publik är bekanta med. Vad hör det när du hör ordet svalnar? Vad betyder det?
Just nu tror jag att det är en term som fortfarande definieras. Jag gillar att ta det som en mycket stor del av produkter och möjligheter. Det är en trådlös enhet eller i vissa fall till och med kabeldragna. Eftersom Amazon Echo kommer jag att ringa en värmningsbar och som är ansluten, men det är en enhet som har mikrofoner eller sensorer, men det fångar upp data från miljön och använder dessa data på något sätt för att förbättra din upplevelse. Det finns också många företag just nu som tänker i det bärbara utrymmet, en enhet som är trådlös, sliten på din kropp, men det finns också statiska värmebatterier om vi tittar på Google Home och Amazon Echo, och de är transformerande.
Det finns också mycket oro med detta. En sak ser vi som jag tycker är värt att utlysa, och jag tror att det är det som kommer att förändra och hjälpa till att definiera vad detta utrymme är förändringar i regelverk.
Just nu är hörapparater svåra. Hörapparater är en augmented reality-enhet, men du har den här klassen av konsumentenheter som har förmågan att hjälpa till att minska hörselnedsättningen, har förmågan att vara en augmented reality-enhet för någon med normal hörsel, har förmågan att till och med vara en spelapparat. Du får övergången till dessa fält den medicinska utrustningen som faller in i denna större klass och du kommer att ha en konsumentenhetsklass som tydligt passerar dessa gränser och gör en hel del liknande behandling för oss.
När det gäller hörapparater, människor tänker på hörapparater när du börjar tappa hörseln, så kan du få ett hörapparat som sedan ger dig en del av din hörsel tillbaka, men det finns massor av intressanta saker som kan hända om människor började förstärka sin hörsel med… de har normal hörsel, men de vill ha något mer än normal hörsel.
Absolut. Jag är alltid en stor tro på att inte skapa denna godtyckliga gräns där vi säger: "Nu har jag hörselnedsättning." Vår hörsel, på grund av många delar i världen och ljudet, är till och med aspirin ett ototoxiskt som du måste vara-
Är det rätt?
Absolut. Kombinationen av element som du lägger i vår hörsel börjar bli nedbrytande i våra tidiga 20-tal och förmodligen ännu tidigare med några av de höga ljud som människor lyssnar på.
Särskilt South by Southwest.
Ja. Koderna har så många olika funktioner du kan ha. Oavsett om det har kontroll över strömning av ditt innehåll direkt till din enhet - trådlöst - kontroll av element, rumslig information. Saker vi pratar om -. det har varit ett stort tryck i att ta information, förstärka vår visuella känsla med Google Glass eller några av dessa enheter från andra företag, och verkligen - vad vi vill - den ljudkomponenten i det kan vara mycket kritiskt för att låta oss komma förbi vad vi kan kalla en kapacitetsbegränsning. Och att ta information från vår värld och verkligen representera den som ett ljud.
Det verkar för mig att det som får människor att tänka annorlunda om ljud- och röstkontroller och röstinteraktioner, men också integritet, är enheter som Google Home och Amazon Echo, som verkligen är de första mainstream-röstgränssnitten som vi har haft för denna digitala världen och det kommer med alla dessa olika konsekvenser, som jag tror att vi bara börjar sortera. Var ser du den marknaden på väg?
Det är en fantastisk fråga. Jag måste säga, jag tror att dessa enheter är transformerande på så många sätt, och jag är en stark användare och en starkare delare av dem, delvis för att också förstå och titta på var de kommer att utvecklas till och hur jag använder dem i mitt liv dagligen. Idén att människor är villiga att alltid ha mikrofoner, det är ett stort hopp. Vad kan vi göra med det?
Just nu är röst en underbar sak. Det ger människor kontroll; det får dem ombord att ha den här enheten som assistent i sina liv. Tio år på vägen vill jag inte behöva kontrollera fler saker i mitt liv. Jag vill att mina enheter ska… Jag kommer att lita på mina data mer än jag kommer att lita på mig att veta vad jag behöver i vissa fall och jag vill att enheterna ska vara…
Anteciperande.
Absolut. Jag vill att de ska vara proaktiva och fånga mycket information om ljuden runt mig, oavsett om jag har hostat och modulerat min temperatur. Eller bara göra mina möten för mig när jag behöver eller för att kunna bara göra att våra liv går framåt utan att behöva kontrollera alla enheterna.
Du kan tänka dig att ekot kunde upptäcka om du har snifset. Det kan upptäcka om du låter som om du har ont i halsen eller om du har hostat och sedan låter dig veta att det låter som att du har förkylning.
För att gå vidare och schemalägga din läkares möte innan du. Det låter som lite långtgående att vilja ha det, men samtidigt tror jag att vi kommer dit. Jag tror att steget med att ha röstkontroll, integrera dessa i våra liv kommer att göra oss bekväma med det.
I framtiden är den enda gången vi kommer att vara obekväm när saker inte fungerar och när de är borta och när de saknas.
Jag hade en upplevelse med ett eko som låter mig inse hur mycket det hade överskridit interaktioner som jag hade och som kunde hjälpa människor över olika demografi. Men ja, jag tror att folk har tänkt på dessa enheter mycket för tillgänglighet, vilket är underbart. Gilla tillgången som den kan ge både mycket små barn eller olika åldersintervall eller olika människor som…
Människor som har funktionsnedsättningar eller brister eller luckor som kan fyllas i med hjälp av teknik.
Absolut. I mitt fall hade jag en släkting som låg på sjukhuset och han dött för några veckor sedan. Jag hade köpt honom, precis när Echo kom ut; Jag köpte honom ett Echo som en tillgänglighet. Här är omvandlingen. Jag tog den till sjukhuset, och enheter som detta är fenomenala för sjukhusinställningar. Sekretessfrågorna blir viktiga att ta hänsyn till, men vi använder det främst för musik som spelas i den inställningen.
Men vid denna tidpunkt var min släkting inte så hög, han hade inte talat och vi hade spelat musik på Echo som vi trodde var vad han skulle vilja höra, Bach och väldigt lugnande musik och ärligt talat, några av de sista orden han sa, och jag tullar inte, vilket jag minns, var, "Alexa, spela Al Green." Han ville till henne Al Green, Sly och The Family Stone och denna enhet gav honom den tillgängligheten. Det var kraftfullt och i en tid där det var mycket kraftfullt.
Det finns många tekniker att spela där. Du har det faktum att Al Green är tillgänglig och att det finns det här enorma musikbiblioteket som är ett röstkommando bort och sedan har du själv röstkommandot, vilket gör det möjligt för honom att begära det personligen. Så det händer mycket där.
Jag tror att när du tar upp integritetsfrågan, det är en annan fråga är att innan Alexa gör våra läkares möten, misstänker jag att något läkemedelsföretag kommer att erbjuda oss ett bord med kall medicin eller att våra allergier agerar och erbjuder ett Zyrtec, och jag tror att det är nästan ett mellansteg vi måste komma igenom vem som ska kontrollera all den information som fångas och att vi ger bort i detta ljudformat.
Vi måste omfamna det. Om vi inte tänker på regleringssidan och vi inte tänker på hur vi ska göra människor bekväma med att tillhandahålla dig, ännu mer, data än vad vi för närvarande är. Jag tror att Amazon just nu säger "Vi lyssnar bara när du säger Alexa", men dessa enheter för att göra vad de verkligen kan göra måste du lyssna hela tiden.
Det finns en stor trend just nu av företag, försäkringsbolag, oavsett om det är bilförsäkring eller sjukförsäkring som erbjuder konsumenterna en affär eller ett sätt att ha lägre priser om de tillåter att deras data spåras - om de lämnar sina uppgifter. Jag tycker att det är väldigt kraftfullt. Jag tror att det kommer att vara en del av vår framtid, det är ingen fråga om det, men den framtiden för vad konsekvenserna av att dela dessa data, som inte ens har definierats ännu, och det är svårt att förutsäga. Så vi måste verkligen tänka på hur den framtiden ser ut.
Jag tror också att det finns ett problem med permanentitet där människor är "Jag bryr mig inte om att ge mitt sjukvårdsföretag eller min försäkringsleverantör antalet steg jag gör varje vecka, " men den informationen går inte någonstans, och stegen du gör den här veckan kommer att vara sökbar och indexeras 30 år från och med nu, och den idén om digital permanenthet som vi lever med idag, som verkligen, i mänsklig historia, aldrig riktigt har hänt förut. När du lägger till det faktum att du kan ha en mikrofon i ditt kök hela tiden, kommer all den informationen inte att gå någonstans. Amazon kommer alltid att ha det.
Den framtiden är oskriven och vi vet inte konsekvenserna. Vi har inte definierat dessa regler, men de kan till och med förändras i framtiden eftersom många saker kan förändras.
Och här är en annan sak. Jag tror att kulturellt sett har EU försökt anta mycket mer konsumentskyddande lagstiftning just nu, men det är inte klart vad det betyder eftersom uppgifterna finns. Vi måste säkerställa interoperabilitet när du reser. Vi behöver garantera säkerhet för små IoT-enheter. Det är en riktigt kritisk sak. Jag tror att grupper som NIST är mycket aktiva för att lösa detta.
När du tittar på vad Dolby gör och all teknik som de arbetar med börjar du se vanliga teman, och en av dem är att företaget verkligen försöker ge människor en superkänslighet, övermänskliga krafter. Det låter över toppen. Det låter hyperboliskt, men det finns ett gäng exempel på att människor får övermänskliga krafter med teknik. Kan vi bara prata om ett par av dessa?
Absolut. Så jag kommer från en bakgrund som neurofysiolog, som funderar på hur vi integrerar dessa saker med teknik och det finns ett par saker som är viktiga. När vi tänker på vad den förstärkta verkligheten är eller vad tekniken kan göra för oss idag… när jag först gick med i Dolby var vi kanske på väg att arbeta med Dolby Vision och Dolby Vision är ett högt dynamiskt intervall och bredare färgutbildnings-teknik. Bara för att få en uppfattning skulle den typiska skärmen du skulle ha köpt för cirka tre år sedan ha varit 300 till 400 kandelor per kvadratmeter. Månen, den naturliga månen är ungefär ett till två tusen, solljus på svart trottoar, du får upp till 15 000 kandelor per kvadratmeter.
Så displayteknologi var mycket långt borta från vad vårt faktiska sensoriska system kunde hantera. Och i utvecklingsprocessen arbetade vi med lite innehåll och enheter som gjorde det möjligt för oss att få upp till 20 000 kandelor per kvadratmeter i ljusstyrkan som producerades-
Och detta är inte nödvändigtvis kontrast, detta är inte upplösning, detta är ljusstyrkan.
Ja, från en uppfattning och sensorisk perspektiv sida, för många tittaravstånd, vi är ganska maxed i vad våra sensoriska system, ditt perceptuella system kan hantera när det gäller upplösning. Men när det gäller ljusstyrka och färgutbud, var vi inte så nära. Så det är ganska spännande att vara, "okej det finns det här området som vi kan förbättra upplevelsen och vi kan leda inom detta område." Det är ganska spännande.
Så bara baserat på luminansen som nådde näthinnan, säger min hjärna: "Okej, jag har aldrig upplevt lågan som var så ljus som inte var verklig, så sannolikt kommer min hjärna att uppträda med den elden som om den är verklig."
Så nu när vi tänker på fördjupande tekniker och skapar superkrafter och skapar upplevelser, kan vi tänka på att de engagerar vårt fysiologiska system på ett naturligt sätt, ett autentiskt sätt och sedan kan vi förbättra dem. Vi har förmågan att gå utöver vad du kan uppleva i den naturliga världen, och det blir ganska kraftfullt.
Ja, det är ett bra exempel. Vi har också pratat lite om hur vi i PCMag testat ett antal ER-system. Det finns mycket lovande tekniker i verken där. Vi fokuserar alltid på hur det ser ut på skärmen, på upplösningen, men ljudkomponenten till virtual reality och augmented reality är lika viktigt som den visuella komponenten och hjälper till att sälja upplevelsen. Kan du prata lite om vad du hittar där och hur mycket som bidrar till upplevelsen?
En stor trend över hela världen, inte bara över vårt företag, utan för andra, är det erkännandet att du inte kan studera en känsla utan den andra. Om vi tittar mot framtida enheter och holistiska enheter i AR och VR. Just nu är alla de viktigaste VR-enheterna visuella, men ett hörapparat, såvitt jag är intresserad, även om de kanske inte vill kallas detta, är en förstärkt verklighetsapparat. Den försöker förstärka det basfysiologiska systemet, tillståndet. Cochleaimplantat är en av de första implanterade biofysiska anordningarna.
Om du tänker på vad vill vi ha i den förstärkta verkligheten? Vi vill förbättra vår upplevelse av världen. Vi vill att det inte ska vara något som stör och ger oss för mycket data för att vi inte kan göra de saker vi brukade göra. Just nu är vi i trenden med riktigt coola upplevelser, men vi har inte förbättrats och berört på det sätt som jag ser fram emot att göra de vardagliga aktiviteterna i våra liv bättre. Och tillåter oss att vara mer engagerade med människor eftersom dessa saker förbättras. Jag ska ge ett exempel på det på ett sekund, men verkligen vill vi vara anslutna. Vi vill vara förlovade med våra liv. Vi vill kunna ta in mer information. Vi vill ha högre upplevelser och vi vill ha kontroll över hur rika dessa upplevelser är.
Så om vi tar all data som vi kan fånga eller… mer data är inte alltid bättre, men om vi försöker förbättra vårt visuella… Jag har sett detta hända i militären, så har jag sett det händer med teknik där jag vill skapa en AR, och jag tar information som jag försöker förbättra, och jag lägger allt i mitt visuella system. Jag lägger allt i glas, eller lägger det på platser där jag måste titta på det. Tja, vår hjärna kan inte bearbeta så mycket information. Vi kan inte ta in det samtidigt.
Så det är där ljudet… vi har en kapacitetsbegränsning i en mening, men gissa vad? Vi har andra sinnen. Och plötsligt öppnar vi upp hela denna butik som vi kan gå och verkligen använda för att förbättra våra upplevelser, och gissa vad? Det här är klisjé, men vad gäller att skapa en fysiologisk upplevelse, vad gör jag när jag tittar på en skrämmande film och är rädd? Jag stänger av ljudet. Så inte bara är det en riktigt visceral del, det är en hel möjlighet att förbättra och berika vår livsstil i termer av hur mycket information vi kan ta in och hur mycket information vi kan bearbeta. Helt enkelt att ha röster separerade eller ljudelement rumsligt skilda, kan vi bearbeta dem samtidigt istället för att våra hjärnor och informationen är helt värdelös. Det förhindrar oss från att ta upp hela vår hjärna och den kognitiva kapaciteten <genom att göra den ena saken. Det öppnar verkligen vår situation medvetenhet och vad vi kan göra.
Ljudkomponenten och alla dessa VR-saker, när vi börjar testa dem, det är något vi lägger in i varje recension, är att det ser ut så här, det låter så här, och då borde de två vanligtvis lägga till något större än summan av delarna.
Det finns så många olika saker vi kan göra med ljud i AR eller VR. Det är uppenbart att det är viktigt att skapa en rumslig upplevelse, men det är en viktig del av den. Dolby Atmos är ett exempel på en objektbaserad ljudleverans och återgivning. Så när saker är författade i Atmos och ljudelementen lever med ett datapaket, en dataström kopplad till det. Så du kan föreställa dig att det kan vara mycket kraftfullt. Det kan säga dig var ett ljud ska vara. Oavsett hur du återskapar det ljudet har det den platsen. Den har en bredd, den har en höghet, men den kan också GPS-koordinater. Det kan också ha all slags information. Vi kan ha emotionellt innehåll i framtiden om hur det ska påverka dig om vi vet något om den interaktion som händer.
Dessa är de typer av framtida saker som kan hända. Om du tänker på en AR-enhet kan den ge mycket information. Vi använder för närvarande kartor för att titta ner på vår telefon eller i en bil. Dessa saker kan göras i ett labb mycket enkelt för att skapa en sonifierad version som ger dig spårningsinformation och berättar, inte muntligt, men ger dig pingar som berättar var ljud är, vart du ska åka. Problemet är att vi måste se till att det är robust och konsekvent mellan användare och det är ett mer komplicerat problem.
Kartläggar ett fantastiskt exempel på att det fortfarande är skärmbaserat i stort och när Google Glass kom ut kunde du se all denna information, det här lilla lilla fönstret i din visuella skärm. Det jag verkligen ville var att det skulle säga mig i örat om jag skulle svänga höger eller vänster.
Japp.
Och du är precis där intill örat, du kan bara ge mig röstkommandot. Jag trodde att det var ett bättre ljudsystem och ljudsystem än det visuella systemet när det gäller bärbara lösningar.
Absolut. Och igen, ja, inte igen, jag tror att du har träffat huvudpoängen, som är att dessa är alla verktyg, och just nu, idag, har vi verktyg som vi kan använda på fantastiska sätt, inklusive neurokontroll och saker, men frågan är inte låt oss… det är att välja rätt verktyg för data, för tekniken, för användarupplevelsen som du försöker rikta in dig på. Du måste kontextuellt optimera och anpassa för din individ och för vad de försöker uppnå, och det har varit ett stort gap i det vi bygger just nu. Fantastisk teknologi och det kommer att bli rikare. Men det kommer att flytta runt och jag tror att vi måste ta till oss det vi försöker få till och tänka på hur vi som mänskligt system bäst kan uppleva det.
En av mina favorit saker att göra är att titta på andra arter. Du kan titta på om det är en groda eller en fluga, eller en fladdermus, arter som har dessa fantastiska superkrafter att göra saker som går långt utöver vad deras fysiska kroppar och en grov titt på deras hjärna kan säga dig. Att förstå hur de löser det problemet och mer, varför deras utveckling löste problemet för dem ger oss insikter. Vi måste tänka så. Vi måste tänka mer på vad som är miljötrycket på våra system, och hur kommer teknik bäst att hjälpa oss att lösa det?
Och att leverera mer och mer data är förmodligen inte alltid rätt lösning.
Sällan, sällan. Jag menar, det som gör oss framgångsrika som människan är vad våra hjärnor kastar bort. Jag pratar alltid om illusioner, jag älskar illusioner. De är roliga, men de är också den här vackra insikten när våra hjärnor får saker fel. Om vi upplever data exakt som i världen, har du faktiskt ett patologiskt tillstånd att du inte är funktionell i världen. Och vad vår hjärna ständigt gör är att hjälpa oss att väga viss information och inte ens märka annan information. Om vi märkte alla luminansförändringar som skapats av ljus, skulle vi aldrig se holistiska föremål. Vi måste fungera, och vi måste veta vad vi ska agera på, och det är det som är kraftfullt.
Låt mig ställa några frågor jag ställer alla mina gäster. Nummer ett, vad är det som håller dig uppe på natten? Vilken teknologetrend är du mest bekymrad över framöver?
Två saker. En jag tror att vi redan har berört, det finns så mycket kraft i att skapa den här typen av stormakter och vad vi kan göra med AR och VR. Mitt hopp är att vi ser på alla tekniker som vi bygger som verktyg, och vi funderar på att använda rätt verktyg på det enklaste och mest, säger jag robust, men det är konsekvent för alla våra användare att få den upplevelse som är avsedd snarare än den som är den mest sexiga och glänsande.
Den andra är dock - det handlar verkligen om uppgifterna. Det finns så mycket kraft att alltid ha mikrofoner som lyssnar som kommer att leda vår teknik framåt, flytta våra liv framåt. Men vi måste vara bekväma med vad som händer med dessa data. Vi måste vara bekväma med föreskrifter oavsett om det är självkörande bilar eller kylar, eller bara säkerheten i IOT-enheter. Om vi inte har starka förordningar och standarder och förståelse och i många fall öppenhet till algoritmerna som driver några av dessa sannolika beslut och AI bakom några av dessa enheter, tror jag att det kommer att försena och hålla tillbaka innovationen. Det kan försena teknikens kapacitet att få stora effekter i en positiv riktning för så många människor. Jag vill se att det händer. Så jag tror att det kommer att handla om standarder och förordningar som hjälper till att göra det liv.
På den positiva sidan, vad är du mest upphetsad med? Vad tror du kommer att förändra världen och blir dig upphetsad om att gå på jobbet varje dag?
Det finns en trend och en förskjutning som vi inte tänker på en mening. Vi funderar på teknik holistiskt. Vi tänker på vilken inverkan det har på syn och ljud tillsammans. Vi tänker på hela vårt fysiologiska system och, jag tror, hur vi känner, våra känslor. De saker som människor bryr sig om nu och hur vi beskriver teknikens inverkan är mycket rikare när det gäller vad det betyder för mänsklig anslutning och vad det betyder för bara den kraft den kan ha på våra upplevelser. Det är något som jag definitivt tycker är en ny riktning.
Så när det gäller en produkt, en tjänst, en teknikgadget som du älskar, som förändrade ditt liv. Finns det något som sticker ut som du är "Det här är det som gör mitt liv bättre varje dag?"
Statiska värmeutrustning. Jag använder ett Echo varje dag, och jag har sett att det används i ett så brett generationsgap och användningsfall. Jag är verkligen upphetsad där tekniker som det går och just nu är det verkligen i sina tidiga stadier av påverkan det kommer att få.
Så om människor lyssnar på detta samtal och är intresserade av ditt arbete, hur kan de hitta dig online, interagera med dig?
Du kan hitta mig online på LinkedIn, Poppy Crum. Du kan också hitta mig på Twitter @poppycrum.
