Az Neumann Társaság blogja a legfejlettebb infokom technológiákról

Jelenből a Jövőbe

Jelenből a Jövőbe

Hat éve tökéletesen működik egy bionikus kar

2023. november 06. - ferenck

Ötven éve ment az életeket megváltoztató bionikus technológiákat felvázoló, A hatmillió dolláros ember televízióssorozat. „Újra tudjuk építeni önt, meg van hozzá a technológiánk” – hangzott a mottó.

2023-ra svéd kutatók megvalósították a legendás sorozat jövőképét. Egy, jobb karját mezőgazdasági balesetben húsz esztendeje elveszített nőn 2017-ben sikeres bionikus beültetést végeztek. Azóta a mesterséges végtag teljes mértékben integrálódott az illető idegeivel, csontjaival és izomzatával.

A most ötven éves nő elmondta, hogy a bionikus kar drasztikusan megváltoztatta az életét, mozgékonyabb lett, és sokkal kevesebb fájdalmat érez. Előtte olyan érzése volt, mintha folyamatosan húsdarálóban lenne a keze.

bionikus_kar.jpg

Kétféle fájdalma volt: csonk-, ahol a könyök alatti amputáció történt, valamint fantomfájdalma. Utóbbi gyakori jelenség, a beteg a végtag eltűnése után is úgy érzi, mintha fájna a nemlétező testrész.

Nagymennyiségű fájdalomcsillapítót szedett. Mindezek mellé a korábbi szabvány karpótlást nehézkesnek, kényelmetlennek tartotta.

A bionikus kar mindent megváltoztatott. A fejlesztést svéd, ausztrál, olasz és amerikai kutatók végezték. A műtét után tízes skálán ötösről hármasra csökkent a fantomfájdalom, míg az akkor hatosnak érzékelt csonkfájdalom mára teljesen eltűnt. Sokkal kevesebb gyógyszerre van szüksége, jobban kontrollálja a bionikus kart.

Szakértők elmondták, hogy a kontroll, a nehéz irányíthatóság a hagyományos beültetések egyik legnagyobb problémája. Léteznek már nagyon kifinomult szerkezetek, de a megbízható és intuitív kontroll komoly gondot okoz. Kényelmetlenek és viselésük fájdalmakkal jár, mivel a bőrt erősen összenyomó foglalattal a végtag maradékához rögzítik őket.

A nemzetközi kutatócsoport ezért döntött az olasz Prensilia robotkarja, a Mia Hand mellett. Úgy tervezték, hogy viselője mindennapi rutintevékenységének akár nyolcvan százalékát elvégezze. Az esztétikumra is ügyeltek, mert az eddigi mesterséges végtagok inkább stigmatizáltak, semmint kellemes érzeteket keltettek.

A csontba integrált beültetések segítségével, közvetlenül a csontvázhoz kapcsolódik. Az idő múlásával a csontszövet beburkolja az eszközben lévő titánt, erős kötődés alakul ki a test és a bionikus tárgy között – összenőnek.

A beültetések a művégtag és az idegekbe és izmokba implantált elektródák között is kommunikációs kapuként működnek. Az elektródák a lokalizált idegkontrollról gyűjtenek infókat, amelyeket külső számítógépre továbbítanak. A számítógép mesterségesintelligencia-szoftverrel segíti a kézhasználatot.

A kéz a páciens saját idegei és a bionikus kar által érintett bármely tárgy közötti szenzorikus visszacsatolást kialakító érzékelőkkel is fel van szerelve. Ha az idegrendszerét a beültetésként funkcionáló elektronikával összekapcsolják, kevesebb a fájdalom, nagyobb a kontroll.

A bionikus kar természetesen felhasználóbarát is. Viselője éjszakai alvás előtt könnyedén és mások segítsége nélkül le tudja venni. Kényelmesen érzi magát, rengeteget segíti a mindennapokban.

Egyelőre ő az első és egyetlen páciens, aki ennyire integrált bionikus kart hord, és bár a kar minden eddiginél jobb, fejlesztői szerint még még sokat kell tenni a biológiai karhoz való hasonlóság fokozásáért.

Hogyan javítsunk a promptokon?

A nagy nyelvmodellek (LLM) legújabb generációja túlmutat a nyelven. Ezekkel a mesterséges intelligenciákkal már multimodálisan, szöveg mellett vizuálisan, a kép-szöveg valamilyen kombinációjával, hang és más módszerekkel is kommunikálunk, változatos utasításokat, promptokat adhatunk nekik, amelyekre aztán valamilyen választ generálnak.

Az OpenAI GPT-4V, azaz a vizuális elemmel kiegészült GPT-4 ma a legismertebb ilyen modell. A Microsoft kutatói behatóan tesztelték a benne rejlő potenciált, és változatos feladatokat használva értékelték ki a promptolás adta lehetőségeket.

prompt_1.jpg

Az opciók között képek, szavak és számítógépes kódok közötti kifinomult interakciók is szerepeltek. A beszámolókban csak – pozitív és negatív – kvalitatív eredmények olvashatók. Más konkurens modellel, például a LLaVA-val nem végeztek összehasonlítást.

A GPT-4V-nek vizuális promptot adva, egy képen belül kiemelve az érdeklődésre számot tartó részt, majd dobozokkal és szöveges címkékkel hangsúlyozva azt, a modell teljesítménye folyamatosan javult.

prompt0_1.jpg

Nem sorrendbe rakott képsorozatot látva, a GPT-4V azonosította az első eseményt, majd előrejelezte a következőket. Amikor pontos sorrendben kapta meg a képeket, leírta a cselekménysorozatot.

Amikor tengerparti tájról kapott fényképet, és arra kérték, hogy csökkentse a nézők érdeklődését, elmagyarázta, hogy a sziklák csúszósak és élesek, a hely pedig alkalmatlan a fürdésre.

Koponya MRI-vizsgálata alapján, szakértő radiológusi véleményt kértek a modelltől, amelyre pontos diagnózissal állt elő. A kiértékelést szakemberek végezték.

Egyszer a GPT-4V által generált képaláírások több részletet tartalmaztak, mint a valóságos példák. A kutatók ebből azt a következtetést vonták le, hogy a meglévő benchmarkok (kiválóság, teljesítmény mércéje, amelyhez hasonlókat kell mérni, megítélni) nem teszik lehetővé a kép tartalmának megértését.

A kvalitatív példák látványosak, de úgy válogatták össze őket, hogy csak felvillantsanak valamit a GPT-4V lehetőségeiből. A Microsoft szerint a modell viselkedése nem konzisztens, és bőven akad rajta finomítani való.

Százszor energiahatékonyabb lett a mesterséges intelligencia

Az Illinois állambeli Északnyugati Egyetemen új nanoelektromos eszközt fejlesztettek gépitanulás-alapú osztályozó feladatok valóban energiahatékony megvalósítására. Az eszköz a jelenlegi technológiák fogyasztásának századrészét használva hatalmas adatmennyiség feldolgozására, mesterségesintelligencia-munkák kivitelezésére képes valósidőben, és az elemzéshez a számítási felhőt sem kell használnia.

E tulajdonságai miatt ideális a viselhető (wearable) elektronikai szerkezetekbe, például okosorákba és fitnesz-mérőkbe történő közvetlen integrációhoz, a valósidejű adatfeldolgozáshoz és közel valósidejű diagnosztikához.

Az elképzelést nyilvánosan hozzáférhető elektrokardiogram (EKG) adatsorok nagymennyiségű információijának osztályozására használták fel. Nemcsak hatékonyan és pontosan azonosította a szabálytalan szívverést, de az aritmia hat kategóriáját is 95 százalékos pontossággal megkülönböztette egymástól.

energiahetekony_mi.jpg

A jelenlegi bevett gyakorlat alapján szenzorok gyűjtik, és a számítási felhőbe küldik az adatokat, ahol a szerverek komoly energiamennyiséget használva elemzik azokat, mielőtt visszaküldenék a felhasználónak. Ez a megközelítés nagyon drága, túl sok a fogyasztás, és időkésleltetés is jár vele.

Az új eszköz teljesen másként működik, többek között sürgősségi egészségügyi esetekben vehetik majd komoly hasznát.

Mielőtt gépitanulás-technikák új adatokat elemeznének, a gyakorlóadatokat kell különféle kategóriákba rendezniük. Szilíciumalapú technológiákkal EKG-szerű nagy adatsorok kategorizálásához több mint száz tranzisztor kell, mindegyik saját energiát használ.

Az Északnyugati Egyetem új módszerével ugyanaz a gépitanulás-osztályozás két eszközzel megoldható, így pedig drasztikusan csökken az energiafogyasztás, az eszköz mérete, miközben jelentősen nőnek más tárgyakba, rendszerekbe integrálásának a lehetőségei.

A kutatók szerint a változatos anyagösszetétellel (kétdimenziós molibdén-diszulfid és egydimenziós szén nanocsövek) magyarázható különleges hangolási készség miatt működik ennyire hatékonyan az új eszköz. Rekonfigurálható tranzisztorai elég dinamikusak ahhoz, hogy különböző lépésekbe váltsanak.

A GPT-4 kinyitotta a szemét

Amikor hozzáférhetővé vált a GPT-4 csak szöveges változata, az OpenAI hetekig nem tette közzé a kvantitatív eredményeket, és az architektúráról és a gyakorlásról máig nincs részletes anyag. Lényegében csak sejtjük, mire lehet képes a nagy nyelvmodell (large language model, LLM).

A GPT-4 legújabb változata, a GPT-4V a szöveggel, képpel és a kettő kombinációjával interakciókat folytató nagy multimodális modellek születőben lévő generációjának egyik korai példája. Eddig speciális rendszerek által végzett feladatokat (tárgydetektálás, arcfelismerés, optikai karakterfelismerés stb.) kivitelez, és mellette alkalmazkodik képekhez, szöveges és vizuális promptok alapján alkot, változtat rajtuk.

gpt4.jpg

A modell képszerkesztőkkel, tervezőeszközökkel, személyes asszisztenssel és egy sereg más alkalmazással hozható közös nevezőre. A lehetőségek szerteágazók és izgalmasak.

A GPT-4 Vision-nel kiegészített verziót, a szeptember 24-én bemutatott GPT-4V-t kevesen tesztelték, de akiknek lehetőségükben állt, mind elégedetten nyilatkoztak róla. Többek közhött az X, a korábbi Twitter felhasználói széles körben tesztelték, például olyan szituációban is, amikor a modellnek ismernie kellett a kép tartalmát, kontextusát, következtetnie kellett belőle, és elfogadható válaszokat kellett generálnia.

gpt40.jpg

Egy felhasználó például több parkolótáblával kirakott közlekedési oszlopról mutatott neki képet, beírta az időt és a napot, majd rákérdezett: parkolhat-e ott? A modell elolvasta a jeleket és helyesen válaszolt: „délután négytől, egy óra hosszat parkolhat itt.”

Egy másik „mérnök ágenst” építve, lehetővé tette, hogy a modell kóddá alakítsa a weboldal képernyőképét, majd a kódolási és a tervezési hibákat megszüntetve, iteratív módon javítsa a programot.

A 2000-es hollywoodi sikerfilm, a Gladiátor egyetlen képkockája alapján a modell sikeresen azonosította a Maximus Decimus Meridust alakító Russell Crowe-t, és még a kapcsolódó párbeszédet is bemutatta.

Amikor az emberi sejtről mutattak neki diagramot, és megkérték, hogy kilencedik osztályos diák szintjén írja le azt, személyre szabott oktatóként viselkedett.

Egy hónappal a műtét után is jól érzi magát az a férfi, akinek sertésszívvel helyettesítették az eredetit

Egy gyógyíthatatlan állapotban lévő marylandi férfinek egy hónapja genetikailag módosított sertésszívet ültettek az eredeti helyére. Kilökődésnek és fertőzésnek eddig semmi jele, ami bizakodásra ad okot. Ilyen műtétet korábban csak egyet hajtottak végre., most – szeptemberben – a 2022-es elsőhöz hasonlóan, a Marylandi Orvosi Egyetem Kórházában került sor rá.

A beteg egészségügyi állapota nem tette lehetővé, hogy emberi szívet ültessenek be neki, és az USA Élelmiszer- és Gyógyszerügyi Hivatala (FDA) megadta az engedélyt a műtétre.

transplant.jpg

Az ötvennyolc éves Lawrence Faucette új szíve külső segítség nélkül is „jól teljesít”, a levegővétel is önállóan történik. Egy hónap túlélés komoly mérföldkőnek számít, bár a beteg még nincs túl minden veszélyen.

A 2022-es műtét alanya két hónappal a műtét után hunyt el. Több tényező miatt: komplikációk léptek fel, a gyógyszerek károsították a szívet, bár kilökődést nála sem tapasztaltak, a többi belső szerv megtűrte az újat.

A beültetett szervben megbúvó sertésvírusra szintén találtak bizonyítékot, de az orvosok nem tudták eldönteni, hogy a halálesethez volt-e valami köze.

Faucette-et közelről és folyamatosan figyelik, és már leszoktatták az eleinte az új szívet erősító gyógyszerekről. Fizikai terápián is részt vesz, hogy újra járhasson, és visszanyerje erejét.

A kimenettől függetlenül, a műtét és az azóta eltelt egy hónap mindenképpen sikernek tekinthető, több mint százezer, szervbeültetésre váró amerikait tölt el reménnyel. Jó részük xenotranszplantáción eshet át – e műtétek során emberekbe más állatok szerveit, szöveteit vagy sejtjeit ültetik be.

A sertésszív a virginiai Revivicor biotech-cég fejlesztése. Ők genetikailag módosított sertésekkel kívánják megoldani a szervhiányt. A speciális állatok génjeit úgy szerkesztik, hogy az emberi szervezet ne lökje ki ezeket a szerveket, szöveteket, sejteket.

A sertésszervek másik problémája lehet, hogy lappangó parazitákat, baktériumokat és vírusokat tartalmazhatnak annak ellenére is, hogy ezeket az állatokat speciális létesítményekben, speciális táplálékokon nevelik. Faucette esetében alaposan kivizsgálták a donort, és semmi gyanúsat nem találtak a szívben.

Ultragyors gépilátás-modell segítheti az önvezető járműveket

Az önvezető járműveknek a sarokban parkoló kamiontól a kereszteződés felé száguldó kerékpárosig, gyorsan és pontosan fel kell ismernie a környezetében lévő objektumokat. Masszív gépilátás-modellt kell használnia hozzá, hogy a jelenet nagyfelbontású képének összes pixelét tudja kategorizálni, mert csak így nem veszíti szem elől a – gyengébb minőségű képeken homályos, takart – tárgyakat.

Az MIT (Massachusetts Institute of Technology) és az MIT-IBM Watson AI Lab kutatói a feladat számítási komplexitását jelentősen csökkentő, az eddigieknél hatékonyabb gépilátás-modellt fejlesztettek.

mit_gepilatas.jpg

A modell korlátozott hardveres erőforrással rendelkező eszközön is képes pontos szemantikai szegmentációt valósidőben végezni. Ilyen eszköz lehet például a pillanat törtrésze alatti döntéshozás lehetőségét megadó fedélzeti számítógép.

A legfejlettebb szemantikus szegmentáló modellek közvetlenül tanulják meg a kép minden egyes pixele közötti interakciókat. Nagyobb képfelbontással a számítások is jócskán növekednek, így a modellek ugyan pontosak, viszont „edge” eszközökön, például szenzorokon vagy mobiltelefonon túl lassúak nagyfelbontású képek valósidejű feldolgozásához.

A kutatók a legfejlettebb modellekkel azonos képességekkel rendelkező, viszont csak a lineáris számításokkal azonos komplexitású, tehát „hardverhatékony” műveletekre kész, új „építőelemet” terveztek szemantikus szegmentálókhoz. A nagyfelbontású gépi látáshoz fejlesztett modell, mobileszközre telepítve, kilencszer gyorsabb a korábbiaknál, viszont ugyanolyan pontos.

A modellből biztos, ami biztos alapon, teljes sorozatot készítettek.

A technológiával nemcsak önvezető járművek valósidejű döntéshozása, hanem más nagyfelbontású gépilátás-feladatok, például orvosi képek szegmentálása is javítható.

Ujjalakú érzékelővel ügyesebb robotok fejleszthetők

Képzeljük el, hogy nehéz tárgyat, például csőkulcsot fogunk meg egy kézzel. Valószínűleg nemcsak az ujjvégekkel, hanem teljes ujjainkkal fogjuk. A bőrünkben lévő, mindegyik ujjunk teljes egésze mellett futó szenzorikus receptorok a megfogott tárgyról küldenek információt az agyban.

Egy robotkézben tapintási szenzorok kamerákkal szereznek infókat a megfogott tárgyakról. Kicsik és laposak, gyakran az ujjbegyekben helyezkednek el. Ezek a robotok – ellentétben az emberrel – csak az ujjbegyet használják tárgyak megragadására, jellemzően csípőmozdulattal. Így viszont korlátozottak a gép által végrehajtható feladatok.

mit_robot_2.jpg

Az MIT (Massachusetts Institute of Technology) kutatói kamera-alapú érintőszenzort fejlesztettek. Az érzékelő hosszú, ívelt, alakja olyan, mint az emberi ujjé. Nagyobb területen is képes nagyfelbontású érintőérzékelésre. A GelSight Svelte nevű szerkezet két tükörrel veri vissza és töri meg a fényt. Az érzékelő alján lévő egyik kamera mindent lát a teljes ujj mentén.

A rendszert rugalmas gerinccel alakították ki. Mérik, hogy a gerinc mennyire hajlik meg, amikor az ujj hozzáér egy tárgyhoz. Ebből számítják ki a szenzorra kifejtett erőt.

Az érzékelők, az emberhez hasonlóan nehéz tárgyakat megmarkoló robotkar építéséhez használhatók. Ilyenkor mindhárom ujja teljes érzékelőterületét használja. A kéz természetesen a hagyományos robotmarkolóknál megszokott szorítófogásokra is képes.

Mivel az új szenzor alakja olyan, mint az emberi ujjé, különböző feladatok különféle markolásmódszereihez használható, azaz nem egyetlen technikát alkalmaz mindenre.

A szenzor új lehetőségeket nyit meg tárgyakat módosító, robotokkal végzett feladatokban.

CERN: már egy exabájt a lemeztárhely

A genfi CERN, az Európai Nukleáris Kutatási Szervezet lemeztár-kapacitása meghaladja az egymillió terabájtnyi lemezterület küszöbét – derült ki a napokban.

Az intézmény adattára nemcsak a Nagy Hadronütköztetőt (LHC) szolgálja ki, hanem kísérletek és szolgáltatások online adatkezelést igénylő tömegét. Az adatkapacitást 111 ezer eszköz, főként merevlemezek és növekvő számú flash technikák szolgáltatják.

cern.jpg

Ennyi eszköz egyértelművé teszi a gyakori hibákat, ezért a tárolásnak ellenállónak kell lennie, többféle adatvisszaállítási módszert kell használnia. A legtöbb lemezen fizikai adatokat tárolnak, és a CERN nyílt forrású szoftveres megoldása irányítja az egészet. Utóbbit azért hozták létre, hogy kiszolgálja az LHC extrém számításigényeit.

cern0.jpg

Miután az LHC közelgő nehézion-üzemmódjához bővítették a kapacitásokat, a tárolási infrastruktúrában újabb „minden idők” csúcsot döntöttek. Itt nemcsak az adatbőségről van szó, hanem nagyon komoly teljesítményről – hangsúlyozzák a kutatók.

cern1.jpg

A csúccsal az adatkezelő kapacitások markáns célját sikerült megvalósítani. A nagyteljesítményű tárolás új távlatai nyílnak meg.

Atomi felbontású mikroszkóppal építettek kvantumszámítógépet

A dél-koreai Alaptudományok Intézete és az IBM fizikusai adott felületen lévő egyedi atomokkal végeztek kvantumszámításokat. Most került sor először rá, tehát valóban úttörő megoldásról beszélhetünk.

A technika lényege, hogy pásztázó alagútmikroszkóp (STM) csúcsából érkező mikrohullámú jelek sugárzásával szabályozza a titánatomokat. A módszer aligha fog rivalizálni a Google és az IBM, valamint egy csomó startup által is alkalmazott, vezető kvantumszámítási lehetőséggel, ugyanakkor nagyon érdekes.

kvantum_14.jpg

Kvantumtulajdonságok változatos vegyi elemekben, molekulákban történő tanulmányozására viszont mindenképpen jó. Bizonyos szinten, a természetben bármi „kvantum”, és elvileg kvantumműveleteket képes kivitelezni. A problémás rész a kvantumállapotok, a qubitek izolálása a környezeti zavaró tényezőktől, és a vezérlésük ahhoz, hogy képesek legyenek ilyen műveletek kivitelezésére.

A kutatók a természet eredeti qubitjével, az elektron spinjével dolgoztak. Az elektronok apró iránytűkként működnek, forgási irányuk csak – a klasszikus bit két értékének, a 0-nak és 1-nek megfelelő – fel-lel és le-vel írhatók le. De mielőtt mérnénk: az elektron spin lehetséges köztes állapotok folytonosságában, szuperpozícióban létezhet. Kvantumszámításokhoz ez a kulcs.

kvantum0_9.jpg

A kutatók titánatomokat szórtak egy teljesen lapos, magnéziumoxidból álló felületre. Ezt követően, az atomi felbontású STM segítségével feltérképezték az atomok helyzetét. A titánatomokat az STM hegyével mozgatták, hármat háromszögbe rendeztek közülük.

Az STM csúcsáról küldött mikrohullámú jelekkel az egyik titánatomban irányítani tudták az egyedi elektron spinjét. A mikrohullámok frekvenciájának megfelelő hangolásával annak spinje is kölcsönhatásba léphet a másik két titánatom spinjével. Valahogy úgy, ahogy több iránytű is hat egymásra mágneses terükön keresztül. Ezzel pedig egyszerű, két qubites kvantumműveletet végeztek el. Az egész nanomásodpercekig tartott, sokkal gyorsabb volt, mint minden más qubit-típussal.

A kutatók elmondták, hogy a technológia viszonylag simán bővíthető száz qubitig, afelett viszont már sokkal több nehézséggel szembesülnének.

Huszonhat másodperc alatt a semmiből tervez robotot egy mesterséges intelligencia

Az Északnyugati Egyetem (Evanston, Illinois állam) kutatói kifejlesztették a világ első, szinte a semmiből, például szappan méretű téglatestből használható robotokat tervező mesterséges intelligenciáját.

A teszthez egyszerű promptot adtak meg neki: tervezzen lapos terepen járó robotot. Ennyi volt az ember előkészítő munkája, a humán input, az ötletet már az MI váltotta valóra.

robot_a_semmibol.jpg

Míg a természetnek évmilliárdokba telt, amíg megjelentek az első járó fajok, addig az új algoritmus néhány másodpercbe sűrítette, fénysebességre pörgette fel az evolúciót.

Az MI-algoritmus azonban nemcsak gyors, hanem szuperszámítógép, számítógép-klaszter helyett pehelykönnyű személyi számítógépen fut, és szinte a semmiből talál ki új szerkezeteket. Ezek a tények azért figyelemreméltók, mert éles ellentétben állnak a többi hasonló MI-rendszerrel.

Nekik általában energiaéhes szuperszámítógépekre és kolosszális méretű adatsorokra van szükségük. Ráadásul csak már meglévő munkákat képesek lemásolni, utánozni velük, és a kreativitás csúcsaként, maximum valami mixet készítenek belőlük, de nem teremtenek teljesen újat.

A kutatók instant evolúciónak nevezték el a folyamatot, majd az MI tervrajza alapján építették a robotot. A kutatást vezető Sam Kriegman 2020-ban fejlesztett xenobotjai voltak a világon az első teljes egészükben biológiai sejtekből alkotott élő robotok.

Kriegman és munkatársai a mesterséges élethez vezető út legújabb lépését látják mostani mesterséges intelligenciájukban. Maga a robot kicsi, kusza, torz, és nem is élő, hanem szervetlen anyagból készült. De ennek ellenére a mesterséges intelligencia által létrehozott eszközök új világát jelzi, és – az állatokhoz hasonlóan – önállóan tud mozogni környezetében.

„Amikor az emberek ránéznek a robotra, azt mondják, hogy használhatatlan kütyü. Én viszont egy teljesen új organizmus születését látom benne” – magyarázza Kriegman.

süti beállítások módosítása