Kako je Njuškalo uz pomoć foto-prepoznavanja za 70% ubrzao predaju oglasa u mobilnoj aplikaciji

Infobip ❤️ Netokracijašto akvizicija znači za vas - i nas?

Kako je Njuškalo uz pomoć foto-prepoznavanja za 70% ubrzao predaju oglasa u mobilnoj aplikaciji

Foto-prepoznavanje predmeta u samom je vrhu svjetskih trendova i primjene umjetne inteligencije, a mi smo odlučili upravo tu tehnologiju uvrstiti u Njuškalovu aplikaciju prilikom predavanja oglasa. Kako je proces izgledao u praksi, na koje smo izazove naišli i što su planovi za budućnost, otkrivamo.

Foto-prepoznavanje dio je Njuškalove aplikacije za predaju oglasa na mobilnim uređajima. Funkcionira na način da, kada se predmet, poput majice ili automobila, fotografira kroz aplikaciju, ona će prepoznati o kojem se predmetu radi, odnosno prepoznat će njegovu kategoriju unutar oglasnika. Time se korisniku koji želi oglasiti taj predmet štede klikovi i vrijeme, što je i postalo glavna metrika ove opcije.

Za razvoj i implementaciju foto-prepoznavanja zaslužni su Njuškalov interni tim iz odjela Product developmenta, članovi Styria Data Science tima te tvrtke Trikoder i UndabotMoram istaknuti da je ovo prvi takav svjetski proizvod za oglasnike utemeljen na tehnologiji dubokih neuronskih mreža i izašao je u produkciju prije takvih inačica glavnih svjetskih igrača kao što su eBay, Alibaba i slični.

Glavna svrha nastanka foto-prepoznavanja

Nit vodilja u projektu i njegova sama svrha je olakšanje predaje oglasa na način da se ubrza cijeli proces, tako da korisnik preda jednu sliku ili više njih i da mu je automatski odabrana dobra kategorija. Ne gubi vrijeme klikajući, odnosno pretraživajući strukturu oglasnika, kako bi sam stavio predmet u odgovarajuću kategoriju.

Nekada je vrijedno predvidjeti, odnosno smjestiti sliku u kategoriju višeg ranga, posebice kada autor nije siguran u konkretan proizvod koji fotografira, primjerice mobitel, automobil i slično. Tada je bolje da se proizvod smjesti u kategoriju iznad, nego da pogađa neku od užih kategorija i možebitno pogriješi. U svakom slučaju, točnost pogađanja algoritma nije glavna metrika, nego upravo taj broj klikova koje smo mi uštedjeli korisniku koje bi on morao obaviti da nema te kategorizacije.

Naravno, nije sve teklo glatko

Jedan od prvih izazova bila je količina podataka koje smo morali, u suradnji s Trikoderom i Njuškalovim timom, ispravno organizirati. Prvenstveno da smanjimo slike oglasa na adekvatnu veličinu i da ih stavimo u bazu gdje ih možemo čitati dovoljnom brzinom.

Treniranje tih modela traje i do tjedan dana, a potrebno je provesti mnogo eksperimenata. Izazov je bio i izabrati kakve varijante, odnosno kakve eksperimente ćemo raditi, jer smo imali ograničeni broj računalnih resursa u računalnom centru.

Uz to, izazovi su također bili i kako stvoriti zajedničko shvaćanje svih uključenih u projekt, što je performansa tog modela i kako će se točno evaluirati. Na kraju se sve spojilo u broj klikova koje smo uštedjeli, odnosno u metriku koja na mobilnim uređajima govori koliko se u prosjeku smanjilo vrijeme predaje oglasa.

Točnost prepoznavanja predmeta je 86,5%

Korisnici koji koriste ovu opciju predaju oglas 70 posto brže, bez obzira na to je li riječ o Android ili iOS platformi. Za takav su rezultat zaslužne neuronske mreže Njuškala koje u pedesetak milisekundi pronalaze ispravnu oglasnu kategoriju na osnovu prepoznavanja fotografije. Točnost prepoznavanja predmeta je 86,5 posto, a aplikacija više od 70 posto oglasa automatski smješta u ispravnu krajnju kategoriju.

Korisnici imaju prosječno 2,7 manje klikova pri predaji oglasa, što donosi značajnu uštedu vremena i olakšava njihovu predaju.

Indirektan i direktan feedback korisnika

Proveli smo kampanje direktnog istraživanja feedbacka, gdje smo korisnike pitali kako im se sviđa ovaj novi dodatak. Dobili smo suludo dobre ocjene. Blizu 97 % korisnika je na skali od 1 do 5 dalo ocjenu 5, a prema tome možemo zaključiti da su korisnici od početka bili jako zadovoljni.

Indirektan feedback, naravno, možemo pratiti u povećanom broju oglasa predanih kroz taj sustav. Sve to je doprinijelo i prepoznatljivosti samog Njuškala kao vodećeg oglasnika, ali i svih uključenih u projekt, kako na nacionalnoj, tako i na svjetskoj razini.

A što nas čeka?

Mjesta za napredak uvijek ima dovoljno i time se bavimo kao dio Trikodera. Unaprjeđenje modela uključuje kontinuirani rad. Tehnologija koja je buknula 2012. godine, a tiče se duboke neuronske mreže, nije stala s razvojem, modeli su napredniji i kompleksniji i algoritamski i znanstveno.

Ima prostora za “čišćenje” podatkovnog skupa više milijuna slika koje imamo na Njuškalu. Imamo slika koje su neupotrebljive i onih gdje je iz same slike nemoguće predvidjeti kategoriju, npr., ako netko slika etiketu majice ili papire. Dakle, fotografija kao takva ne služi kao primjer za tu kategoriju proizvoda.

Naravno, postoji smjer istraživanja kako automatski izabrati slike koje su više informativne od onih koje su manje informativne, a model zatim rekreiramo samo na čistim, kvalitetnim slikama kako bismo dobili veću točnost.

Još jedan od noviteta na kojem radimo je nešto što slijedi u bližoj budućnosti. To je sustav gdje će se uživo odvijati kategorizacija, a ne na način da čovjek fotografira pa se onda ta slika učitava. Ovo će funkcionirati tako da, kada se uperi kamera u neki proizvod, na ekranu mu se ispisuje što je taj proizvod, koliko bi možda mogao koštati, za koliko bi se mogao prodati i slično. Sve je to dio kvalitetne nadogradnje koja će iskustvo korisnika Njuškala još više poboljšati štedjeći im klikove i vrijeme.

Sukladno članku 94. Zakona o elektroničkim medijima, komentiranje članaka na Netokraciji dopušteno je samo korisnicima koji ostave svoje ime i prezime te mail adresu i prihvate pravila ponašanja.

Pravila ponašanja

Na Netokraciji za vas stvaramo kvalitetan, autorski potpisan sadržaj i zaista se veselimo vašim kvalitetnim, kontruktivnim komentarima. Poštujmo stoga jedni druge prilikom komentiranja, kao i Zakon, držeći se sljedećih pravila ponašanja:

  • Ne budite 💩: Nema vrijeđanja, diskriminiranja, ni psovanja (osim ako nije osobni izričaj, ali onda neka psovka bude općenita, a ne usmjerena prema nekome). Također, upoznajte se sa stavkom 2. članka 94. Zakona o elektroničkim medijima prije no što ostavite komentar.
  • Samo kvalitetna rasprava, manje trolanja: Ne morate se ni sa kim slagati, ali budite konstruktivni i doprinesite raspravi! Svako trolanje, flameanje, koliko god "plesalo" na granici, leti van.
  • Imenom i prezimenom, nismo Anonymous 👤: Autor sadržaja stoji iza svog sadržaja, stoga stojite i vi iza svog komentara. Koristimo ime i prezime te pravu email adresu.

Kako koristimo podatke koje ostavljate? Bacite oko na našu izjavu o privatnosti.

Sve ostale komentare ćemo s guštom spaliti, jer ne zaslužuju svoje mjesto na internetu.

Komentari

    • ludi panj

      ludi panj

      31. 12. 2019. u 12:05 pm Odgovori

      da i mene to bode u oči,
      Visual Studio ML.NET (machine learning) kit,
      podatke za učenje imaju kategorizirane, istreniraju model,
      brat bratu 1 developer to riješi u jedno prijepodne
      sa dvadesetak linija koda,
      naravno treniranje AI-a i obrada slika traje, ali to je automatika,
      pustiš i vrtiš palčeve, za to vrijeme rješavaš
      prilagodbu front/back enda da se to koristi.

      točnost 86% je očekivana i podnošljiva

      4 firme za to, majko mila 🙁

Odgovori

Tvoja e-mail adresa neće biti objavljena.

Popularno

Kolumna

Što Infobipova akvizicija Netokracije znači za hrvatsku tehnološku scenu i Netokracijin tim

Najveća tehnološka tvrtka u Hrvatskoj nas je upravo akvizirala, a mi nastavljamo urednički neovisno pratiti startup i developersku scenu, a globalno stvarati kvalitetan developerski sadržaj.

Startupi i poslovanje

Novi Zakon o radu regulira platformski rad. Što o tome misle Uber, Bolt i Glovo, a što sindikat?

Načinom na koji je u izmjenama i dopunama Zakona o radu reguliran rad putem digitalnih platformi nisu zadovoljne ni digitalne platforme, ni sindikati. Platforme se, naravno, pozivaju na fleksibilnost i slobodu koju njihovi vozači ili dostavljači cijene, a sindikat smatra kako su se opet izvukle od odgovornosti.

Startupi i poslovanje

Trebaju li se hrvatski osnivači pripremiti na “zimu” u investicijama i kako?

Kako će se kriza odraziti na domaće startupe, koji su u boljem, a koji u lošijem položaju te što savjetuju osnivačima kao obrambene mjere komentiraju Vedran Blagus iz South Central Ventures, Stevica Kuharski iz Fil Rouge Capitala i Ivaylo Simov iz Eleven Venturesa.

Što ste propustili

Intervju

Lovre de Grisogono studente sociologije priprema za zapošljavanje – u IT industriji!

Kako jednim rješenjem riješiti dva problema? Kolegij Sociologija informatičke profesije na Fakultetu hrvatskih studija buduće sociologe čini spremnijima za tržište rada, a domaćim tehnološkim poslodavcima pomaže riješiti kronični nedostatak radne snage.

Digitalni proizvodi

Operacija kralježnice potaknula je Domagoja da osmisli aplikaciju koja olakšava oporavak

Od pripreme za operaciju do korisnih informacija, vježbi i lakšeg praćenja boli ili bitnih nalaza, saznajemo kako domaća aplikacija MySpine olakšava život pacijentima i liječnicima.

Startupi i poslovanje

Napraviti dobru stvar ili napraviti stvari – dobro? Vječna dilema svakog Product Managera

Vječno pitanje koje nerijetko daje vrlo polarizirane odgovore, a postavi si ga svaki product manager u nekom trenutku - neovisno radi li se o startupu gdje tu funkciju nerijetko obavlja osnivač - ili velikoj kompaniji s 50+ product managera.

Startupi i poslovanje

Maistra i Infobip traže najbolje domaće FoodTech startupe!

Ako razvijate rješenje usmjereno na ugostiteljstvo, gastronomiju, prehrambenu tehnologiju ili razvijate tehnologije za promicanje budućnosti gastronomije i/ili ugostiteljstva - razmislite o prijavi na FoodTech Startup natjecanje. Što uključivanjem dobivate otkrivamo u nastavku.

Kriptovalute i Blockchain

U napadu na tisuće digitalnih novčanika povezanih sa Solanom, domaći Solflare ostao netaknut

Solana blockchain i niz drugih platformi povezanih s istim jutros su doživjele veliki napad kojim je zahvaćeno nekoliko tisuća digitalnih novčanika. Više saznajemo od Filipa Dragoslavića, su-osnivača tvrtke koja se posvetila razvoju proizvoda na ovom blockchainu.

Kriptovalute i Blockchain

The Lokals: animirani NFT film koji će vas provozati kroz Jugoslaviju 80-ih

Kako je jednom malom splitskom multimedijalnom studiju koji iza sebe ima preko 70 nagrada uspjelo spojiti sedmu umjetnost i blockchain, a da ih pritom podrže i dvije francuske produkcijske kuće koje na svojim policama drže Oskara? Zvuči kao pitanje s izmišljenom premisom, ali to svakako nije.