Stream: general

Topic: objektu atpazīšana Panoramax bildēs


view this post on Zulip Rihards Olups (Mar 04 2024 at 19:47):

Šis ir diezgan kūl, neizskatās neiespējami :)

https://mastodon.social/@PanierAvide@framapiaf.org/112038223108389144

view this post on Zulip AmOosm (Mar 04 2024 at 20:12):

Jāsāk augšupielādēt savi Mapillary arhīvi uz Panoramax :D

view this post on Zulip Rihards Olups (Mar 04 2024 at 20:55):

Panoramax gan nav globālu instanču, doma tāda, ka kopienām ir savas.

view this post on Zulip AmOosm (Mar 05 2024 at 20:09):

Lūdzu.

Pagaidām tas ir tikai izmēģināšanai, bet, ja mums, kā kopienai, ir pietiekama vēlme un resursi, lai, ko šādu uzstādītu uz ilgāku laiku, es labprāt palīdzētu. :)

view this post on Zulip Rihards Olups (Mar 05 2024 at 20:10):

Woah, labais :)
Tur gan prasītos kaut kādu ilgtermiņa finansējumu + backupus. Ja pēkšņi viss uploadotais pazustu, būtu trrrraki bēdīgi :)

view this post on Zulip AmOosm (Mar 05 2024 at 20:22):

Jā, protams. Man šķiet, ka šādas lietas varētu būt vieglāk īstenot, ja mums būtu kāda OSM Latvijas biedrība ;)

view this post on Zulip Rihards Olups (Mar 06 2024 at 12:28):

Noteikti, tik jautājums, cik tā būtu liela un dzīvotspējīga. Pirms daudziem gadiem par to spriežot tika apsvērta iespēja pieslieties LAKA vai LATA. Ko vislabāk darīt 2024. gadā, nez :)

view this post on Zulip HellMap (Mar 06 2024 at 12:31):

signs-lul.png

view this post on Zulip Rihards Olups (Mar 06 2024 at 12:31):

Jā, auto-blur joprojām ir grūti. Mapillary ar to grūti iet jau ļoti daudzus gadus :)

view this post on Zulip AmOosm (Mar 06 2024 at 12:35):

Tas ir atkarīgs no MI modeļa. Var izmantot šo pašu pamācību, lai uztrenētu labāku modeli, tikai vajag datus.

Detecting features on pictures using YOLO, Panoramax & OpenStreetMap - panoramax-project/DetectionTutorial

view this post on Zulip HellMap (Mar 06 2024 at 12:36):

Personīgi, neredzu jēgu taisīt vēl vienu lokālu projektu, it īpaši tik resursu prasošu, it īpaši valstī, kur tā pat ļoti maz zīmētāju nerunājot jau par tiem, kas vēl taisa street-view bildes. Un kā to pēc tam lietot zīmēšanai? Mapillary integrēts redaktoros - par kaut kādu Panoramax nekad nebiju dzirdējis. Un te vēl kaut ko pašam vajag trenēt... tas ir 99% lietotāju garām.

view this post on Zulip AmOosm (Mar 06 2024 at 12:37):

In reply to @zulip\_osm=20latvija\_568771:shema.lv
Noteikti, tik jautājums, cik tā būtu liela un dzīvotspējīga. Pirms daudziem gadiem par to spriežot tika apsvērta iespēja pieslieties LAKA vai LATA. Ko vislabāk darīt 2024. gadā, nez :)

Starpcitu, šovakar 18.30 ir LAKA tikšanās, varbūt tu vēlies pievienoties? :D

view this post on Zulip Rihards Olups (Mar 06 2024 at 12:40):

Par jēgu - Mapillary pieder Facebook. Lai gan esmu tur augšuplādējis ne vienu vien miljonu bilžu, riski ir milzīgi.
Bet likt visu Panoramax bez ilgtermiņa stabilitātes plāniem - riski pat lielāki :)

Tā ka būtu burvīgi, bet jāvirzās uzmanīgi.
Varbūt kāda kopīga instance Baltijas valstīm, varbūt Latvijā kādi uzņēmumi saņemsies. Tas pat saskanētu ar LATAs vajadzībām, tik gan jau ka viņiem arī netrūkst darāmā.

view this post on Zulip Rihards Olups (Mar 06 2024 at 12:41):

LAKAs tikšanās - man tieši tas laiks ir trakākais darba tikšanās ziņā, pārklāšanās ar kolēģu laika zonām :)

view this post on Zulip HellMap (Mar 06 2024 at 12:47):

Nu, es neredzu jēgu par kaut ko mazāku kā pasaules mēroga servisu ar long-term endowment fund. Kaut kādas Baltijas valstis var spēlēties ar kaut kādiem lokāliem eksperimentiem. Bet pasaules mērogā brīva, centralizēta un galvenais lietojama street-view veidošanā tas viss ir neprakstisks un tā - savā starpā parunāšana. Pat par Mapillary neviens pasaulē nezin, kur vēl kaut kādi sīki projekti.

view this post on Zulip AmOosm (Mar 06 2024 at 12:58):

tik resursu prasošu

Ļoti daudz resursus jau it kā neizmanto, pārsvarā tikai atmiņa, lai uzglabātu bildes.

neredzu jēgu taisīt vēl vienu lokālu projektu

Panoramax arī šobrīd tiek taisīta federācija, tas nozīmē, ka serveri varēs savienoties un nebūs viss tikai lokāli.

kā to pēc tam lietot zīmēšanai

ID un JOSM integrācijas jau ir pieprasītas, kādam tikai jāuzņemās tās uzrakstīt.

kaut ko pašam vajag trenēt... tas ir 99% lietotāju garām

Lietotājiem neko nevajag trenēt, to var darīt cilvēks, kurš uzstāda instanci, ja ir vēlme.

Description Hello, It would be interesting to plan now to integrate the street imagery of the panoramax instances ( osm , ign ...etc ) in the same way as that of Mapillary. With, just like this one...

view this post on Zulip HellMap (Mar 06 2024 at 13:04):

Cik ātri katru bildi izparsē?

view this post on Zulip Rihards Olups (Mar 06 2024 at 13:06):

Storage - tikai manas bildes Mapillary varētu aizņemt tuvu 50TB. OK, tas ir gadiem vākts, bet kameras kļūst labākas, bildes lielākas... Un vēl backupi tam visam.
Tīkla trafiks - to visu vajag augšuplādēt, un jābūt lejuplādējamam.
Tas viss kopā savācas par diezgan iespaidīgu summu.

Pat lielās kopienas kā Francijas un Beļģijas OSM neriskē aicināt augšuplādēt bildes no citām valstīm :)
Beļģi vispār sūta SD kartes fiziski pastā bieži kā backupu. Tas baigi neskeilojas.

Tas nenozīmē, ka ko tādu nevajag - būtu šaušalīgi burvīgi. Bet ja šāda instance nomirtu ar visām bildēm, tas būtu pārāk bēdīgi :)

view this post on Zulip HellMap (Mar 06 2024 at 13:13):

Rihards Olups said:

Beļģi vispār sūta SD kartes fiziski pastā bieži kā backupu. Tas baigi neskeilojas.

LOL. Bet jā, es teiksiem drusku aplīti izmetu dienā - 30 km, 12K bilžu, 35 GB. Pagāšgad kopā 3.4 TB un pāris miljonu bilžu.

view this post on Zulip HellMap (Mar 06 2024 at 13:14):

Un Mapillary jau tā bremzē nenormāli un gļuko ar visiem FB resursiem. Bildes procesē vairākas dienas parasti. Tas Franču Panoramax lādējas kādu minūti.

view this post on Zulip AmOosm (Mar 06 2024 at 13:18):

HellMap said:

Cik ātri katru bildi izparsē?

1,9 sekundes/bildi/sgblur instanci. Reāli var palaist instanci katram procesora kodolam. Kā arī, ļoti grib paātrināt var pielikt klāt video karti MI paātrināšanai.

"Speed Gonzales" blurring API for the Panoramax project - GearKite/sgblur

view this post on Zulip AmOosm (Mar 06 2024 at 13:39):

50TB

Nav nekas, ko nevarētu atrisināt daži 18TB diski :D

Tīkla trafiks - to visu vajag augšuplādēt, un jābūt lejuplādējamam.

50TB trafiks nemaz nav tik daudz mūsdienu serveriem, ar 10GBit/s pieslēgumu neaizņemtu vairāk kā dienu, lai visu lejupielādētu.

ja šāda instance nomirtu ar visām bildēm, tas būtu pārāk bēdīgi

Protams, bet vienmēr var arī paralēli augšupielādēt, piemēram, uz Mapillary. Tad būs kā pēdējais backup.

view this post on Zulip Rihards Olups (Mar 06 2024 at 13:48):

AmOosm said:

50TB

Nav nekas, ko nevarētu atrisināt daži 18TB diski :D

Jā, bet tam visam jābūt pie tīkla, ar kaut kādu availability risinājumu, backupiem...
Ja saaicināsim cilvēkus tur augšuplādēt bildes un pasākums pēc dažiem gadiem nomirs, tas būs nopietns demotivators.

Tā vienkāršoti var sarēķināt, cik tas izmaksātu AWS (ieskaitot offsite/offline backupus, jo kādam var šķist smieklīgi salauzt un visu izdzēst...) - tas neietvertu nepieciešamo maintenance darbu (versiju atjaunināšana un daudz kas cits), bet aptuveni parādītu, ar kādu budžetu jārēķinās.
Tad jau varētu skatīties LAKA, LATA, OSM vai citādās kopienās, kā to varētu pavlikt.

Teorētiski, varētu būt daļa no daudz plašāka ES līmeņa OSM projekta, protams :)

view this post on Zulip HellMap (Mar 06 2024 at 13:52):

Vēl support. Kāds ielādēs melnas bildes. Kaut ko nenoblurros. Kaut kur GPS pilnīgi šķībs. Kāds dubultbildes. Kāds bildes no noparkotas kameras. Kāds militārām objektam garām braucot (ja LV serveris, tad būs LV likumdošana). Uz kuru tas viss darbs un cik ātri to atrisinās? Mapillary piemēram ar visiem saviem resursiem nevar neko laicīgi izdarīt un pus pasaule ar šķībām, sagrieztām bildēm un šķībiem bluriem.

view this post on Zulip Rihards Olups (Mar 06 2024 at 13:58):

Nu, nepareizas bildes būtu mazākā problēma laikam.
Man tiešām šķiet, ka kas tāds Latvijas/Baltijas līmenī būtu super, bet gribētos kaut kādu drošību ieguldītajam :)
Milzu paldies AmOosm par testa instances uzlikšanu, izpētīšānu un bīdīšanu.

view this post on Zulip HellMap (Mar 06 2024 at 14:13):

Nepareizas bildes varbūt liekas mazākais, ja runā par tehniskām lietām. Bet faktiski tas ir tas, ko redz lietotāji. Un bez lietotājiem - nav servisa. Varbūt tiem dažiem Latvijā arī netraucē salauztas bildes. Bet dēļ tā vēl 10 citi potenciālie vispār to nelieto un nekad nelietos. Nevienam jau neinteresē, cik tur TB serverī un kādu AWS plānu lieto. Bet, ja redzēs, ka neviens nelabo problēmas, tad arī vairs to nelietos. Tādas lietas, kā nepareizas bildes ļoti ātri pārveršas par galveno problēmu, ja to nerisina.

view this post on Zulip HellMap (Mar 06 2024 at 14:17):

Piemēram, tas pats Mapilio - es paskatījos kādā kvalitātē to visu pasniedz un cik viss salauzts un nepilnīgs un uzreiz pateicu - neko es šeit nelādēšu. Un neesmu tāds vienīgais. Un tas ir globāls produkts teorētiski jau iD integrēts.

view this post on Zulip Rihards Olups (Mar 06 2024 at 14:18):

Tas var izklausīties tā, ka mēs tik meklējam negatīvo, un "nav jēgas nekam" - es teiktu, ka salauztu bilžu labošana ir vēlāk darāma, un tur jau var iesaistīties kopiena utt.
Panoramax mūsu reģionam būtu OOOOZAM, tik jāsarēķina, varbūt kādu projektiņu jāuzraksta =)

view this post on Zulip Rihards Olups (Mar 06 2024 at 14:19):

Mapilio - tas, šķiet, ir arī ļoti privāts/proprietary pasākums, es neredzēju nekādu ieguvumu pār Mapillary.
Panoramax liela (milzīga :) ) priekšrocība ir atvērtums.


Last updated: May 18 2024 at 07:23 UTC