False positives report

[Zaczero]

• https://www.openstreetmap.org/node/11102695229

[Zaczero]

• https://www.openstreetmap.org/node/11104001796
• https://www.openstreetmap.org/node/11104001797
• https://www.openstreetmap.org/node/11103968834
• https://www.openstreetmap.org/node/11103968842
• https://www.openstreetmap.org/node/11103968844

[Zaczero]

• https://www.openstreetmap.org/node/11104852015

[Zaczero]

• https://www.openstreetmap.org/node/1880610620

[Zaczero]

• https://www.openstreetmap.org/node/11105924842
• https://www.openstreetmap.org/node/11105924848

[Zaczero]

• https://www.openstreetmap.org/node/11106092755
• https://www.openstreetmap.org/node/11106092762
• https://www.openstreetmap.org/node/11106937513

[Zaczero]

• https://www.openstreetmap.org/node/7814605551

[Zaczero]

• https://www.openstreetmap.org/node/11110486277
• https://www.openstreetmap.org/node/11110486278

[Zaczero]

• https://www.openstreetmap.org/node/11110949914
• https://www.openstreetmap.org/node/11110949916
• https://www.openstreetmap.org/node/11111027801
• https://www.openstreetmap.org/node/11111027803
• https://www.openstreetmap.org/node/11111231323
• https://www.openstreetmap.org/node/11112276961
• https://www.openstreetmap.org/node/3021017464
• https://www.openstreetmap.org/node/6412765258
• https://www.openstreetmap.org/node/11112699652
• https://www.openstreetmap.org/node/11112967664

[michalgwo]

Sprawdziłem ostatnie 4 changesety i jest dość dużo false-positive. Z tych 4 changesetów wychodzi mi 89% skuteczności (57 poprawnych, na 64 dodanych), najczęstszy false-positive to chyba cien drzew który przypomina troche przejście dla pieszych.

False-positive:
https://www.openstreetmap.org/node/11113988757
https://www.openstreetmap.org/node/11113617880
https://www.openstreetmap.org/node/11113617874
https://www.openstreetmap.org/node/11113617873
https://www.openstreetmap.org/node/11113074164
https://www.openstreetmap.org/node/11113074165

Sprawdzone changesety:
https://www.openstreetmap.org/changeset/139866510
https://www.openstreetmap.org/changeset/139858861
https://www.openstreetmap.org/changeset/139850963
https://www.openstreetmap.org/changeset/139850270

[Zaczero]

@michalgwo Po prostu zbyt mało danych treningowych i zbieram takie false positive żeby wypuścić nową wersję AI. Nie jest tak prosto znaleźć trudne miejsca, co wyglądają jak przejście, na OSM. Najprościej jest pozwolić AI robić swoje, monitorować, i zobaczyć gdzie sobie nie daje rady. Po prostu czekam na większą ilość FP aby (miejmy nadzieję) raz a porządnie wypuścić aktualizację która poprawi jakość dla tych cięższych przypadków.

[Zaczero]

---

Do tego momentu zgłoszenia FP zostały już pobrane.

Nowa wersja: 1.4

---

• https://www.openstreetmap.org/node/11114383231
• https://www.openstreetmap.org/node/11114383240

[Zaczero]

• https://www.openstreetmap.org/node/11115494631
• https://www.openstreetmap.org/node/11115494632
• https://www.openstreetmap.org/node/11115494633
• https://www.openstreetmap.org/node/11115494636
• https://www.openstreetmap.org/node/11115494642
• https://www.openstreetmap.org/node/3013697320

[Zaczero]

---

Do tego momentu zgłoszenia FP zostały już pobrane.

Nowa wersja: 1.4.1

---

• https://www.openstreetmap.org/node/5771680021

[Zaczero]

• https://www.openstreetmap.org/node/11162089431

[michalgwo]

Sprawdziłem wyrywkowo kilka starszych changesetów i znalazłem 2 false positive:
https://www.openstreetmap.org/node/11180462354
https://www.openstreetmap.org/node/11180462356

[Zaczero]

• https://www.openstreetmap.org/node/11210627802

[Zaczero]

• https://www.openstreetmap.org/node/11232636400

[Zaczero]

Najnowsza wersja 1.6 posiada błąd klasyfikacji (AUC) mniejszy o 28%. Jest to głównie zasługa nowego zestawu 5000 zdjęć, który koncentruje się na trudniejszych, negatywnych przypadkach, takich jak tuje, znaki drogowe poziome, dachy, itp. Nowa wersja rzadziej popełnia błędy i importuje jeszcze większą ilość przejść.

[Zaczero]

• https://www.openstreetmap.org/node/1892705576
• https://www.openstreetmap.org/node/11238086619

[Zaczero]

• https://www.openstreetmap.org/node/11254859813

[Zaczero]

• https://www.openstreetmap.org/node/11258674028

[Zaczero]

• https://www.openstreetmap.org/node/3058222672

[Zaczero]

• https://www.openstreetmap.org/node/11287257087

[kubahaha]

To chyba jakiś wzór z kostki:

https://www.openstreetmap.org/node/11287471019

[Zaczero]

Były dachy, potem krzewy, teraz przejazdy kolejowe i kostka brukowa 😄

[Zaczero]

• https://www.openstreetmap.org/node/11290451711

Jak skończę pracę nad aktualnym projektem (koniec przyszłego tygodnia), to zabiorę się za korygowanie błędów w AI.

[Zaczero]

• https://www.openstreetmap.org/node/11400122670

[Zaczero]

• https://community.openstreetmap.org/t/automatyczne-znakowanie-przejsc-dla-pieszych-oraz-przejazdow-rowerowych/101590/85

[michalgwo]

https://www.openstreetmap.org/node/11192505432

[Zaczero]

• https://www.openstreetmap.org/node/4594867484
• https://www.openstreetmap.org/node/11516445148
• https://www.openstreetmap.org/node/11516445145
• https://www.openstreetmap.org/node/11516445147
• https://www.openstreetmap.org/node/2428510157
• https://www.openstreetmap.org/node/11516024258

[Zaczero]

• https://www.openstreetmap.org/node/11390802441

[Zaczero]

• https://www.openstreetmap.org/node/11356345511