Научни радови под лупом

Критички осврти на јавно доступне научне радове

докторска дисертација · геодезија и геоинформатика, даљинска детекција, машинско учење

Картирање шумске вегетације на основу података сателитског осматрања Земље коришћењем техника машинског учења

др Јован Д. Ковачевић — у време одбране асистент на Грађевинском факултету Универзитета у Београду (према биографији у раду)

Универзитет у Београду, Грађевински факултет, студијски програм Геодезија и геоинформатика; 2021 (рукопис предат 15. децембра 2021, реферат комисије од 24. децембра 2021; у НаРДуС-у рад носи датум 11. фебруар 2022); 22 предстране + 166 страна, основни текст на странама 1–123, литература од стране 124, прилози од стране 138; ментор др Жељко Цвијетиновић; комисија: Д. Михајловић, Љ. Брајовић, М. Самарџић-Петровић, Д. Лакушић, Б. Радић

Пун текст рада и реферат комисије у Националном репозиторијуму дисертација у Србији (НаРДуС). Осврт: „Стручни критички осврт на дисертацију „Картирање шумске вегетације на основу података сателитског осматрања Земље коришћењем техника машинског учења““, 22. септембар 2026., 17 страна, с пописом литературе.

Дисертација развија аутоматизовану методологију картирања осам типова шумске вегетације на целој територији Србије из вишевременских снимака мисије Sentinel-2, техникама машинског учења. Осврт налази да је реч о солидном и самостално изведеном методолошком раду националне размере, с промишљеним двема временским репрезентацијама, пажљиво грађеном референтном грађом и валидационом поставком која избегава два позната извора оптимистичке пристрасности. Рад је уздржан према сопственим резултатима: сам објављује неповољну независну валидацију, укупну тачност од 64,02 и 60,59 одсто наспрам 85,43 одсто у унутрашњој провери, и тражи додатну валидацију карата пре шире употребе. Слабости су четвороструке: нигде није исказано расипање између понављања провере, па се најситније разлике међу моделима не могу разликовати од случајности; избор атрибута није угнежђен у спољну петљу; недостају подаци за поновљивост; а применљивост се оцењује по унутрашњој провери, не по независном узорку. Уз то иду омашке у прегледним табелама сензора и у три једначине. Ниједна не руши носеће тезе.

Основне примедбе

#ПримедбаШта рад каже или радиУ чему је проблемСтранеМерило
1Нема мере расипања ни теста значајностиНиједна мера перформанси није праћена стандардном девијацијом између пет понављања провере ни тестом значајности разлика; рад сам на једном месту одбија да пресуди: „Због тога на основу тако малих разлика није могуће тврдити који приступ даје тачније резултате“.Разлике реда неколико десетих делова процента укупне тачности не могу се поуздано разликовати од случајне варијације, што погађа изборе засноване на таквим разликама, пре свега правило агрегације.83Kuhn и Johnson 2013; Hastie и др. 2009
2Избор атрибута није угнежђен у спољну петљуИзбор репрезентативних атрибута изведен је засебном провером над целим скупом података, а не унутар сваке итерације спољне евалуационе петље.Такав поступак начелно може оптимистички проценити изабране подскупове атрибута.поглавље 5Ambroise и McLachlan 2002; Hastie, Tibshirani и Friedman 2009, одељак 7.10.2; Meyer и др. 2018
3Просторна аутокорелација и оптимизам унутрашње провереПровера изоставља целе локације, али не уклања просторну аутокорелацију међу кластерисаним полигонима исте класе; рад сам признаје да су мере „генерално пристрасне када је реч о оцени квалитета карте на комплетном подручју истраживања (Olofsson и др., 2014)“.Тачност унутрашње провере вероватно је оптимистична, што потврђује знатно нижи исход независне валидације.95, 109Roberts и др. 2017; Ploton и др. 2020
4Применљивост оцењена по унутрашњој провери, не по независном узоркуПоређење са сличним студијама и оцена применљивости наслањају се на укупну тачност од 85,43 одсто из унутрашње провере, док независна валидација на 25 235 полигона даје 64,02 и 60,59 одсто; површине класа исказане су без интервала поверења.Струка правим мерилом тачности карте сматра независан вероватносни узорак, а добра пракса препоручује интервале поверења за тачност и површине.103, 110, 115Olofsson и др. 2014, препоруке v и vi; Stehman и Foody 2019; Wadoux и др. 2021
5Недостају подаци за поновљивостНису наведени семе случајности, верзије језика R и коришћених пакета, пуни хиперпараметри прилагођеног SMOTE ни табеларни списак идентификатора 89 гранула, које су дате само графички.Без тих података потпуно независна репродукција поступка није могућа.поглавље 4Sandve и др. 2013, правила 4 и 6; Wilkinson и др. 2016; Nüst и др. 2018; Kedron и др. 2021
6Две претпоставке усвојене без провере„Претпоставка је да ова три временска интервала довољно наглашавају разлике у фенолошким обрасцима сваког типа шумске вегетације“, а за хиперпараметре „претпоставља се да промена параметара неће значајно утицати на одређивање оптималних параметара методологије“.Прва претпоставка подржана је посредно, а друга није тестирана, јер варирање хиперпараметара није вршено.66, 80, 122аргумент из грађе самог рада; Probst и др. 2019
7Нетачности у прегледним табелама сателитских сензораГрупа сензора с пикселом мањим од једног метра обухвата RapidEye и ZiYuan III, који по сопственој Табели 1 то нису; почетна година мисије SAOCOM дата је као 2015, иако је лансирана 2018; панхроматска резолуција Landsat-а дата је као 10 m уместо 15 m; тврдња о „више од 2000 активних сателита који врше осматрање Земље“ односи се на све активне сателите.Чињеничне грешке прегледног поглавља које не додирују методологију ни резултате, али их треба исправити.10, 11, 14, 16спецификације мисија; сопствена Табела 1 рада
8Омашке у једначинама приказа методаУ једначини 3.4 степен информативности нормализован је ентропијом расподеле класа, а не информацијом поделе по атрибуту; у једначини 3.8 недоследан је предзнак градијентног члана; скраћеница SU употребљена је за две различите величине.Тако дефинисана мера не отклања пристрасност према вишевредносним атрибутима, што је њен наведени мотив.35, 37Hastie, Tibshirani и Friedman 2009
9Висина терена из модела површи и називи спектралних каналаТопографски атрибути рачунати су из продукта EU-DEM v1.1, који је по сопственим метаподацима модел површи и над шумом одражава висину крошњи; у једној реченици канали B05–B08a названи су блиским инфрацрвеним, а B11 и B12 средњим инфрацрвеним.Назив висина терена је непрецизан, а називи канала одступају од званичног приручника мисије и од властите Табеле 5.74EEA и Copernicus 2016; ESA, Sentinel-2 User Handbook 2015
10Научни апарат, запис бројева и лектураПозивање „Lu и др. (2017)“, на месту где се сопствени резултат пореди с туђим, нема јединицу у попису; једна јединица се нигде не цитира; софтвер и пакети наведени су без верзије; децимални знак је тачка; у тексту стоје словне омашке попут „Sentnel-2“ и „Имлицитна“.Једно позивање без јединице стваран је пропуст; децимална тачка одступа од српске правописне норме, мада не од међународног стандарда јединица.103ISO 690:2021; SI брошура, 9. изд. 2019, т. 5.4.4; Правопис српскога језика 2010
11Реферат говори о потврђеним хипотезама којих у раду немаРеферат наводи да резултати „потврђују иницијално постављене истраживачке хипотезе“, док рад поставља главни и шест парцијалних циљева, без хипотеза под тим именом; на једном месту реферат закључке смешта у непостојеће поглавље: „У седмом поглављу дати су закључци докторске дисертације“.Потврда почива на мерама унутрашње провере које рад сам проглашава пристрасним, па је оцена реферата одлучнија него што поставка рада допушта.109, рефератаргумент из грађе самог рада

Шта рад доноси

  • Целовита аутоматизована методологија примењена на целој територији Србије, 88 361 km², у јединственом растеру од 20 метара, над 89 гранула Sentinel-2 из вегетационе сезоне 2019.
  • Две временске репрезентације постављене тако да се могу директно поредити: „Резултујући скуп података са имплицитном временском дефиницијом има 196 454 опажања, што је шест пута мање опажања у односу на експлицитно дефинисану временску компоненту“.
  • Пажљиво грађена референтна грађа од 743 ручно векторизована полигона и балансирање класа које чува стварни редослед заступљености.
  • Валидациона поставка исправна на два осетљива места: балансирање само над скуповима за тренирање и провера која изоставља целе локације.
  • Поштење према сопственим бројевима: „Све ово сугерише да коначне карте типова шумске вегетације захтевају додатну валидацију пре него што могу бити пуштене у ширу употребу“.

Образложење примедби

  1. Нема мере расипања ни теста значајностиНосећи избори, искључење стабла одлучивања, увођење суседства и балансирање класа, почивају на разликама знатно изнад тог прага.
  2. Избор атрибута није угнежђен у спољну петљуПоследица по носећи закључак је безначајна, јер рад као најбољи усваја комплетан скуп атрибута, који том цурењу није подложан.
  3. Просторна аутокорелација и оптимизам унутрашње провереРад ограничење делом предупређује поделом по локацијама и, што је важније, уводи независну валидацију која оптимизам чини видљивим.
  4. Применљивост оцењена по унутрашњој провери, не по независном узоркуРад пад тачности не прикрива него га разлаже: „постоји оправдана сумња да је значајан део одступања последица спроведене конверзије информације о идентитету шумских састојина у усвојене класе типова шумске вегетације“.
  5. Недостају подаци за поновљивостМетодологија је концептуално потпуно описана, а тренинг и референтни подаци грађа су трећих лица; примедба се води као препорука за допуну.
  6. Две претпоставке усвојене без провереРад оптималност изричито назива локалном: „проглашени оптимални параметри методологије се могу сматрати локално прилагођеним, применљивим само за дефинисано подручје истраживања и за обезбеђен скуп података“.
  7. Нетачности у прегледним табелама сателитских сензораПреглед литературе о картирању типова шума тачно преноси кључне налазе упоредивих студија.
  8. Омашке у једначинама приказа методаПоследице по резултате нема, јер се избор атрибута спроводи другим методама, а градијентно појачавање готовим пакетом.
  9. Висина терена из модела површи и називи спектралних каналаЕфекат на резултате је занемарљив, јер је битно релативно висинско раслојавање класа, а канали су недвосмислено идентификовани ознакама.
  10. Научни апарат, запис бројева и лектураАпарат је у целини уредан и савремен: 203 јединице, без посредног цитирања и двоструких јединица, темељна дела цитирана из изворника.
  11. Реферат говори о потврђеним хипотезама којих у раду немаОцена реферата о обиму, методу и пет доприноса одговара стању у тексту.

Осврт не доводи у питање оригиналност рада и не тврди повреду академске честитости. Реч је о стручној критици тачности, метода и закључивања, с дословним наводима и странама дисертације. Као мерило су коришћени само литература, стандарди и прописи који су постојали пре предаје рукописа комисији (децембар 2021).