開放政府資料的社群實踐 - 開放街圖台灣經驗

<div style="display:flex; flex-direction:column;"> <div> ![](https://upload.wikimedia.org/wikipedia/commons/b/b0/Openstreetmap_logo.svg =200x)   ![](https://wiki.openstreetmap.org/w/images/7/74/OSM-tw.svg =200x) </div> <div style="font-size:55%;padding:32px"> # 開放政府資料的社群實踐<br/>開放街圖台灣經驗 </div>  <div style="font-size:16px;display:flex;background-color:rgb(157 195 145/0.5);padding:32px;justify-content:flex-end;"> <div style="flex-direction:column; text-align:left"> <div>slide: https://hackmd.io/@osm-tw/ry9cn_hb0</div> <div>CC-BY-4.0 OpenStreetMap Taiwan Community</div> <div>台灣開放街圖社群</div> </div> </div> </div> Note: 大家好，又再次來到 g0v Summit 大會來分享了，跟大家分享 OpenStreetMap 社群在台灣的腳步，其中很重要的是開放資料這塊，多個城市的地址點位匯入。但在地址之前，先來盤點一下開放資料政策，因為地震而抖出一些個人的murmur --- ## 我是誰?  - [Supaplex](https://www.openstreetmap.org/user/Supaplex) - [OpenStreetMap](https://www.openstreetmap.org) :heart: [Wikidata](https://www.wikidata.org) :heart: - [Wikimedia Taiwan](https://meta.wikimedia.org/wiki/Wikimedia_Taiwan/zh) :cat: Note: 網路 ID 是 Supaplex，參與 OpenStreetMap 與 Wikidata 專案，也是維基媒體協會理事長。維基協會業務往來的單位好像不會來這裡，因此我可以沒什麼顧忌的講事情。 --- ## 為什麼要關注 OpenStreetMap  * 受維基百科啟發，維基式產生地理資料 * OpenStreetMap 是跨語言的地理資料庫 * 允許國際化語言，也有在地化語言 * 能索引其他資料庫的資料，例如：Wikidata * OpenStreetMap 有經緯度資訊，也能存放地理資料本身的結構化資料 Note: 關於 OpenStreetMap 給大家一些基本的概念，受到維基百科影像而成立的地理資料共編站，因此跨語言、跨資料庫。地理資訊部分如位置是在 node 的資料單位儲存的。 --- ## [OpenStreetMap Taiwan(Q104641278)](https://www.wikidata.org/wiki/Q104641278) & [Wikidata Taiwan(Q65555605)](https://www.wikidata.org/wiki/Q65555605)  * OpenStreetMap Taiwan 與 Wikidata Taiwan 共同在台北主辦的月聚 * 成員彼此重疊 * 主要監視變動，以及制訂編輯指南 Note: 打廣告，每月 OpenStreetMap 與 Wikidata Taiwan 社群在台北摩茲工寮聚會。由於兩者成員重疊還有精神類型，才辦得起來。聚會時段主要討論最近變動與制訂編輯指南。 --- ## 監控針對台灣資料的破壞與回復  **使用 QA Tools 如 Osmcha 能輕易辨別破壞** ![](https://i.imgur.com/yLDU1uP.jpg =560x) Note: 台灣的國家定位常引來挑戰者，對社群也得應對。所幸相關工具都能很快掌握並處理掉。 --- ## 監控針對台灣資料的破壞與回復  ![](https://i.imgur.com/H4baf3c.png =560x) Note: 然而可能不同的敘事體系與觀點導致得三不五時處理這類騷擾。 --- ## 中國「規劃」的跨台灣海峽大橋  ![](https://i.imgur.com/k8tRdw9.png =560x) Note: 比較誇張的例子是跨台灣海峽大橋，中國官方地圖會標示，但很難在近期，或是有那麼大的物力真得實行。 --- ## 04/03 07:58:11 UTC+8 花蓮地震  <a href="https://commons.wikimedia.org/wiki/File:04.03_%E5%89%AF%E7%B8%BD%E7%B5%B1%E5%89%8D%E5%BE%80%E8%8A%B1%E8%93%AE%E7%9E%AD%E8%A7%A3%E7%81%BD%E5%AE%B3%E6%83%85%E5%BD%A2%E5%8F%8A%E6%95%91%E6%8F%B4%E9%80%B2%E5%BA%A6_-_53629407644_(cropped).jpg">總統府</a>, <a href="https://creativecommons.org/licenses/by/2.0">CC BY 2.0</a>, via Wikimedia Commons Note: 地震因素而有不少活動與過往開放資料政策的反思 --- ## 花蓮地震的 HOT 專案  <div style="display:inline-flex;align-items:center;gap:2rem;"> <div style="flex:1;text-align:left;font-size:80%;left"> * 中橫公路東段：[16508](https://tasks.hotosm.org/projects/16508) * 蘇花公路:[16507](https://tasks.hotosm.org/projects/16507/) * 花東縱谷北段，新城、秀林、花蓮、吉安、壽豐：[16505](https://tasks.hotosm.org/projects/16505) </div> <div style="flex:1;text-align:left;font-size:100%;left"> <div style="flex-direction:column; text-align:left"> ![Tasking Manager](https://hackmd.io/_uploads/B1q67BhxR.png =2000x) </div> </div> </div> Note: 先來談近期的事情，社群申請的 HOT Tasking Manager 權限派上用場，能夠舒解國際友人跨海相助的古道熱腸，要有地方畫地圖。 --- ## 救災快速反應的過往案例  <div style="display:inline-flex;align-items:center;gap:1rem;"> <div style="font-size:75%;flex:1;text-align:left" left>   * 災難後快速繪製地圖 Humanitarian OpenStreetMap Team * 海地地震 * 海燕颱風 * 尼泊爾大地震 * 土耳其/敘利亞大地震 </div> <div style="height:75%" right> ![](https://cdn.hotosm.org/website/tm-mapping-layout.png =580x) </div> </div> Note: 救災這一塊老實說台灣政府相當有資源，因此不大需要像 HOT 這類型的匯集地理資訊的機制。先前有名的案例有海地地震、海燕颱風、尼泊爾大地震，以及土耳其/敘利亞大地震 --- ## OpenStreetMap 社群災難繪製結語  <div style="display:inline-flex;align-items:center;gap:2rem;"> <div style="flex:1;text-align:left;font-size:100%;left" > * :flag-tw: 台灣政府的防救災資源充沛 * HOT 專案貢獻者來自台灣之外的國際友人 </div> <div style="flex:1;text-align:left;font-size:100%;left"> <div style="flex-direction:column; text-align:left"> * :newspaper: 台灣的圖客多半依據新聞報導繪製，例如：修復大清水隧道日本時代蘇花路舊道當臨時道路 * :heart: 感謝世界各地的熱心參與者協助繪製花蓮的建築 :heart: </div> </div> </div> Note: 前面已經提及台灣政府資源充沛，不大需要 OpenStreetMap 這類的社群參與社群生產的地理圖資。台灣社群配合國際社群的需求，也順便實際跑一遍相關流程。本地社群大多依據新聞資訊，標示臨時橋樑或倒掉的建築。這裡再次感謝世界各地熱心參與者協助繪製花蓮的建築。 --- ## 地震 app 再次熱門  ![KNY](https://hackmd.io/_uploads/BJgQZmpbA.png) Note: 除了國家級警報，也有接政府API發佈地震預警的App，例如KNY台灣天氣。這一切歸功於台灣政府弄基本功，將基礎的地震偵測與資訊系統建置好，才能方便各方開發者開發各都貼近民眾的服務。以KNY來說，能在地面坡到達前，早十幾秒得知地震，做好應對。 --- ## 話當年：Open Data 的討論 * 民代常為質疑為何不開發app/服務/網站 * 無用(使用量、下載量)App檢討 * 政府應該單純提供資料，民間發揮服務專長專心做服務 Note: 進入歷史時段，那時候常有提出為何不做app/為何要做app的討論。最近關注開放資料的人，就提出政府專心在資料端處理好資料，相關應用放手給民間，自行尋找能夠發揮的地方。 --- ## 話當年：Open Data 聯盟 * 候任環境部長被推為會長 * 大包商集團旗下子公司 big data 領域人才被擠下去 * OpenStreetMap 台灣的代表也被選其中一個副會長 Note: murmur，候任環境部長有說過應該限制只有台灣人用開放資料。當時他被推上去，是因為另外一位熱門人士背後大包商背景，基於權力平衡而被選上去。另外就是今天也在的，學界背景而選為副會長 --- ## 匯入避難收容所-null island  [![圖片](https://hackmd.io/_uploads/SJHttma-0.png)](https://www.openstreetmap.org/changeset/49185168#map=2/23.2/78.0) Note: 曾經政府有釋出避難收容所資料，但資料量一大，難免有意無意沒寫位置，或是寫錯地方，其中有幾十筆跑到 0,0 位置，也就是俗稱 null island 的地方。 --- ## 匯入避難收容所2-刪除台灣以外的點位  [![圖片](https://hackmd.io/_uploads/r1yhtQ6b0.png)](https://www.openstreetmap.org/changeset/49183572#map=3/13.92/60.82) Note: 所以國際社群的德國里長伯就刪掉台灣以外地方的避難收容所資料。在台灣的社群成員沒辦法清理資料或核對資料，也只能如此 --- ## 匯入避難收容所3-北峰國小  ![圖片](https://hackmd.io/_uploads/r1SrBN6ZR.png) Note: 這邊有個例子，汐止北峰國小點位移位不在學校那邊，差個幾十公尺狀況，還蠻常見的。 --- ## 開放政府資料的挑戰-避難所篇  <div style="display:inline-flex;align-items:center;gap:2rem;"> <div style="flex:1;text-align:left;font-size:100%;left" > * 資料量大會有一定數量的錯誤資料 * 空值 - null island * 營區不透露實際位置，也是空值 </div> <div style="flex:1;text-align:left;font-size:100%;left"> <div style="flex-direction:column; text-align:left"> * ~~里長伯~~德國資深OSM成員回退問題編輯 * 需要事先跑多道檢驗程序確保資料品質 </div> </div> </div> Note: 資料量大會有一定比例的錯誤狀況，空值可能沒有填或是故意不填，如營區這類型地點。OpenStreetMap 社群基於資料品質狀況，是可以直接回退，所以德國里長伯就回退資料。未來需要跑些檢驗程序來確保資料品質。 --- ## 地址資料-台中篇  [![Taichung](https://hackmd.io/_uploads/BywrXV6bA.png)](https://gist.github.com/typebrook/c03326c77541733045331183c46032c3?permalink_comment_id=3675141) Note: 接下來講述原先投稿時的主題，地址資料的處理。感謝政府，各縣市政府已經在陸續釋出地址點位資料集。社群這邊也陸續處理轉化為 OpenStreetMap 的格式，如圖政府端資料長這樣子，縣市、鄉鎮市區是用戶役政系統代碼表示而非文字，巷、弄、門牌號碼是用全型數字，都會需要前處理之後才能匯入。 --- ## 地址資料-以文字編輯器處理  <div style="display:inline-flex;align-items:center;gap:2rem;"> <div style="flex:1;text-align:left;font-size:70%;left" > 1. 行政區從代碼轉為文字 2. 全型數字轉為半型數字 3. 分開處理無路名地名地址與有路名地址 4. 合併路巷弄 5. 分離號樓之幾 6. 拼湊出完整地址 </div> <div style="flex:1;text-align:left;font-size:100%;left"> <div style="flex-direction:column; text-align:left"> ![圖片](https://hackmd.io/_uploads/BJiVi4TbC.png =500x) </div> </div> </div> Note: 前面提及代碼轉為用文字書寫的行政區，以及全型數字變半型，還有政府端資料道路、巷、弄是分開欄位，但到了 OpenStreetMap 都是用一個欄位。政府釋出資料號樓附註的都同一欄位，但在 OpenStreetMap 得分開欄位。而為了作業方便，有把無路名地址分開另一個檔案處理。由於地址是人類可讀，也保留完整中文格式地址，供人類來檢閱使用。 --- ## 地址資料-縣市別  <div style="display:inline-flex;align-items:center;gap:2rem;"> <div style="flex:1;text-align:left;font-size:80%;left"> * 六都：臺北市、臺中市、桃園市、臺南市、高雄市 * 省轄市：新竹市 * 縣：臺東縣、苗栗縣、雲林縣 </div> <div style="flex:1;text-align:left;font-size:100%;left"> <div style="flex-direction:column; text-align:left"> ![圖片](https://hackmd.io/_uploads/SkXcyrTW0.png) </div> </div> </div> Note: 目前六都除了新北市都已經釋出地址，其中臺北市的座標格式比較奇怪，需要加個偏移量處理。其他地方新竹市、臺東縣、苗栗縣、雲林縣都有釋出。一有釋出即會進行處理。 --- ## 全型數字  ![圖片](https://hackmd.io/_uploads/Bk-hMSpbA.png) Note: 大家再來看看全型數字的狀況，主要是門牌號碼需要將其轉換為半型數字 --- ## 罕用字地名  ![圖片](https://hackmd.io/_uploads/S1vv3NpW0.png) Note: 曾經有段時間電腦有所謂的罕用字，經過多次轉換導致變成問號，也得一個一個手動查閱確認其用字。 --- ## 特殊門牌型式  ![圖片](https://hackmd.io/_uploads/BJ_jn4TWA.png) Note: 在處理的過程中，知道很多戶政這邊資料加註的方式。而在處理的時候要知道這些狀況，一一去設計對應的轉換方式。 --- ## 累積編輯量排第10  ![top 10](https://hackmd.io/_uploads/Byik24TZ0.png =x700) Note: 除了臺中之外，其他縣市都我來處理，因此編輯量衝到第10名。 --- ## 找出遺漏的道路名稱  ![missing road](https://hackmd.io/_uploads/SyGVeH6-R.png) Note: 透過外部工具，有完整的地址資訊，很容易看出沒有寫上道路名稱的狀況 --- ## 台灣最高樓101的地址點位  ![Taipei 101](https://hackmd.io/_uploads/By-Q-STW0.png) Note: 這邊是台北101所在地址，臺北市信義區信義路五段7號，每一樓層都有地址點位 --- ## 交通輸輸資料交換平台  ![TDX Swagger](https://hackmd.io/_uploads/ByoFEHTbR.png) Note: TDX/PDX做得相當不錯，但我真不習慣微軟 Odata 格式。 --- ## 教育部本士語言標示地名計畫  ![圖片](https://hackmd.io/_uploads/rkwgN8p-C.png) Note: 依據教育部本土語言標示計畫的成果，標示各地車站的名稱，並且編輯到 OpenStreetMap 上面。 --- ## 教育部本士語言標示地名計畫-第二階段  ![圖片](https://hackmd.io/_uploads/B1O1rLTZA.png) Note: 目前第二階段也有收錄廟宇的名稱，陸續也能更新到 OpenStreetMap 上面。 --- ## 台灣村里的視覺化  [![](https://i.imgur.com/fs9Ds83.png)](https://overpass-turbo.eu/s/1kR3) Note: 全台村里在 OpenStreetMap 上的視覺化呈現 ---  ## 村里資料匯入 * 戶役政系統代碼主管機關改變 * 主計總處->戶政司 * 縣市整併村里 * 人口多村里拆分 Note: 偶爾會變動，然後先前要匯入時，發生主管機關改變，從主計總處變成戶政司，然後各縣市不定期整併或是人口多新設村里。 --- ## 監控新成立或是解散的村里  工具連結：[https://wikidata.planetoid.info/?q=已建立鄉鎮條目](https://wikidata.planetoid.info/?q=%已建立鄉鎮條目) ![](https://i.imgur.com/rAxjSeN.png) Note: 社群建立工具來監控政府這邊釋出的資訊，有新的村里或是整併勢的村里，就可以編輯 Wikidata 與 OpenStreetMap --- ## 行政區關係網路分析 <div style="display:inline-flex;align-items:center;gap:2rem;"> <div style="flex:1;text-align:left;font-size:100%;left" > ![圖片](https://hackmd.io/_uploads/r1e-qUabR.png =600x) </div> <div style="flex:1;text-align:left;font-size:100%;left"> <div style="flex-direction:column; text-align:left"> ![圖片](https://hackmd.io/_uploads/r1S4qLabC.png =350x) </div> </div> </div> Note: 中國那邊的人用工具分析台灣行政區的關係網絡，有抓出母子關係怪怪的，如下面沒有下轄的里，或是一個村里同時是另一個村里與鄉的子關係。 --- ## Ceb Wiki ljsbot 大量匯入溪流資料  [![](https://i.imgur.com/ZU69q1R.png)](https://www.vice.com/en/article/4agamm/the-worlds-second-largest-wikipedia-is-written-almost-entirely-by-one-bot) Note: Cebese Wikipedia 用機器人衝數量，沒有多少真人編輯，全世界皆知道。也造就台灣已經有大量 GNS 來的溪流資料，急需要與既有資料整合。 --- ## 溪流資料狀況  <div style="display:inline-flex;align-items:center;gap:2rem;"> <div style="flex:1;text-align:left;font-size:60%;left" > * 河川代碼上的溪流很少 * Wikidata(ceb)上很多GNS來的溪流 * NLSC 地圖也收不少溪流 * 社群是否要花時間建立河川代碼以外的溪流? </div> <div style="flex:1;text-align:left;font-size:100%;left"> <div style="flex-direction:column; text-align:left"> ![JOSM River Relation](https://i.imgur.com/L3o35Z9.png =600x) </div> </div> </div> Note: 政府花資料整治的溪流流城，而有河川代碼，其實遠遠少於大家日常生活遇到的溪流數量。因此造成不論在 OpenStreetMap 還是 Wikidata，得為河川代碼清冊外的溪流建立資料。 --- ## 其他匯入資料  <div style="background-color: purple; color: white; padding: 10px; border: solid 3px #0F7391; margin: 10px;"> * AED * ETC 門柱 * 消防栓 * i郵箱 * 待處理：變電箱、路燈、電線桿 </div> Note: AED、ETC 門柱、消防栓、i郵箱。待處里的有台電變電箱、路燈、電線桿 --- ## 地震後的步道狀況  <div style="display:inline-flex;align-items:center;gap:2rem;"> <div style="flex:1;text-align:left;font-size:75%;left" > * 先依據太魯閣國家公園公告，OSM 標示關閉的步道 * 可以有更好的步道資訊公告方式 * 期待有一天修復能再次開放 </div> <div style="flex:1;text-align:left;font-size:100%;left"> <div style="flex-direction:column; text-align:left"> ![圖片](https://hackmd.io/_uploads/H1af_UabC.png =600x) </div> </div> </div> Note: 回到地震的話題，社群有依據官方公告，標示步道開放情形。仍然希望有一天修復完成，重新開放。 --- ## [To-siā!](https://en.wiktionary.org/wiki/%E5%A4%9A%E8%AC%9D#Chinese) [sṳ̀n-mùng-ǹ!](https://en.wiktionary.org/wiki/%E6%89%BF%E8%92%99%E4%BD%A0) Thank you!  - :sheep: [GitHub](https://github.com/Supaplextw/) - Supaplex: [Wikidata](https://wikidata.org/wiki/User:Supaplex)，[OpenStreetMap](https://www.openstreetmap.org/user/Supaplex) - Or [email](mailto:dennis@wikimedia.tw) - Facebook group [Wikidata Taiwan](https://www.facebook.com/groups/2212207218990971/)、[OpenStreetMap Taiwan](https://www.facebook.com/groups/OpenStreetMap.TW/) Note: Here is my contact information, To-siā, sṳ̀n-mùng-ǹ! Thank you! --- ## Q&A ![](https://hackmd.io/_uploads/S1VYqVmf0.png)