PTT職涯區 / Soft_Job (軟體人)

Re: [閒聊] 內政部實價登錄網站

看板Soft_Job (軟體人)作者 (★閃亮數學推理★)時間13年前 (2012/11/15 23:02), 編輯推噓16(16推 0噓 98→)
留言114則, 22人參與, 最新討論串6/21 (看更多)
http://udn.com/NEWS/FINANCE/FIN10/7492149.shtml 實在是懶得多說了 你認為的公開那不叫公開 當你要多去跑一次申請流程 就算免費都是流動花費 因為你就是要花人力去做 不過對於某些人來說 好像人力時間都不用算錢 然後使用門檻提升的論調又是倒果為因 是你讓資料變得不是那麼好取得 其他人用正常連結網路的流程去爬網站 請問到底是哪裡妨礙正常使用 除非你有一個令人信服的理由 e.g. 因為這樣的方式會讓經費有限的單位所能供應的頻寬全部被這單一功能所佔光 所以我們改另外提供其他模式開放更方便簡易存取原始資料 問題是實價登錄一個月才更新一次 你改另外放一個地放原始資料會吃掉你多少頻寬？ 那像內政部每年都會更新的資料 教育部 中選會等 是不是都應該要把那些資料都鎖起來需要的再去申請就好 如果你還想討論的話 請你先去看看台北市政府怎麼做的再說 不要自己用自己的想法去看外面變化如此快速的世界 : ◆ From: 1.163.165.221 : → IBIZA:1.本來就是有公開的 11/15 22:34 : → IBIZA:2.哪邊的流動花費增加了? 11/15 22:34 : → IBIZA:3.資料使用門檻的提升是因為有人去grab網站, 防礙正常使用 11/15 22:35 : 推 dryman:當初沒有任何人爬網站，單純使用量就把網站塞爆了 11/15 22:37 : → IBIZA:沒有任何人grab網站? 跟據地圖版實價登錄網站的facebook官網 11/15 22:42 : → IBIZA:他們是還沒開放前就已經準備要進去grab資料了吧? 11/15 22:42 : → IBIZA:然後內政部實價登錄網站一開放, 地圖版的官網就開始討論他們 11/15 22:43 : → IBIZA:連上去下載資料的經過 11/15 22:44 : → IBIZA:這叫「當初沒有任何人爬網站」? 11/15 22:44 : → ckaha:crab是正常網路會發生的事情 你要認為是攻擊就定法阻止 11/15 22:45 : → IBIZA:現在不就是設法阻止嗎？ 11/15 22:46 : → IBIZA:你要資料去申請嘛　幹嘛用grab的？ 11/15 22:46 : → ckaha:樓上根本沒搞懂時價登錄的意義 我已經說了 資料開放 11/15 22:49 -- ※ 發信站: 批踢踢實業坊(ptt.cc) ◆ From: 1.163.165.221
→
11/15 23:03, , 1F
還是那句話
11/15 23:03, 1F
→
11/15 23:03, , 2F
你希望政府開放甚麼　請請循途徑去push, 在沒有開放api或是
11/15 23:03, 2F
→
11/15 23:03, , 3F
cvs下載等方式之前, 麻煩請用現有方式去申請資料
11/15 23:03, 3F
→
11/15 23:03, , 4F
不要grab網站, 佔用一般使用者的頻寬
11/15 23:03, 4F
→
11/15 23:03, , 5F
這樣很難懂嗎？
11/15 23:03, 5F
→
11/15 23:06, , 6F
沒關係 反正會爬的人還是會爬 政府繼續走倒退路
11/15 23:06, 6F
→
11/15 23:07, , 7F
不難懂 因為我自己就有push過
11/15 23:07, 7F
→
11/15 23:10, , 8F
ckaha不要在意啦,18124是名人了,他是因為你批政府才來護航
11/15 23:10, 8F
→
11/15 23:10, , 9F
今天換個黨上去他八成就會支持你的看法了
11/15 23:10, 9F
→
11/15 23:11, , 10F
shvanta 不要老是用你的藍綠眼光看事情
11/15 23:11, 10F
推
11/15 23:12, , 11F
我實在是很想知道爬資料到底錯在哪裡...
11/15 23:12, 11F
→
11/15 23:13, , 12F
像open data這種東西 本來就是該大力推行的政策
11/15 23:13, 12F
→
11/15 23:13, , 13F
只要crawler寫好不要導致異常的request頻率，根本不會影響
11/15 23:13, 13F
→
11/15 23:13, , 14F
其他人的權益
11/15 23:13, 14F
→
11/15 23:13, , 15F
弄到要爬資料，實在很悲哀
11/15 23:13, 15F
→
11/15 23:16, , 16F
API設計得好，crawler大概只需要一天爬一次資料就夠了...
11/15 23:16, 16F
→
11/15 23:17, , 17F
能用一個response回傳的東西，幹嘛拆成一千份呢
11/15 23:17, 17F
推
11/15 23:38, , 18F
18124門外漢..他只有顏色
11/15 23:38, 18F
→
11/15 23:39, , 19F
基本上政府網站會不會當掉，流量有沒有問題
11/15 23:39, 19F
→
11/15 23:39, , 20F
根本和這些crawler無關
11/15 23:39, 20F
→
11/15 23:39, , 21F
講這些五四三的只是混淆視聽而已
11/15 23:39, 21F
→
11/15 23:44, , 22F
看到前一篇幾個版友認真在跟他討論就覺得好笑,浪費時間..
11/15 23:44, 22F
→
11/15 23:45, , 23F
我放棄了 他爽就好
11/15 23:45, 23F
→
11/15 23:46, , 24F
其實他的目的已經達到了
11/15 23:46, 24F
→
11/15 23:46, , 25F
打泥巴戰直到你放棄是他的專長，樓上辛苦了 XD
11/15 23:46, 25F
→
11/15 23:47, , 26F
我只是覺得這裡是soft_job 起碼還是要有點專業的東西
11/15 23:47, 26F
→
11/15 23:48, , 27F
shvanta 泥巴戰不是一向都是你在打嗎?XD
11/15 23:48, 27F
推
11/15 23:48, , 28F
我贊同18124的看法
11/15 23:48, 28F
→
11/15 23:50, , 29F
資料的確是公開給你查了 但他沒有義務讓你grab 就算改成圖
11/15 23:50, 29F
→
11/15 23:51, , 30F
你還是一樣可以查 難道一定要讓程式很容易辨識才叫公開?
11/15 23:51, 30F
推
11/15 23:51, , 31F
希望18124只是個普通嘴砲工程師..不要是政府官員XD
11/15 23:51, 31F
→
11/15 23:52, , 32F
這樣邁向open data還有點機會
11/15 23:52, 32F
→
11/15 23:52, , 33F
什麼叫改成圖還是一樣可以查? 視障怎麼辦?
11/15 23:52, 33F
→
11/15 23:53, , 34F
政府網站不弄成無障礙友善就算了 還增加障礙
11/15 23:53, 34F
→
11/15 23:53, , 35F
那原本是字的話視障就可以查?
11/15 23:53, 35F
→
11/15 23:53, , 36F
視障　用文字還是圖片有差嗎？
11/15 23:53, 36F
→
11/15 23:53, , 37F
mongsq你還是先去看看我提供的連結 你的出發點還更糟
11/15 23:53, 37F
→
11/15 23:53, , 38F
對一般正常查詢的人　並沒有增加障礙
11/15 23:53, 38F
→
11/15 23:54, , 39F
有差... 差很多
11/15 23:54, 39F
還有 35 則推文
→
11/16 00:27, , 75F
人類的查詢動作是這樣的
11/16 00:27, 75F
→
11/16 00:27, , 76F
然後一個晚上頂多看個幾十筆上百筆
11/16 00:27, 76F
→
11/16 00:27, , 77F
就跟你說不懂就別裝懂...你以為機器人就是萬箭齊發一秒
11/16 00:27, 77F
→
11/16 00:27, , 78F
送出10萬個request嗎 =_=
11/16 00:27, 78F
→
11/16 00:28, , 79F
blueshiva 我沒有說會萬箭齊發
11/16 00:28, 79F
→
11/16 00:28, , 80F
不過你要下載幾萬筆資料 就是得送出幾萬個request 分散在
11/16 00:28, 80F
→
11/16 00:28, , 81F
好幾天也是幾萬個request
11/16 00:28, 81F
→
11/16 00:29, , 82F
我每天給你三碗飯，分三餐給，你會吃得很爽，一次叫你吃
11/16 00:29, 82F
→
11/16 00:30, , 83F
完你會想吐。一個公開的service幾天撐不了幾萬個request
11/16 00:30, 83F
→
11/16 00:30, , 84F
問題是不是只有你這幾萬筆啊...
11/16 00:30, 84F
→
11/16 00:30, , 85F
誰知道有多少人在下載...orz
11/16 00:30, 85F
→
11/16 00:31, , 86F
？那是誰的問題？送飯的還是吃飯的？
11/16 00:31, 86F
→
11/16 00:31, , 87F
不管是誰的問題 你不要搞到我這個正常使用者啊...orz
11/16 00:31, 87F
→
11/16 00:32, , 88F
所以今天網站本身爛，多幾個人連上就掛點，也是我害的就
11/16 00:32, 88F
→
11/16 00:32, , 89F
程式下載就去push政府弄程式下載的管道嘛
11/16 00:32, 89F
→
11/16 00:32, , 90F
如果今天是正常使用 那大家都一樣 沒啥好怪的
11/16 00:32, 90F
→
11/16 00:32, , 91F
先別管這個了，你聽過安麗嗎？
11/16 00:32, 91F
→
11/16 00:32, , 92F
是了？那這樣好了，為了表示我的歉意，你把住址給我我幫
11/16 00:32, 92F
→
11/16 00:33, , 93F
你跟內政部買光碟寄給你好了，你可以在自己家慢慢看...
11/16 00:33, 93F
→
11/16 00:33, , 94F
我要光碟要幹嘛 我又沒有要幾萬筆資料
11/16 00:33, 94F
→
11/16 00:34, , 95F
我只想看 我想買的區域跟路段有哪些物件 價格如何
11/16 00:34, 95F
推
11/16 00:34, , 96F
先別管光碟了，你聽過安麗嗎？
11/16 00:34, 96F
→
11/16 00:34, , 97F
沒關係，為了表示我最大的誠意，其他的資料我送你
11/16 00:34, 97F
→
11/16 00:35, , 98F
哦?所以你要出錢囉?那好啊XD
11/16 00:35, 98F
→
11/16 00:35, , 99F
我給你住址你就出錢買光碟嗎?
11/16 00:35, 99F
推
11/16 00:37, , 100F
沒關係，只要你別再東扯西扯，這點小錢是ok的
11/16 00:37, 100F
→
11/16 00:38, , 101F
那不行 我又不是只看一個月XD
11/16 00:38, 101F
推
11/16 00:41, , 102F
申請單工本費? 這不就和暴雪說 aren't you thankful 一樣
11/16 00:41, 102F
→
11/16 03:44, , 103F
IBIZA這串的論點蠻奇怪的....
11/16 03:44, 103F
推
11/16 07:40, , 104F
畢竟有些人護航的原因不是為了技術啊..
11/16 07:40, 104F
→
11/16 07:45, , 105F
有言道你是叫不醒裝睡的人 不要浪費時間跟護航家講話了
11/16 07:45, 105F
推
11/16 08:26, , 106F
某人應該去當總統府發言人　甚麼都能護航的很好
11/16 08:26, 106F
推
11/16 14:01, , 107F
好會謠喔~~
11/16 14:01, 107F
→
11/16 15:10, , 108F
我覺得爬資料沒錯, 他本來就是要開放的東西
11/16 15:10, 108F
→
11/16 15:11, , 109F
頻寬不夠. 開放頻寬阿..不然專門弄一台機器給大家挖資料阿..
11/16 15:11, 109F
→
11/16 15:13, , 110F
技術上做的到吧, 還是能不影響使用者,又可以達到開放的目的
11/16 15:13, 110F
→
11/16 15:14, , 111F
大家不是笨蛋..似似而非的東西只能虎爛不想動腦的人..
11/16 15:14, 111F
→
11/16 15:47, , 112F
工讀生無限跳針
11/16 15:47, 112F
→
11/16 20:34, , 113F
他邏輯根本就有問題啊..
11/16 20:34, 113F
推
11/16 22:41, , 114F
政府政策明顯封閉 有些人想法也沒救了
11/16 22:41, 114F
‣ 更多 ckaha 的文章
文章代碼(AID): #1GfGFgc5 (Soft_Job)
討論串 (同標題文章)
本文引述了以下文章的的內容：
完整討論串 (本文為第 6 之 21 篇)：
排序： 最新先 | 最舊先 | 留言數
在新視窗開啟完整討論串 (共21篇)
Soft_Job 近期熱門文章
更多 近期熱門文章 >>
PTT職涯區 即時熱門文章
更多 即時熱門文章 >>
‣ 更多 ckaha 的文章
文章代碼(AID): #1GfGFgc5 (Soft_Job)