PTT職涯區 / Stock (股票)

Re: [請益] 股狗網付費會員

看板Stock (股票)作者 (bero)時間7年前 (2017/10/03 22:16), 編輯推噓8(8推 0噓 68→)
留言76則, 11人參與, 7年前最新討論串2/2 (看更多)
※ 引述《bero (bero)》之銘言： : 小弟週末用每五秒單一分點單日的速度抓股狗網的分點進出資料 最新的結果：數十天平均一天只看券商分點資料不到50筆 : 然後就被ban了... 然後網站就直接全部吐空資料了 免費功能卻都正常 : 手點都可以比五秒快了...orz : 請問有人使用股狗網抓資料的經驗嗎？ : 怎樣才不會被系統判定是濫用啊? 回應給該公司客服(LINE)以及網站提供的信箱 得到的答案都是： 伺服器正常無法重現該問題 : 如果8500就用這兩天的話，也太悲催了 該公司不能退費 請問該怎麼辦呢？ 付了錢，每天也沒抓多少資料(券商分點每天抓個三十～五十筆，根本比不上增量)， 可是該公司完全沒有想要協處理的意思 版上應該有不少該公司客戶，請問你們有碰到這樣的問題嗎? -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 114.35.110.243 ※ 文章網址: https://www.ptt.cc/bbs/Stock/M.1507040203.A.AE6.html
→
10/03 22:22, 7年前 , 1F
像這種你有嘗試過，吐空資料時用同電腦瀏覽器打開?
10/03 22:22, 1F
→
10/03 22:23, 7年前 , 2F
先確認瀏覽器行為上完全一致(空資料)
10/03 22:23, 2F
→
10/03 22:27, 7年前 , 3F
有阿白天連回家VM中華電信，公司中華電信固網
10/03 22:27, 3F
→
10/03 22:28, 7年前 , 4F
手機亞太電信4G吃到飽都是同樣的狀況...T___T
10/03 22:28, 4F
→
10/03 22:28, 7年前 , 5F
如果都沒有人有同樣狀況我好像就只能吃自己了Orz
10/03 22:28, 5F
→
10/03 22:30, 7年前 , 6F
手機CHROME電腦Chrome 60.0.3112.113 (Official Bui
10/03 22:30, 6F
→
10/03 22:31, 7年前 , 7F
白天可能受到其他軟體影響，可是剛剛連也是一樣
10/03 22:31, 7F
→
10/03 22:32, 7年前 , 8F
請問一樓大大有建議嗎?我是有在考慮重灌一台VM
10/03 22:32, 8F
→
10/03 22:33, 7年前 , 9F
要不是AZURE帳號沒點數了，不然就開美國的機器試試
10/03 22:33, 9F
→
10/03 22:33, 7年前 , 10F
了
10/03 22:33, 10F
→
10/03 22:33, 7年前 , 11F
真的很不懂啊(我自己不寫前端code都寫後端)
10/03 22:33, 11F
→
10/03 22:34, 7年前 , 12F
除非付費功能用的js檔案跟免費的部分不同
10/03 22:34, 12F
→
10/03 22:34, 7年前 , 13F
登入之後有不同的token可以識別
10/03 22:34, 13F
→
10/03 22:35, 7年前 , 14F
(我的意思是傳輸機制不同)不然為什麼都取不回資料
10/03 22:35, 14F
→
10/03 22:36, 7年前 , 15F
竟然一片沉寂T____T 真不希望自己是個案...哭哭
10/03 22:36, 15F
→
10/03 22:42, 7年前 , 16F
我的意思是當你出現取資料失敗時有開瀏覽器確認
10/03 22:42, 16F
→
10/03 22:42, 7年前 , 17F
瀏覽器依然取不到資料這件事嘛?
10/03 22:42, 17F
→
10/03 22:43, 7年前 , 18F
如果瀏覽器登入後也是拿不到資料的話你就可以死心拉
10/03 22:43, 18F
→
10/03 22:47, 7年前 , 19F
Hi 大大晚安^_^ 不知道你是否也是該網站客戶?
10/03 22:47, 19F
→
10/03 22:47, 7年前 , 20F
10/03 22:47, 20F
→
10/03 22:48, 7年前 , 21F
我之前抓他們家網站是直接讀這個json但被ban之後
10/03 22:48, 21F
→
10/03 22:48, 7年前 , 22F
就改用瀏覽器下一個券商下一個券商點了
10/03 22:48, 22F
→
10/03 22:49, 7年前 , 23F
到後來我甚至不敢在家裡點，都上下班路上用手機下載
10/03 22:49, 23F
→
10/03 22:49, 7年前 , 24F
EXCEL檔案
10/03 22:49, 24F
→
10/03 22:50, 7年前 , 25F
其實後來發現不好抓之後想說要能把完整的資料弄下來
10/03 22:50, 25F
→
10/03 22:50, 7年前 , 26F
進DB跑自己想跑的演算法應該是無望了(追不到增量)
10/03 22:50, 26F
→
10/03 22:50, 7年前 , 27F
就很懶了T___T
10/03 22:50, 27F
→
10/03 22:52, 7年前 , 28F
不過話說回來，該站客服說沒有針對帳號阻擋或者停用
10/03 22:52, 28F
→
10/03 22:53, 7年前 , 29F
如果該回復可信(有人能指點迷津嗎?= =|||)的話
10/03 22:53, 29F
→
10/03 22:53, 7年前 , 30F
我應該...換個瀏覽器?
10/03 22:53, 30F
推
10/03 22:58, 7年前 , 31F
這邊應該沒幾個人能回答你的問題
10/03 22:58, 31F
→
10/03 22:59, 7年前 , 32F
哈 我對爬蟲的部分有興趣，但我不想買他的會員XD
10/03 22:59, 32F
→
10/03 23:20, 7年前 , 33F
可能是規律太一致被判定是機器，或是流量異常
10/03 23:20, 33F
→
10/03 23:22, 7年前 , 34F
之前爬別的地方也被鎖過
10/03 23:22, 34F
→
10/04 01:26, 7年前 , 35F
找消保官吧
10/04 01:26, 35F
→
10/04 01:42, 7年前 , 36F
我可以回答你的問題 你這種抓法一定要ban你
10/04 01:42, 36F
→
10/04 01:43, 7年前 , 37F
何況他也是鄉民 看到這文 瞄著你ban
10/04 01:43, 37F
推
10/04 02:10, 7年前 , 38F
我覺得如果合約沒寫 這樣ban屬於履約不完整 告民事
10/04 02:10, 38F
→
10/04 02:10, 7年前 , 39F
勝訴機會大
10/04 02:10, 39F
推
10/04 02:18, 7年前 , 40F
他們就回你不知道為什麼啊 看你要解決問題還是退錢
10/04 02:18, 40F
→
10/04 02:19, 7年前 , 41F
要解決問題的話 你要自己找出會出錯的條件 例如若真
10/04 02:19, 41F
→
10/04 02:19, 7年前 , 42F
的是抓資料時間太規律的話 那你就要用亂數時間之類
10/04 02:19, 42F
→
10/04 02:20, 7年前 , 43F
如果只是要退錢 那就找消保官 把過程錄下來當證據
10/04 02:20, 43F
→
10/04 02:21, 7年前 , 44F
才8500沒事別告民事 你會累死 得不償失
10/04 02:21, 44F
推
10/04 02:25, 7年前 , 45F
要告民事不如去媒體爆料
10/04 02:25, 45F
→
10/04 02:25, 7年前 , 46F
民事很多東西我們一般人不懂 找律師也不只8500
10/04 02:25, 46F
→
10/04 06:07, 7年前 , 47F
看了一下上一串你好像沒搞懂板友的建議...
10/04 06:07, 47F
→
10/04 06:08, 7年前 , 48F
他們是要你在 HTTP requeset 的 header 上面加資料
10/04 06:08, 48F
→
10/04 06:10, 7年前 , 49F
不是要你換瀏覽器，而且他真要 BAN 你，你換哪台
10/04 06:10, 49F
→
10/04 06:10, 7年前 , 50F
不都登入同個收費帳號... 你怎會認為他是BAN IP ?
10/04 06:10, 50F
→
10/04 06:12, 7年前 , 51F
(上面 request 多個 e )
10/04 06:12, 51F
→
10/04 08:55, 7年前 , 52F
用瀏覽器為什麼要換AGENT名稱...
10/04 08:55, 52F
→
10/04 08:56, 7年前 , 53F
就某個角度來說，只要後面不要有想抓資料的人
10/04 08:56, 53F
→
10/04 08:57, 7年前 , 54F
進來送葬或者想要挑戰這套BAN BAN機制
10/04 08:57, 54F
→
10/04 08:57, 7年前 , 55F
那這串哀悼也是有用//攤手
10/04 08:57, 55F
→
10/04 08:58, 7年前 , 56F
只能說一間資料服務提供商還這麼小氣，是對自己的
10/04 08:58, 56F
→
10/04 08:58, 7年前 , 57F
核心競爭力多麼沒信心就是= =|||
10/04 08:58, 57F
→
10/04 08:59, 7年前 , 58F
也是啦，GOOGLE讓人查詢但是不會讓人存取後面的DATA
10/04 08:59, 58F
→
10/04 09:08, 7年前 , 59F
可以讓你查不要讓你拿
10/04 09:08, 59F
→
10/04 09:19, 7年前 , 60F
應該是說付錢不給查
10/04 09:19, 60F
推
10/04 10:12, 7年前 , 61F
五秒手點是可以，但沒人持續點10分鐘以上，系統應
10/04 10:12, 61F
→
10/04 10:12, 7年前 , 62F
該這樣判斷的吧
10/04 10:12, 62F
→
10/04 11:18, 7年前 , 63F
那是兩個月前的事，後來都是一小時點個5~20次
10/04 11:18, 63F
→
10/04 11:19, 7年前 , 64F
我還手機點勒Y
10/04 11:19, 64F
→
10/04 11:19, 7年前 , 65F
一天點不到三四小時
10/04 11:19, 65F
推
10/04 13:16, 7年前 , 66F
所以你全部都用手點 沒用程式抓的話也會沒資料?
10/04 13:16, 66F
→
10/04 17:32, 7年前 , 67F
對阿，手機是要怎麼用程式點...T___T
10/04 17:32, 67F
→
10/04 17:32, 7年前 , 68F
又不是加藤鷹
10/04 17:32, 68F
推
10/04 20:37, 7年前 , 69F
你這麼厲害何不自己去證交所抓？
10/04 20:37, 69F
→
10/04 20:37, 7年前 , 70F
不過我可以告訴你證交所也會ban人
10/04 20:37, 70F
推
10/04 21:25, 7年前 , 71F
證交所/櫃買中心還好 150~180分鐘內可以各抓完約
10/04 21:25, 71F
→
10/04 21:26, 7年前 , 72F
800檔左右，不會被踢 亂數取10~15秒每檔時間間隔
10/04 21:26, 72F
→
10/04 21:27, 7年前 , 73F
當然有時候抓下來的csv檔會是空的，程式自動偵測再
10/04 21:27, 73F
→
10/04 21:27, 7年前 , 74F
抓就好
10/04 21:27, 74F
→
10/04 21:28, 7年前 , 75F
我相信可以用更短的時間間隔 但我不想激怒證交所XD
10/04 21:28, 75F
→
10/04 23:22, 7年前 , 76F
我厲害就不用花錢了....
10/04 23:22, 76F
‣ 更多 bero 的文章
文章代碼(AID): #1PqvlBhc (Stock)
討論串 (同標題文章)
本文引述了以下文章的的內容：
完整討論串 (本文為第 2 之 2 篇)：
排序： 最舊先 | 最新先 | 留言數
在新視窗開啟完整討論串 (共2篇)
Stock 近期熱門文章
更多 近期熱門文章 >>
PTT職涯區 即時熱門文章
更多 即時熱門文章 >>
‣ 更多 bero 的文章
文章代碼(AID): #1PqvlBhc (Stock)