寫左隻Web Crawler集中公營機構嘅職位空缺,你問我答

66 回覆
24 Like 2 Dislike
2017-06-17 23:14:29
樓主可唔可以分享下個api係點寫同埋點design?
覺得你呢個crawler幾得意想學下寫類似既野
2017-06-17 23:23:32
留名返工先用
2017-06-18 12:16:55
樓主可唔可以分享下個api係點寫同埋點design?
覺得你呢個crawler幾得意想學下寫類似既野

其實無乜特別,都係普通寫一個system流程
有Concept > POC (寫2-3隻Crawler 做prototype) > 定初步functional/UI spec(係我自已個腦到ONLY) > 改prototype > 比人睇下 > 改prototype > 比人睇下 > ... 改prototype > 改prototype > 做完
2017-06-18 12:25:18
好似唔錯,thanks
2017-06-18 12:31:22
樓主 細佬之前搞google search 比佢引左去captcha 404左 有無解決方法 用左useragent

樓主你個front-end web 有咩整


唔知你想/做過乜,大家冇乜野幫到你喎
同我唔suggest你同google鬥, 當玩下就無妨.

Frontend react+mdl. 都係用人地D boilerplate做底
https://github.com/kriasoft/react-static-boilerplate
2017-06-18 12:33:14
Yakoo

個名好7

係好7 . 不過當初我都覺得9gag個名好7, so...其實唔多重要
2017-06-18 12:37:30
backend java spring mvc?

spring boot web starter

點解用呢個,有咩好處

好問題!
I don't always pick the best technology, I pick the best of which I loved/interested in. 我以前份工一直係寫java+spring,但依家大部份係php。我一直想keep up返最新spring個發展,好自然就pick返spring。

因為其實得幾個entity冋api,明顯想lightweight,而spring boot starter web其實好易起,build出嚟一隻executable jar,simple enough。單純計起api,其實只係用左一個下午唔駛。

我好sure用laravel/express/django之類都可以同樣一樣快一樣function,所以到最後都係因為我係一隻java狗。


Springboot 好, 得閒 打下 kotlin 學定冇死,
另外可能你對jHipster有興趣
不過簡單web app, springboot 殺曬
I'm java 狗 too


多謝提議~ 不過其實我係Pure Java派, Scala我都唔想學
2017-06-19 00:16:39
樓主可唔可以分享下個api係點寫同埋點design?
覺得你呢個crawler幾得意想學下寫類似既野

其實無乜特別,都係普通寫一個system流程
有Concept > POC (寫2-3隻Crawler 做prototype) > 定初步functional/UI spec(係我自已個腦到ONLY) > 改prototype > 比人睇下 > 改prototype > 比人睇下 > ... 改prototype > 改prototype > 做完

樓主有無用crawler4j做底?定係純粹自己寫?其實基本係咪都係寫個method掟條url入去拎左d element再做scraping? 之後搵個model裝住d data咁就完成左個api?
新手學緊java想了解多d
希望樓主可以詳細d分享下
2017-06-19 13:48:37
樓主可唔可以分享下個api係點寫同埋點design?
覺得你呢個crawler幾得意想學下寫類似既野

其實無乜特別,都係普通寫一個system流程
有Concept > POC (寫2-3隻Crawler 做prototype) > 定初步functional/UI spec(係我自已個腦到ONLY) > 改prototype > 比人睇下 > 改prototype > 比人睇下 > ... 改prototype > 改prototype > 做完

樓主有無用crawler4j做底?定係純粹自己寫?其實基本係咪都係寫個method掟條url入去拎左d element再做scraping? 之後搵個model裝住d data咁就完成左個api?
新手學緊java想了解多d
希望樓主可以詳細d分享下


Yup, 就係Apache HttpClient攞完比Jsoup create document 再select elements咁簡單.
當然中間我自已Build起左d Abstract class define左d common part啦.
2017-07-21 15:56:22
過左一排終於有時間重新寫過隻Mobile App
網頁用React+MDL,寫返做ReactNative + react-native-elements易過借火,三五日搞掂

Android版已經上架. iOS要等有時間搞返好個 developer account先算
https://play.google.com/store/apps/details?id=com.yakoo.fjobs_app
2017-07-21 16:20:43
靠巴打個網搵到工 多謝巴打
2017-07-21 17:35:37
靠巴打個網搵到工 多謝巴打

恭喜晒
2017-07-21 17:40:15
好似推唔返個Post上水
lihkg有限制推舊post
吹水台自選台熱 門最 新手機台時事台政事台World體育台娛樂台動漫台Apps台遊戲台影視台講故台健康台感情台家庭台潮流台美容台上班台財經台房屋台飲食台旅遊台學術台校園台汽車台音樂台創意台硬件台電器台攝影台玩具台寵物台軟件台活動台電訊台直播台站務台黑 洞