[JAVA高手入] 幾億個item要點先fit到入2gb heap space?

213 回覆
5 Like 26 Dislike
2022-08-12 20:21:46
2022-08-12 20:24:54
巴打可唔可以講解多啲
你話
咁睇似乎佢唔care你個file嘅format? (因為write同read好似都係你寫)
只要巧妙哋寫落個file裡面,到你真係要用返file裡面嘅data,個read method其實係唔需要即時從file load晒入memory嘅

其實我唔係你講緊咩
我唔係CS底 好多野都唔識
2022-08-12 22:35:25
無人講inputdata signature
2022-08-12 23:30:10
2022-08-12 23:32:21
未必
因為有可能嗰standard difference of MSE好小
2022-08-12 23:40:14
2022-08-13 00:08:23
2022-08-13 00:28:47
2022-08-13 01:26:37
Four decimal digits 即是10000 要14個bits
都要4gb
不過 symmetric 所以要2gb 多少少
之後就要creative
星期一過嚟跪喺度
2022-08-13 02:05:13
creative個part搞唔掂啊

最撚on9係 如果行唔到 直接零分
2022-08-13 02:11:09
Compression
2022-08-13 02:11:37
樓豬個hashmap淨係放有value既data點會爆
2022-08-13 02:21:25
仲要有 coordinates wo
2022-08-13 04:51:35
你個course有無教svd/pca?
2022-08-13 05:27:57
無....

問TA有無reference pape可以參考下
佢條仆制岩岩剩係叫我睇:
https://introcs.cs.princeton.edu/java/40algorithms/

2022-08-13 07:09:08
coordinates試下用一個intstore晒
不無小補
2022-08-13 07:09:37
仲要有 coordinates wo
coordinates試下用一個int store
不無小補
2022-08-13 08:14:39
Round to 1/4096 得唔得
12 bit +1bit正負
13bit * 50000 * 49999 / 2 =1.89GB
2022-08-13 08:52:24
2022-08-13 10:17:39
你做次pca ,clean下data先
都有機會要分批做
我就咁睇你hash maps 已經最fit,要汁方向都係cut data
、Round 數…
點解咁講因為最大效果係pca ,cut data
之後果啲又難做,效益又低
2022-08-13 10:42:24
樓上咪got creative implement左個 on the fly 既 matrix
雖然我完全睇唔明
2022-08-13 11:45:57
Save 低個input 再on demand 計
2022-08-13 16:57:54
2022-08-13 17:00:34
Sparse matrix?
2022-08-13 18:54:14
吹水台自選台熱 門最 新手機台時事台政事台World體育台娛樂台動漫台Apps台遊戲台影視台講故台健康台感情台家庭台潮流台美容台上班台財經台房屋台飲食台旅遊台學術台校園台汽車台音樂台創意台硬件台電器台攝影台玩具台寵物台軟件台活動台電訊台直播台站務台黑 洞