liucudliucud 最近的时间轴更新 liucudliucud 最近的时间轴更新 |
liucudliucudV2EX 第 302509 号会员，加入于 2018-03-22 16:45:16 +08:00 |
liucudliucud 最近回复了
2018-04-15 17:47:30 +08:00 回复了 unboy 创建的主题 › 问与答 › 1000 万行文本数据如何做筛选？ |
传到集群上用任务搞，9 亿行都没问题
2018-04-10 20:36:01 +08:00 回复了 luozhiyun 创建的主题 › 程序员 › 程序员选 x1c 2018 还是 macbook pro |
无脑 mbp，根本不用想
2018-04-03 14:40:23 +08:00 回复了 palmers 创建的主题 › 北京 › 请问在亦庄上班的 V 友们, 都在那些地方租房呢? 第一次到亦庄这边, 谢谢大家啦! |
上海沙龙吧，去哪都比较方便
2018-03-31 22:10:20 +08:00 回复了 Trinea 创建的主题 › 酷工作 › [滴滴出行-北京、杭州] 前端/算法/服务端/Android/iOS/算法/等各类职位大量招聘，月 20k-55k，年 16 薪，优秀另有期权 |
滴滴巨坑，慎重
2018-03-30 21:00:09 +08:00 回复了 lihongjie0209 创建的主题 › 问与答 › 使用 Java 如何快速创建三百万临时文件用于测试, 大小无所谓 |
搭建一个 hadoop 集群
2018-03-30 08:56:53 +08:00 回复了 anonymoustian 创建的主题 › Hadoop › Spark 如何将一个 RDD 分成多个 RDD？ |
拆 rdd 这种一个两个还可以，多了效率很低的，强行串行了
2018-03-30 08:55:46 +08:00 回复了 anonymoustian 创建的主题 › Hadoop › Spark 如何将一个 RDD 分成多个 RDD？ |
把数据 flatten 再详细写 reduce 方法呗
可以详细说下需求
类似于 name type score
可以详细说下需求
类似于 name type score
2018-03-29 23:19:08 +08:00 回复了 anonymoustian 创建的主题 › Hadoop › Spark 如何将一个 RDD 分成多个 RDD？ |
不用拆，放在一起处理
Select Language