一亩三分地论坛

 找回密码
 获取更多干货,去instant注册!

扫码关注一亩三分地公众号
查看: 318|回复: 4
收起左侧

[BigData] 求教一道大数据排序的题

[复制链接] |试试Instant~ |关注本帖
pengpengche 发表于 2016-8-6 04:59:40 | 显示全部楼层 |阅读模式

注册一亩三分地论坛,查看更多干货!

您需要 登录 才可以下载或查看,没有帐号?获取更多干货,去instant注册!

x
100MB内存,1000MB数据,数据可以是任意类型,但是必须统一,要求排序。。。想不出特别完美的解法,有没有大神帮忙解答一下,我目前就觉得遍历,用hashfunction先把数据分类到是个不同文件,然后分别排序,相加。。感觉不太对
111180611 发表于 2016-8-6 05:30:51 | 显示全部楼层
查一下 External Sort
回复 支持 反对

使用道具 举报

mnmunknown 发表于 2016-8-6 05:34:27 | 显示全部楼层
参考下这两个帖子~

海量数据处理
http://blog.csdn.net/v_july_v/article/details/7382693

外部排序
http://blog.csdn.net/v_JULY_v/article/details/6451990
回复 支持 反对

使用道具 举报

 楼主| pengpengche 发表于 2016-8-6 05:35:47 | 显示全部楼层
111180611 发表于 2016-8-6 05:30
查一下 External Sort

明白了,太谢谢啦
回复 支持 反对

使用道具 举报

 楼主| pengpengche 发表于 2016-8-6 05:36:04 | 显示全部楼层
mnmunknown 发表于 2016-8-6 05:34
参考下这两个帖子~

海量数据处理

太谢谢啦,解决啦
回复 支持 反对

使用道具 举报

本版积分规则

请点这里访问我们的新网站:一亩三分地Instant.

Instant搜索更强大,不扣积分,内容组织的更好更整洁!目前仍在beta版本,努力完善中!反馈请点这里

关闭

一亩三分地推荐上一条 /5 下一条

手机版|小黑屋|一亩三分地论坛声明 ( 沪ICP备11015994号 )

custom counter

GMT+8, 2016-12-8 18:23

Powered by Discuz! X3

© 2001-2013 Comsenz Inc. Design By HUXTeam

快速回复 返回顶部 返回列表