首页
注册
登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请
登录
V2EX 提问指南
广告
V2EX
›
问与答
问一个面试题。。
supman
·
2015-04-20 23:40:48 +08:00
· 1589 次点击
这是一个创建于 3442 天前的主题,其中的信息可能已经有所发展或是发生改变。
给一段输入文字,统计所有2-gram及出现次数。dataset有100G怎么办?你有100台32-bit机器(4G内存),怎么分发给100台机器处理?瓶颈在哪里?
dataset
32-bit
2-gram
1 条回复
•
2015-04-21 17:15:50 +08:00
1
mengzhuo
2015-04-21 17:15:50 +08:00 via iPhone
不是排序就简单了
按id分呗
100台分别一台一个g
然后分别搜索
加上启示的index
搞定
关于
·
帮助文档
·
博客
·
API
·
FAQ
·
实用小工具
·
1249 人在线
最高记录 6679
·
Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 24ms ·
UTC 17:51
·
PVG 01:51
·
LAX 10:51
·
JFK 13:51
Developed with
CodeLauncher
♥ Do have faith in what you're doing.