分享

有几千万条数据,该使用什么架构?

pig2 发表于 2014-1-19 21:32:46 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 0 5281
有几千万条数据,一个句子一条数据,
根据输入的一句话来查询取得数据,
只根据匹配度来查询,不需要考虑语义,
我们应该用文件存储数据还是用非关系行数据库存储数据,
应该用什么技术取数据,都是句子能不能建索引,怎么建

没找到任何评论,期待你打破沉寂

hyj 发表于 2014-1-19 21:33:36
如果是实时的话,可以用内存数据库redis。
还可以 flume+kafka+storm,当日志处理
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条