紧急求助一下，-新大陆-万维论坛-万维读者网（电脑版）

设万维读者为首页

简体

繁体

手机版

版主：

万维读者网 > 新大陆 > 帖子

紧急求助一下，

送交者: 黑石头 2016年04月05日16:17:58 于 [新大陆] 发送悄悄话

抓取billion数据有什么技巧或者注意事项吗？只处理过million的。

另外，在in-memory这块儿，比如说，公司是例行任务，某些工作安排在周一，某些工作安排在周二，反正都是流水线作业，那么，可不可以在周一把某些table放在memory,周二把另外一些table放在memory？

0%(0)

0%(0)

　　

周一把某些table放在memory,周二把另外一些tabl - k19 04/05/16 (136)

　　　　

内存的问题是我被搞烦了，胡乱提的　　/无内容 - 黑石头 04/05/16 (136)

　　　　　　

in-merory 就解决你的速度问题，唯一问题是如果机器崩 - mingcheng99 04/05/16 (142)

　　　　　　　　

其实现在的DB，为了提高速度，都有部分数据放在 - mingcheng99 04/05/16 (142)

　　　　　　　　　　

谢谢你 - 黑石头 04/05/16 (127)

　　　　　　

要不我怎么说你自己都没搞清。　　/无内容 - k19 04/05/16 (135)

　　　　　　　　

你搞定了。我就不说了。不过是看你急才说的。　　/无内容 - k19 04/05/16 (130)

　　　　　　　　　　

还有 - 黑石头 04/05/16 (126)

　　　　　　　　　　

我是发散性思维方式，习惯了就好　　/无内容 - 黑石头 04/05/16 (115)

　　

要搞定这个应该有方法。不过你不把前提说明白，那怎么做？　　/无内容 - k19 04/05/16 (115)

　　　　

关于内存，是我的一个想法。不知道各数据库是否可以处理　　/无内容 - 黑石头 04/05/16 (203)

　　　　　　

对timesten５００G 的数据只要2 or 3G的RAM - mingcheng99 04/05/16 (137)

　　　　　　　　

可以周期性变化么？ - 黑石头 04/05/16 (153)

　　　　　　　　　　

sure - mingcheng99 04/05/16 (142)

　　　　　　　　　　　　

太感谢了　　/无内容 - 黑石头 04/05/16 (124)

　　　　　　　　　　　　　　

你这东西这样搞。简直是大笑话。MC是个蠢逼来着。 - k19 04/05/16 (148)

　　　　　　　　　　　　　　　　

这只是个闲问题。不归我管。只是随口问问　　/无内容 - 黑石头 04/05/16 (132)

　　　　　　　　　　　　　　

你还是找专家帮助你把。你好像没搞清你究竟该干啥。　　/无内容 - k19 04/05/16 (119)

　　　　

关于比令数据 - 黑石头 04/05/16 (211)

　　

你用in-memory玩billion数据。的确是MC的好学 - k19 04/05/16 (148)

　　　　

没写明白，两个问题　　/无内容 - 黑石头 04/05/16 (133)

　　

好像不行，嘿嘿　　/无内容 - 老黑鱼 04/05/16 (131)

　　　　

billion数据有什么技巧吗？着急inginging　　/无内容 - 黑石头 04/05/16 (141)

　　　　　　

只是你MC老师显身手的好时候了。他不会见死不救吧。　　/无内容 - k19 04/05/16 (123)

　　　　　　　　

我的笨办法也可活命的　　/无内容 - 黑石头 04/05/16 (132)

　　　　　　　　　　

我感觉你没把问题想清楚。　　/无内容 - k19 04/05/16 (139)

　　　　　　　　　　　　

头大，快虚脱了　　/无内容 - 黑石头 04/05/16 (130)

　　　　　　　　　　　　

以前只要抓对就可认，现在分分秒秒里抢效率　　/无内容 - 黑石头 04/05/16 (125)

　　　　　　　　　　　　　　

只读还是要写？多少数据。很多都必要知道的。分分秒秒。你搞笑吧 - k19 04/05/16 (124)

　　　　　　　　　　　　　　　　

没什么。就是抓的时候速度快些。　　/无内容 - 黑石头 04/05/16 (182)

　　　　　　　　　　　　　　　　　　

你要抓多少数据？一行是多少byte时间在什么范围内。 - k19 04/05/16 (133)

　　　　　　　　　　　　　　　　　　　　

快完成了 - 黑石头 04/05/16 (141)

　　　　　　　　　　　　　　　　　　　　　　

如果是这样，搞成1,2小时应该很容易。　　/无内容 - k19 04/05/16 (128)

　　　　　　　　　　　　　　　　　　　　　　　　

读懂原来的逻辑才头疼　　/无内容 - 黑石头 04/05/16 (127)

　　　　　　　　　　　　　　　　　　　　　　　　

一步一步一点一点调，那么长，一点儿都不能错　　/无内容 - 黑石头 04/05/16 (115)

　　　　　　　　　　　　　　　　　　　　　　　　　　

多少行的码？ - k19 04/05/16 (116)

　　　　　　　　　　　　　　　　　　　　　　　　　　　　

七八千　　/无内容 - 黑石头 04/05/16 (119)

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　

什么code？　　/无内容 - k19 04/05/16 (121)

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　

SAS 　　/无内容 - 黑石头 04/05/16 (145)

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　

估计R会超过SAS的。哈哈　　/无内容 - k19 04/05/16 (172)

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　

很灵活的开源软件　　/无内容 - 黑石头 04/05/16 (120)

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　

这个我是老外。哈哈。　　/无内容 - k19 04/05/16 (132)

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　

不过是些个sql 语句而已。中间插两朵小花儿。　　/无内容 - 黑石头 04/05/16 (139)

　　　　　　　　　　　　

你觉得呢？　　/无内容 - 黑石头 04/05/16 (123)

　　　　　　　　　　　　　　

说实话。我看你说的，感觉这是一个比较简单的问题。没那么麻烦。　　/无内容 - k19 04/05/16 (117)

　　　　　　　　　　　　　　　　

很多数据本来就cached进memory了。 - k19 04/05/16 (149)

	实用资讯

回国机票$360起 | 商务舱省$200 | 全球最佳航空公司出炉：海航获五星
海外华人福利！在线看陈建斌《三叉戟》热血归回豪情筑梦 高清免费看无地区限制

一周点击热帖

一周回复热帖

历史上的今天：回复热帖

2015:	游：摩根城/黑水瀑布/...（1，完）
2014:	美国“入土为安”花费多少
2013:	高娓娓：中国小学生留学美国的切身经历
2013: