large-data

    -1热度

    1回答

    我试图输入一个很长的命令行参数(大概1000-2000个字符),每当我使用cin,getline,scanf或任何类型的流读者,我的执行停止。我正在使用XCode版本7.2.1(7C1002)。这是我的代码: int main() { string S = ""; cin >> S; cout << S; return 0; } 这是我一直在测试的输入

    1热度

    1回答

    我试图通过大量的Ruby哈希(@hash)已经可在我看来,回到我的控制器额外的处理。哈希来自同一个控制器,但它将通过不同的操作进行处理。 有大约从View传递变量(散列或其他方式)使用params哈希表来控制堆栈溢出的几篇文章,他们的工作很好,但所产生的HTTP GET请求非常长(对我来说),而且往往一'414 Request-URI太大'错误是由Apache抛出的。 这里是我在我看来代码: <%

    0热度

    2回答

    我想获取最近添加的10条记录和最新记录。 我尝试使用可放大的游标,但它花了我太多的时间,因为它必须在收集结束之前扫描整个集合以等待数据。 { "_id" : ObjectId("56fe349d0ef0edb520f0ca29"), "topic" : "IoTeam/messages/", "payload" : "20:15:04:01:12:75,-127.00

    3热度

    1回答

    我在处理一个非常大的MongoDB集合(1900万个文档)时遇到了一些问题。 当我简单地遍历集合时,PyMongo似乎放弃了10,593,454个文档。这似乎是相同的,即使我使用skip(),集合的后半部分似乎在编程上无法访问。 #!/usr/bin/env python import pymongo client = pymongo.MongoClient() db = client['

    4热度

    2回答

    我有一个MyISAM表(10M行,3.5G,规划将达到80M〜),我总是无法将其转换为InnoDB的。 我想: ALTER TABLE - 它失去了2分钟后连接。也许我做错了。 mysqldump - 尝试创建转储,然后将ENGINE=MyISAM更改为ENGINE=InnoDB。 它开始很好,但由于中行的新表数量的增长(〜3M),它变得越来越慢,最后几个小时后超时(--reconnect为ON)

    0热度

    1回答

    我必须在1100/1100的网格中显示64/64位图,但滚动并不平滑。显示这样的图像数据的最佳方式是什么?

    1热度

    1回答

    我正在计算Excel上的大型数据集的统计数据,并且由于数据集大小而遇到一些问题。 看起来VBA可能是要走的路,因为复制AVERAGEIF和STDDEV阵列函数跨越数据,这个大小会导致很长的计算时间。欣赏可能在此使用的解决方案或代码。 目标: 要计算统计信息(avg,标准偏差,z分数)条件2点的标识符(例如,在01/01/10所有高度的平均值) 能够处理大的数据集(100K +数据点) 示例数据:

    0热度

    1回答

    如何从305列和865行的矩阵R中吸取热图 我为矩阵编写的代码是 nba <- read.csv("mydata.csv", sep=",") row.names(nba) <- nba[,1] nba <- nba[,2:865] nba_matrix <- data.matrix(nba) nba_heatmap <- heatmap(nba_matrix, Rowv=NA, Co

    0热度

    1回答

    我在使用实体框架6处理大量数据时遇到了麻烦。当我尝试从数据库获取数据时,会发生超时错误。我只是包括2个额外的表到我的查询。我的意思是我加入了3张桌子,其中一张现在是空的。 (ORDERS,ORDER_DETAILS,PEOPLE) ORDERS表有385K条记录,而且人有400K条记录。我也没有得到所有的记录。我只为一页记录了25条记录。 (我正在使用分页。) 这是我的示例代码。 15秒后,它会发

    0热度

    1回答

    我有一个包含近10000行和10列的大型数据集。我想用rpart软件包对这个数据集进行分类。但每列有许多(超过50)类。所以R只是挂起。 我有什么选择来限制数据范围或减少每列中的类数?