data-collection

-3热度

1回答

我正在尝试从知识网上的75,000篇文章中收集数据。所有数据可以在每篇文章的网页上查看。作为编程的绝对初学者，我不确定如何做到这一点，而不是手动。有没有我可以在R或任何其他平台上使用的代码直接从网页提取数据，而无需下载所有文章？

1热度

1回答

Py 2.7 arch：如何持久化多个服务器的HTTP/S并且不会收集多次发送的数据？

这是一个很复杂的问题，所以我会尽我所能在我的解释中表达清楚，不要给太多不必要的细节。去年我开发了一个python脚本。它抓取基本的系统数据并将其发送到HTTP/S服务器，如果用户选择这种服务器，它可以发回命令。去年这是一个很大的实验，看看哪些是有效的，哪些没有。测试公司内部的不同需求等等。但现在我对我们需要的东西有非常深刻的了解。所以我开始了我的第二版旅程。这个新版本的目的是保持功能，同时减少

1热度

1回答

带DBRef字段的MongoDB分片密钥？

我有一个包含DBRefs到根文档的集合。我有数以万计的文档链接到我的数据收集中的单个根文档。这就是为什么我选择不嵌套根文档的数据。 Data Collection: _id : Auto-Created ID ts : TimeStamp field_1 : Whatever ... field_n : Whatever root :

3热度

1回答

调试和跟踪Hotjar数据

最近，我们公司开始使用Hotjar来收集使用数据。由于这是我第一次使用该服务，因此我犯了一些错误，这使我寻找一种调试方法。在阅读官方文档，论坛，stackoverflow后，我什么也没找到。我必须做什么/修改以启用Hotjar中的调试？

0热度

1回答

从需要cookie的网站收集Python文章

我正试图从infoweb.newsbank.com的数据库中收集关于我在大学所做研究的文章。到目前为止，这是我的代码： from bs4 import BeautifulSoup import requests import urllib from requests import session import http.cookiejar mainLink = "http://inf

5热度

2回答

哪里得到数据来比较缓存算法

我不想比较真实数据上的缓存算法，比如LRU，SLRU，LFU等。这就是为什么我需要一些方法来生成真实的数据来比较缓存算法或从某些应用程序获取这些数据。

2热度

2回答

Android - Facebook SDK AppEventsLogger logEvent不起作用

谷歌搜索没有帮助我。我试图通过Facebook app events 推在Facebook上的仪表板数据我的代码是： AppEventsLogger logger = AppEventsLogger.newLogger(this); logger.activateApp(this, Utility.FACEBOOK_ID); logger.logEvent(AppEventsC

0热度

1回答

Appcelerator的钛的TableView花费很长的时间来加载

我有一个控制器，其中我有一个这样的表视图： <TableView id="reservedScroll" dataCollection="queue" dataTransform="transformFunction" dataFilter="reservedByDate" layout="vertical" > (some rows) </TableView> 创建这个控制器6对

0热度

1回答

Url没有在网页中返回正确的html（对于我的Java爬虫）

我想从网页上下载一些图像，为此我正在编写爬网程序。我测试了这个页面的几个抓取工具，但没有工作，因为我想。第一步，我收集了770+相机型号（parent_url）的链接，然后我想收集每个链接中的图像（child_urls）。但是，该页面的组织方式使得child_urls返回与parent_url相同的html。这里是我的代码，以收集相机链接： public List<String> html_c

-1热度

1回答

如何从云端全天候运行代码

我的目的是在几个月内全天候运行python代码，以通过API调用收集数据，并在满足特定条件时提醒我。我该如何做到这一点，而不是让我的笔记本电脑24/7全天候运行代码？在“云”中有没有办法做到这一点？最好是免费的，但会考虑支付。简单也是一个优点。