代码之家 › 专栏 › 技术社区 › IsmailS

从windowsazure平台上的第三方web服务异步拉取数据

azure-worker-roles azure-storage azure

IsmailS · 技术社区 · 15 年前

我想从不同的第三方API web服务中提取大量数据,并将其存储在一个临时区域(这是我现在要决定的),然后根据需要将其逐个移动到我的应用程序数据库中。

我想知道我可以用Azure平台来实现上述功能吗?使用Azure平台执行此任务有多好?

如果要拉取的数据量很大,并且拉取的频率很高,即可能是半小时或2000个不同用户每小时拉取一次,该怎么办?

如果我必须在Windows服务器上实现它,那么我知道我将使用Windows服务来实现它。但我不知道如果有可能的话,如何在windowsazure平台上做到这一点?

2 回复 | 直到 15 年前

David Makogon 15 年前

假设您托管您的服务、存储和sqlazure在同一个数据中心(通过适当地设置关联性),您只需在从web服务提取数据时支付带宽费用。从表存储中检索或插入sqlazure不需要带宽费用。

Rinat Abdullin 15 年前

在windowsazure中,通常是用于承载云处理的工作角色。为了完成您的任务,您需要自己实现这个消息传递/调度基础设施,或者使用类似于 Lokad.Cloud 或 Lokad.CQRS

我们使用洛卡德云用于数十万系列和Lokad.CQRS公司允许按计划可靠地检索和同步数百万个产品。

推荐文章

BPengu · 发现运算符-eq的操作数无效

1 年前

Scott · Terraform Azure包含带有子网部署的NSG

1 年前

akaparadox · 使用Microsoft Entra(Azure AD)获取SPA应用程序的刷新令牌

1 年前

nop · 如何在本地环境中加载secrets.json而不是在ASP。NET核心?

1 年前

Amit Kanala · 我尝试在microsoft outlook日历中创建事件,但出现错误,访问令牌验证失败。无效受众

1 年前

Adnane Bady Soussi · 我试图更新我在代码中通过graphapi创建的一个现有用户,但我从azure graphapi返回了403错误

1 年前

Luca · 问题/如何使用GRAPH API获取我的SharePoint网站的文档库

1 年前

VivekAnandChakravarthy · 在azure逻辑应用程序标准vs代码中以设计器身份打开工作流时出错

1 年前

Romeo · 密钥保管库机密问题-防火墙已打开,您的客户端IP地址无权访问此密钥保管库

1 年前

T McKeown · 您是否可以使用Azure API/M调用基于WCF SOAP的端点?

2 年前