当前位置:首页 > 开发 > 互联网 > 正文

数据采集高并发的架构应用

发表于: 2015-03-25   作者:3golden   来源:转载   浏览:
摘要: 问题的出发点:          最近公司为了发展需要,要扩大对用户的信息采集,每个用户的采集量估计约2W。如果用户量增加的话,将会大量照成采集量成3W倍的增长,但是又要满足日常业务需要,特别是指令要及时得到响应的频率次数远大于预期。       &n
问题的出发点

         最近公司为了发展需要,要扩大对用户的信息采集,每个用户的采集量估计约2W。如果用户量增加的话,将会大量照成采集量成3W倍的增长,但是又要满足日常业务需要,特别是指令要及时得到响应的频率次数远大于预期。
         注:公司架构采集.NET平台架构。

技术障碍:


     1. 面对用户量的增长,记录数2W倍的增长,如何保证这些记录能够在比较快的时间内进入存储介质。

   2. 应对用户量的增长,如何在规定的时间内完成采集,增加硬件设备处理能力还是使用更多的服务器来处理请求。

     3. 服务器的增长,是否能够支持现有的扩展能力。

     4. 服务器下发任务给客户端,采集指令易堵塞,造成假死现象。

架构实现?

数据采集高并发的架构应用

  • 0

    开心

    开心

  • 0

    板砖

    板砖

  • 0

    感动

    感动

  • 0

    有用

    有用

  • 0

    疑问

    疑问

  • 0

    难过

    难过

  • 0

    无聊

    无聊

  • 0

    震惊

    震惊

编辑推荐
(Redis的应用) 问题的出发点: 最近公司为了发展需要,要扩大对用户的信息采集,每个用户的采集量
问题的出发点: 最近公司为了发展需要,要扩大对用户的信息采集,每个用户的采集量估计约3W。如果用
各位,最近公司要上一个互联网应用,没有具体要求,主要有三个要求: 1,第一版本期限很短,只有三个
各位,最近公司要上一个互联网应用,没有具体要求,主要有三个要求: 1,第一版本期限很短,只有三个
各位,最近公司要上一个互联网应用,没有具体要求,主要有三个要求: 1,第一版本期限很短,只有三个
各位,最近公司要上一个互联网应用,没有具体要求,主要有三个要求: 1,第一版本期限很短,只有三个
各位,最近公司要上一个互联网应用,没有具体要求,主要有三个要求: 1,第一版本期限很短,只有三个
转自:http://www.cnblogs.com/Ihaveadream/archive/2008/12/21/1359247.html Web2.0的兴起,掀起了
原文http://www.blogjava.net/jinfeng_wang/archive/2010/04/15/318434.html http://blog.s135.com/
本文出自:http://blog.s135.com/post/385.htm   曾经在七月,写过一篇文章──《基于Sphinx+MySQ
版权所有 IT知识库 CopyRight © 2009-2015 IT知识库 IT610.com , All Rights Reserved. 京ICP备09083238号