【资料】网络监控:从大数据到小型开源情报分析,一种实用、低成本Web爬虫的实现
2021-06-28 12:22:18 Author: mp.weixin.qq.com(查看原文) 阅读量:59 收藏

一个可供研究开源情报分析系统公司参考的网络监测项目:

对互联网上自由流通的信息所产生的具体风险的识别和评估往往不能令人满意、效率低下和费用高昂。监测网络意味着直接处理大数据,这带来多种挑战:需要管理的信息太多,用于集中研究的信息有限,重复和令人沮丧的手工工作,及时获得信息的问题,以及对获得的结果分配优先级。

应当指出,网络监测过程把现有服务集中于数据领域,与通用搜索引擎相比,这可以提高研究的质量。有专门的搜索引擎、门户网站和社交网络,它们配备有自己的内部研究和聚合器。使用它们使得有可能从一般化的人工搜索过程(昂贵、低效、模糊、延迟)转向更有针对性的服务(自动、经济、智能、准时),这有助于发现业务目标的外部风险。因此,经过适当过滤、聚合和按顺序排列的结果信息可以被集中,易于分析,并且质量更好。

为了演示所有这些,本文描述了一个网络监测项目,该项目被证明是可持续的,并且足以满足监测任务的范围。它成立于2016年,在一家地理分散的公司实施,在汽车行业提供多种多样的产品。在互联网上识别对企业具有潜在意义的信息,如果纯粹通过手工研究加以管理,则结果是无效的。

以下是原文中的一些附图:

原文PDF文档及机器翻译文档已上传知识星球

长按识别下面的二维码可加入星球下载

里面已有近千篇资料可供下载

越早加入越便宜哦


文章来源: http://mp.weixin.qq.com/s?__biz=MzI2MTE0NTE3Mw==&mid=2651123118&idx=1&sn=bfb5e352d04a59615911e6742c3cd9e2&chksm=f1ae9a94c6d9138207fa7fda9663dc5b3a549b46c18c8a0fd0e6a82e1af171d5fe3175a51be8#rd
如有侵权请联系:admin#unsafe.sh