闪电车情-汽车行业全网舆情智能监测数据分析中台
当前版本-3.6.0.1
发布时间 2020-04-17
- 大数据平台
- 本版本对爬虫及数据平台进行了较多开发优化,具体内容如下:
- 1、新增了回复数采集量最大2000条的限制,爬虫将会把最新的2000条替换当前数据
- 2、新增了运行时间统计通知,用于判断爬虫是否长时间占用主线导致拥堵
- 3、新增了运行状态统计3次,并使用apscheduler库替代原有方案
- 4、新增了车型库截止4月的新款车型
- 5、优化了汽车之家爬虫优化、融合了分散的插件
- 6、新增了插件在特定异常情况下的报警机制
- 7、优化了微信公众号机器人自动处理异常的能力
- 8、新增了爬虫运行状态统计插件对于每日监控新增、数据量骤减项目的统计
- 9、新增了入口地址优先级字段,除了自动调整优先级外,可以人工置顶某些项目必须在指定时间内去更新
- 10、优化了热点跟踪的算法,本次主要针对加权值ab和衰减曲线进行了微调
- 11、修复了百家号产品标签添加错误的问题
- 产品分析
- 新增了产品的竞争力排名,更清楚的表达产品在竞品中的竞争评级
- 热点追踪
- 优化了某些情况下热点追踪结果没有根据筛选条件生效的情况
- 全文搜索
- 优化了全文搜索的产品选择体验,新增分组和竞对标识
- 系统界面
- 修复了若干系统界面的UI问题