【摘 要】
:
我国的证券市场不断的在发展繁荣,不断的有新的企业在国内上市,交易量也不断增长,其规模的扩大也推动着我国实体经济向前发展。然而由于政治、行业、舆情等大幅变化会对造成证券市场的波动,而证券市场具有联动、易发等特点会反作用于实体经济,阻碍着经济的发展。因此,有必要对当前我国证券市场风险的进行评估,实时对证券市场的异常行为进行监管,越早的发现证券市场的异常情况就可以越快的进行应对。而当今证券监管部门所面临
论文部分内容阅读
我国的证券市场不断的在发展繁荣,不断的有新的企业在国内上市,交易量也不断增长,其规模的扩大也推动着我国实体经济向前发展。然而由于政治、行业、舆情等大幅变化会对造成证券市场的波动,而证券市场具有联动、易发等特点会反作用于实体经济,阻碍着经济的发展。因此,有必要对当前我国证券市场风险的进行评估,实时对证券市场的异常行为进行监管,越早的发现证券市场的异常情况就可以越快的进行应对。而当今证券监管部门所面临的业务痛点:1)数据量大造成高时延,不能满足高速变化的丰富市场需求;2)异常检测规则的阈值依赖业务领域专家长期积累的业务经验,不能随着市场的变化及时修正。而随着分布式系统的成熟稳定,流计算技术的产生和近年来的不断发展,以及各种机器学习相等算法涌现,考虑构建基于流计算的证券数据流异常检测系统,设计了实时数据源接入、实时数据预处理、实时异常检测和实时异常推出四大模块,对证券数据流进行异常检测并达到实时的秒级告警,从而提高监管效率,确保异常发现的实时性。具体地,本文做了以下工作:首先,本文对交易系统产生的实时增长的证券数据进行分析,尝试了使用实时流计算框架对数据进行接入,设计了使用Kafka作为数据总线、流计算作为实现方法的整个系统构架。其次,基于Flink框架进行了实时数据源的接入和对数据进行实时的预处理设计和开发。接着,使用流计算支持依据专家的异常规则进行实时检测,尝试使用自回归移动平均模型和层级实时记忆脑皮质学习算法(HTM)针对证券数据流进行异常检测。最后,将输入源和异常结果实时持久化落地,将产生的异常结果通过订阅的方式进行推送。在测试方面,从功能性和非功能性两方面进行,给出测试用例并分阶段完成,除了对需求中功能上的保证外,还检测了系统的时延和可靠性。本系统实现了对实时证券数据流的实时异常检测,为市场监察部门提供了更快速的监管信息,并可为投资人进行预警。
其他文献
问题是思维的起点,也是创新的开端。学生能否提出问题,特别是能否自己独立提出问题显得非常重要。在中学化学教学中进行了培养中学生提问能力实践研究。通过实践发现,学生的
简要介绍了土体沉降引起的桩侧负摩阻力导致桩身下拽力和桩顶下拽位移的原因、力学机制以及工程危害性;总结了近年来国内外负摩阻力问题的现场试验、模型试验、数值模拟和理
<正>一、引言过去几年中,用户在应用上进行了大规模的投资,但随着应用的不断深化,如何保障应用系统能够稳定、高效率地运行,越来越受到用户的重视。IDC的统计数据显示,40%的
中学化学教材中的数据除了直接叙述外,还有线性图、柱状图、饼形图、表格、形象表达等呈现方式。在教学过程中应充分发挥数据的教学功能,去创设问题情境、激发求知欲望、培养
在整个蓝顶艺术节中,没有一个展览如同“蓝顶艺术群落开放展”一样如此鲜明地呈现出蓝顶的艺术特征聚落和地域特色。群落展的传统源自工作室开放展,它既是蓝顶精神的彰显,更
<正>11月16日起,《快递条例(征求意见稿)》公开征求意见。快递公司及从业人员以抛扔、踩踏或者其他危害快件安全的方法处理快件的,邮政管理部门可以责令停业整顿;泄露个人信
未成年犯罪是世界上任何一个国家都不可避免的问题,如何处置未成年犯是世界各国研究的重要课题,其中社区矫正是目前普遍认为处置未成犯的最佳选择。我国未成年犯社区矫正制度
在交警中,高速交警担负着比较特殊的职责,其主要的工作内容是高速交通安全,面对的是一些突发性的交通违法事件,甚至是危机事件,这就会对高速交警的心理产生比较大的压力,属于
针对北疆某大型水利工程中倒虹吸出口2个平面闸门的振动问题,采用防水耐压防腐的三轴振动加速度传感器和INV303数据采集仪器,构成多通道水下振动测试系统,通过改变闸门的开度
手性药物目前已成为国际上新药研究的热点。手性药物及其中间体的酶催化定向合成与传统的有机合成反应相比,所需条件温和,无需强酸强碱、高温高压等极端条件,可大大降低对设