原标题:快速识别违规交易行为 证券监管引入人工智能

改变未来的“黑科技”系列之三

AI人工智能大军即将征战证券监管沙场。据路透社报道,华尔街两家交易所计划在未来几个月内推出AI人工智能监管工具,交易监管机构希望通过人工智能快速、智慧地识别市场交易违规。美国金融业监管局明年将开始测试这批AI监控软件,而纳斯达克和伦敦证券交易所则在今年年底启用这项技术。

“中国证券市场也已着手准备用AI进行监控。”人民大学大数据统计实验室主任、柏睿数据科技公司董事长兼CTO刘睿民博士向记者透露,公司正在与某交易所合作,通过对大数据时时甄别高频交易、量化交易等高速情况下发生的不合规交易。

备战AI证券监管围棋人机大战里AlphaGo战胜围棋高手李世石后,市场关心,人工智能可否适用于“炒股”?业内人士介绍,人工智能难以预测股市,但是可以用于金融安全。

“以前需要调查人员花费几年时间交叉引用历史交易数据,现在AI人工智能技术瞬间就能完成。”刘睿民介绍,人工智能正被应用于解决高频交易引发金融安全问题。

人工智能诞生背景是“后大数据时代”,基于数据经验传统方法无法“查杀”老鼠仓,所以华尔街引入AI人工智能系统进行监控。

国内柏睿数据也在积极尝试这一领域。刘睿民透露,在某交易所复杂交易环境中,借助Hive1.2、Tez0.83、RapidsDB2.63、Spark 1.6对其进行测评结果显示,测试环境随着查询节点不同,表现能力各不相同。在Query10查询过程中,Hive 、Tez、 Spark速度几乎持平;但RapidsDB这匹黑马却只用了1ms,秒杀其他测试环境。事实证明,在小数据量情况下测试结果是传统数据库2倍,而在大数据量情况下则是50倍至100倍。

早年留学海外,刘睿民曾加盟惠普实验室主攻海量并行MPP数据库,曾先后参与Nonstop SQL/MP、SQL/MX及Neoview的实现。刘睿民2014年组建团队正式进军大数据MPP内存数据仓库引擎研究,并在硅谷、澳洲以及印度设立了研发中心,推出面向实时大数据分析领域高性能分析应用平台Rapids Data Platform,为行业客户提供从大数据存储到分析挖掘的完整解决方案。

据悉,柏睿数据早已经完成数千万级Pre-A融资,领投机构为蓝驰创投,而后信中利及浦发硅谷银行跟进。

进入内存数据库新蓝海

人工智能应用前提是数据处理能力的提升。近期国外爆发一场史无前例的网络攻击,就是数据库无法处理互联时代海量多渠道并发数据导致的悲剧。

“在大数据时代,人人都想多分一杯羹,但只有拥有海量能被处理、分析、使用数据,才能成为拥有未来数据。”业内人士指出,从大数据中“挖出金矿”,是真正考验核心硬技术阶段。

刘睿民告诉记者,互联时代数以亿计智能硬件连接到互联网,其数据量大到惊人,倘若不解决核心技术问题,未来此类事件,无论在国内还是国外都会频发,所以流数据库是解决问题的不二之选。

据悉,柏睿的RapidsDB内存数据库突破传统基于磁盘数据仓库技术,解决传统数据仓库难以分析结构化以外的数据难题,并充分利用内存高性能,通过线性扩展及整合方案为企业带来效益提升。

刘睿民透露,流数据库现在还是新概念,并没有大范围普及,但一些对技术前瞻性要求的行业如电讯、金融、政府客户已开始使用。

“大数据市场正处于爆发前夜。”刘睿民介绍,公司已收获若干千万元级别大单,其主要客户包括:国家电网、深交所、中国移动、中国联通、统计局等。

“中国本土内存数据库行业已走过试水期,正式进驻到国内外市场,国内市场需求呈现递增趋势”。刘睿民告诉记者,柏睿在海外市场也将有所突破。他们将和房利美基于分布式流数据内存数据库,在大数据实时分析领域深度合作。

业内专家预计,2016年国内大数据预计将突破千亿元市场规模,未来4年将呈爆发性增长,2020年大数据市场规模有望突破8000亿,本土内存数据库将进入新蓝海时代。

数据库市场迎来拐点

互联网时代,数据库企业不能局限于本土,需要在全球市场有一席之地。

传统企业级内存数据库尤其是MPP内存数据仓库由于技术壁垒非常高,市场一直由Oracle、SAP HANA、Teradata这3家国际数据库巨头牢牢把控。国内数据仓库领域,迄今为止还没有一家国产厂商在纯关系型MPP内存数据仓库方向上形成技术突围,只有在数据库技术上成功突围才能令中国数据仓库领域“诺曼底反攻”。

刘睿民预测,传统数据库已远远不能满足当前海量数据多渠道并发,“2016年我们的新型内存数据库将颠覆传统软件技术,进而改写由甲骨文雄霸数据库市场的历史。”刘睿民说。

据悉,面对海量数据多渠道并发时代,柏睿的RapidsDB内存数据库突破传统基于磁盘的数据仓库技术,解决传统数据仓库难以分析结构化以外数据的难题,并充分利用内存高性能,通过线性扩展及整合方案为企业带来大幅度显著效益提升。

事实上,国产数据库企业一直在赶超。在美国孟菲斯ISO/IEC JTC1/SC32“数据管理与交换”分技术委员会2016年全会上,中国代表团提交的大数据技术提案“SQL对MapReduce及与之相关的流数据处理的支持”各项指标准战胜美国、德国,获得SC32全会决议通过,即将成为2018国际数据库新国际标准。这是29年来中国首度在国际标准委员会独立提出技术提案并获通过。

权威专家认为,这充分说明中国技术业已全面突破国际大数据核心技术壁垒实现国产化,由中国自主研发的核心技术软件也将迎来更多话语权。中国内存数据库市场迎来新拐点。

作者:王荣