【.com原稿】2016年11月25-26日,由.com主办的WOT2016大数据技术峰会在北京粤财JW万豪酒店隆重举行。自2012年以来,WOT品牌大会秉承“专注技术,服务技术人”的理念,已成功举办了12届。不仅积累了大量的专家资源,更得到了IT从业者和技术爱好者的认可和好评。成为行业内技术共享和网络发展的重要平台。在WOT2016大数据技术峰会物联网主题环节,福建星睿阁软件有限公司高级技术顾问发表演讲《Sinoregal 时间序列(TimeSeries) -海量数据应用》。会后,记者就目前流行的海量计算和数据库与他进行了详细的交流。以下为专访分享。海量计算应用越来越广泛星瑞格软件高级技术顾问杨宇平星瑞格软件杨宇平先生也曾在IBM工作多年,主要从事数据领域相关工作。目前星锐阁在做国内高端数据库,包括一些信息安全相关的产品和一些技术工作。谈到海量计算,杨总认为这是一个比较新的技术。其实大家更多的是处于探索阶段。海量计算不能简单的看成是数据量,更多可能取决于客户的业务场景。事实上,似乎这个单一的技术平台需要解决客户的所有问题。这似乎越来越不可能了。应根据业务的实际需求,推广越来越多的不同架构来解决实际问题。他认为,海量计算的更多应用将出现在金融和电信等一些领域。另外,互联网天然就有这种海量的计算基因,相当于数据的基础。这些都将是未来重要的领域和发展方向。如何通过数据库处理海量数据?据星锐阁软件高级技术顾问杨玉平介绍:“目前,时序大数据的存储和处理多采用关系型数据库,但由于先天的劣势导致无法高效存储和查询数据。时间-系列大数据解决方案采用特殊的存储方式,使时序大数据高效存储,快速处理海量时序大数据,是解决海量数据处理的重要技术。该技术采用特殊的数据存储方式,大大提高了时间相关数据的处理能力,与关系型数据库相比,其存储空间减半,查询速度大大提高。”同时,他认为时序函数优越的查询性能远超关系型数据库,非常适合物联网中的分析应用。据了解,国豪软件的国豪DS数据库是解决海量数据处理的一项重要技术是时间序列(TimeSeries),它采用了一种特殊的数据存储方式(列存储技术),大大提高了海量时间数据的处理效率。与关系型数据库相比,其存储空间减半,查询速度提高。高效存储和处理海量数据的能力对于华鼎DS计时解决方案至关重要。SinoregalSoftware的SinoregalDS在物联网上的应用是结合云端和大数据分析架构。数据由前端传感设备采集,通过网络传回云端处理中心。控制信息经过分析后返回给控制器或发出警告,进行各种精细或精细的实时处理,或通过大数据分析模型将收集到的信息分析成具有特殊意义的数据。杨玉平先生在发言中提到了几个案例。一种是车联网,主要用于路试。通过对部分路试结果的分析,为今后的生产带来一些思考。此外,国家电网等行业案例也开始应用海量计算。开源和商业数据库各有特点。谈到开源数据库,杨总说:互联网确实会走到整个IT的前端,包括一些新技术。我昨天听说,比如百度,它的数据可能在万亿级别。更适合海量的互联网数据。那么Starrig其实体现了它结构化或者半结构化的价值,它的密度会比开源数据库高,相当于热数据或者暖数据。在这方面,商业数据库有更好的表现。而且开源数据库也不是全部开源,后期对人员开发和成本的考虑比较全面。商业数据其实更多的是为用户提供稳定、可靠、高效的产品和持续的服务方式。因此,这两种数据库各有特点,用户应根据自己的技术实力和应用进行选择。【原创稿件,合作网站转载请注明原作者和出处为.com】
