当前位置: 首页 > 科技观察

物联网时代的大数据转型

时间:2023-03-19 00:48:51 科技观察

我们正在进入物联网时代,许多连接的设备将使用传感器/信号相互通信,这些设备预计会产生大量数据。处理大量数据(大数据)并从中生成可操作的见解将是一项挑战。公司正在投入大量资源来构建可以处理大量数据并从中获得洞察力的平台。物联网将产生无限量的数据,那么,这些平台是否仍然能够应对这种情况并处理从数千台设备收集的数据并且仍然具有成本效益?示例:今天Skyserver数据库Galaxy中有2亿条数据。SDSS包含超过150TB的数据,涵盖超过2.2亿个星系和2.6亿颗恒星。随着设备的准确性随着时间的推移而提高,它们的发现能力也在提高,从而生成更多PB的数据。我们是否会不断添加服务器、内存、硬盘和处理器来管理所有这些数据?为什么我们不能投入资源使设备智能化?操纵数据?例如,太空望远镜可以比较所有图像,并仅将一些具有新见解的图像发送到太空服务器。太空望远镜内置的某种机器学习可以帮助它从过去中学习并基于此产生可操作的见解……简而言之,在望远镜中安装一个大脑,将大数据转化为智能数据。在SkyServer上存储、管理和处理垃圾(大数据)对我们来说毫无意义,我们为什么要承担垃圾数据的传输成本?在物联网世界中,如果所有设备的输出接口都能提供智能数据,这将大大减少需要通过物联网线路传输的数据量。我们还需要重新思考我们今天使用互联网的方式,互联网产生的数据量随着时间的推移急剧增加,未来的硬件和软件技术根本无法应对。也许我们可以为互联网创造一种新语言,使用一些信号来传递信息,而不是写一个1000字的故事。如果你观看聋人之间的对话,你会发现他们用很少的信号和很少的动作讲述一个完整的故事。把互联网用户当作聋哑人,创造一种可以用很少的信号讲故事的语言。我认为围绕物联网的平台可以帮助连接设备并帮助我们理解当今互联网上生成的数据。将世界转向智能数据,而不是在垃圾(大数据)上浪费金钱。