目前存在很多孤立的数据孤岛，对接业务软件或者获取软件中的数据都存在很大困难，尤其是CS软件的数据爬取难度更大。系统互连最常用的方法是接口法。运气好的话可以顺利连接，但是接口互联的方式往往需要和各个软件厂商协调很多时间。除了软件接口，还有什么办法吗？小编总结了常用的数据采集技术，供大家参考，主要分为以下几类：1.CS软件数据采集技术。C/S架构的软件属于比较老的架构，能采集这个软件数据的产品比较少。博微小帮软件机器人在没有软件厂商配合的情况下，以“所见即所得”的方式在界面上采集数据的现象很普遍。输出结果是结构化数据库或excel表格。如果只是需要业务数据，或者厂商倒闭，数据库分析困难的时候，这个工具就可以收集数据，尤其是详情页的数据收集功能还是比较有特色的。值得一提的是，这款产品的使用门槛非常低，没有ITBusiness背景的同学也可以使用，大大拓展了使用人群。2.网络数据采集API。通过网络爬虫和部分网站平台提供的公共API（如推特、新浪微博API）获取网站数据。这样就可以从网页中提取非结构化数据和半结构化数据的网页数据。互联网网页大数据采集和处理的整体流程包括四个主要模块：网络爬虫（Spider）、数据处理（DataProcess）、爬取URL队列（URLQueue）和数据。3、数据库方式两个系统都有自己的数据库，同类型数据库之间比较方便：1）如果两个数据库在同一台服务器上，只要用户名设置没有问题就可以了，可以直接互相访问。您需要在from之后带上数据库名称和表的架构所有者。select*fromDATABASE1.dbo.table12)如果两个系统的数据库不在同一台服务器上建议使用链接服务器的形式，或者使用openset和opendatasource。这就需要配置外围服务器来访问数据库。不同类型的数据库之间的连接比较麻烦，需要大量的设置才能生效，这里不再详述。开放数据库方式需要协调各个软件厂商开放数据库，难度很大；这是一个巨大的挑战。欢迎大家一起讨论。
