海量数据实时存储及远程定期传输的实现

随着网络和信息技术的发展使得原来以串口、RS232、RS485方式管理的串口监测设备不再适应信息化的步伐。通过GPRS无线网络进行远程数据促进了现代监测系统自动化的发展。 由于监测点分散，分布范围广，而且大多设置在环境较恶劣的地区，通过GPRS无线网络进行数据传输，成为我们监测数据实时发送到管理中心的后端服务器进行处理的通信手段之一。然而在一些特定应用场合，并不需要对数据进行实时处理和显示，只是记录下原始数据，将其作为一个“黑匣子”，为后端处理做准备。同时GPRS网络的不稳定性导致的数据丢失或延时问题是无法避免的客观存在。广州市乐诚电子科技有限公司作为专业的嵌入式应用开发商和方案提供商，针对行业用户的不同需求，提供高性价比的系统设计，帮助用户实现最优的数据实时存储及数据远程定期传输的解决方案。 系统构成及基本工作原理 为实现系统高可靠性、高效率的工作，采用基于ARM架构的高性能32位嵌入式微处理器作为系统的管理核心，通过与高效的嵌入式操作系统相结合，采用独特的动态内存分配算法，以此管理文件系统对内存的消耗和释放，提高数据的传输效率，避免数据丢失，实现监测数据的可靠存储以及数据的完整传输。 数据存储系统采用模块设计，体积小，便于系统扩展。用户不需要对现有设备进行任何改造直接接入数据监测采集设备和GPRS数传DTU 之间，即可实现对监测数据的实时存储，同时在远程的PC终端可以通过GPRS数传DTU对大容量内存卡中的系统文件进行访问和管理。 软件实现 在使用GPRS数传DTU进行数据实时传输过程中，由于网络的不稳定性导致的数据丢失不可避免，这对用户后端服务器进行数据分析处理带来很大的不便。数据存储系统对数据监测设备的数据进行分时段性存储，将各时段的数据分别存储在不同的存储文件中，存储文件采用“0001.TXT、0002.TXT……”格式，自动编号，永不覆盖。各时段可以设置每间隔一小时、一天或者一月自动创建一个存储文件，监测到的数据完整的保存在内存卡中，起到原始数据备份的作用，可以将其作为一个“黑匣子”。当用户需要提取数据时，不但可以到现场直接读取，也可以通过GPRS无线数传设备远程管理内存卡内的文件系统。 远程PC终端可以通过指令对内存卡中的数据存储文件进行读取、删除、创建等操作。 系统的实时数据可以通过终端PC机定期读取，大大减少了利用GPRS网络产生的数据流量费用;减少系统运行的成本，降低系统的运行费用。更多资料百度“LCW数据存储器” 硬件接口设计 a 提供双RS232/485接口，支持2400~115200宽范围波特率。串口全透明数据传输，无需传输协议，透明保存用户的数据，100%可靠，支持高达14K 字节/秒的数据储存及传输能力。 b具有USB拷贝数据功能，U盘式管理，高速USB2.0接口;USB自动识别，无需安装驱动. C功耗小，支持锂电池供电；便于携带，适应野外恶劣环境下工作。     耐震动设计：无论是在存储管道在线检测数据，还是无人航载信息黑匣子都需要数据存储设备具有一定强度的耐震动能力，对此硬件设计上采用自锁式卡座，内嵌存储卡，具有防震功能；避免由于意外使存储卡与卡座接触不良，而造成数据无法储存。    蜂鸣器报警功能：对于重要数据，丢失数据给我们带来的损失是惨痛的，系统软件设计了系统出错报警。系统上电后，首先对SD/TF卡进行初始化，初始化成功蜂鸣器响一下，说明系统运行正常；蜂鸣器长响为出错报警。 广泛应用于石油化工、电力监控、环境监测、自然灾害监测、海洋监测数据记录、气象数据采集、水文数据记录、GPS采集数据、航空摄影、航迹记录、车载黑匣子、工业监控现场数据、各种传感器数据记录、监控语音记录等重要数据后处理应用。 海量数据实时存储及远程文件管理的实现 随着网络和信息技术的发展使串口联网服务器得到广泛的应用，可以将原有的串行设备（如工业仪表、PLC、RTU或其他智能设备）连接到以太网进行实时数据通讯，消除了串行设备通讯距离短的缺点，使得串行数据快速传输在网络上，让原有的RS232 串口设备立即具备网络互联能力。为串口数据信息提供高效、安全、稳定的数据通道。 然而在一些特定应用场合，一些环境较恶劣的地区，并不一定需要对数据进行实时处理和显示，只是记录下原始数据，将其作为一个“黑匣子”，为后端处理做准备；同时网络的不稳定性导致的数据丢失或延时问题是无法避免的客观存在。广州市乐诚电子科技有限公司作为专业的嵌入式应用开发商和方案提供商，针对行业用户的不同需求，提供高性价比的系统设计，帮助用户实现最优的数据实时存储及数据远程读取的解决方案。 系统构成及基本工作原理 由于监测点分散，分布范围广，而且大多设置，通过GPRS无线网络进行数据传输，成为我们监测数据实时发送到管理中心的后端服务器进行处理的通信手段之一。 就可以将串行设备（如工业仪表、PLC、RTU或其他智能设备）连接到以太网进行数据通讯的设备，消除了串行设备通讯距离短的缺点，使得串行数据快速传输在网络上，让原有的RS232 串口设备立即具备网络互联能力。为串口数据信息提供高效、安全、稳定的数据通道。

很不错哦

不错，感谢楼主

大家来一起学习吧

希望大家帮我把这个帖发给你身边的人，谢谢！

看贴回复是好习惯

既然来了，就留个脚印

一下子 没看懂  

这个贴不错！！！！！

回个帖子支持一下！

论坛内容不错，希望大力推广

楼主，支持！

先看看怎么样！

谢谢楼主啊！

这年头，分不好赚啊

很好！很强大！

先看看怎么样！