[1]张金标,张恩红.基于多线程流水线的光盘自动刻录技术研究[J].气象研究与应用,2018,39(02):94-97,100.
　Zhang Jinbiao,Zhang Enhong.Research of CD automatic recording technology based on multithreading pipeline[J].Journal of Meteorological Research and Application,2018,39(02):94-97,100.
点击复制

基于多线程流水线的光盘自动刻录技术研究()
分享到：

气象研究与应用[ISSN:1673-8411/CN:45-1356/P]

卷:
第39卷
期数:
2018年02期
页码:
94-97,100
栏目:
大气监测与装备技术
出版日期:
2018-06-30

文章信息/Info

Title:
Research of CD automatic recording technology based on multithreading pipeline
作者:
张金标;  张恩红
广东省气象探测数据中心, 广州 510641
Author(s):
Zhang Jinbiao;  Zhang Enhong
Guangdong Meteorological Survey Data Center, Guangzhou Guangdong 510641
关键词:
海量数据; 多线程; 流水线; 并行处理; 自动归档
Keywords:
massive data; multi-thread; pipeline; parallel processing; auto archiving
分类号:
P49
摘要:
海量气象数据的长期归档保存是气象局的重要业务之一，传统的数据归档方式已经不能满足需要。基于多线程流水线的气象数据光盘自动归档方法可以解决海量数据归档的问题。利用该方法针对这一问题提出很好的解决方案，并完成了系统的开发、获得较好应用效果。系统通过基于线程流水线技术的多任务并行处理机制，大大缩短了海量数据的分类、压缩、光盘数据生成与刻录的整体运行时间。该系统每天能处理981.8GB，刻录数据577.3GB （以50G的蓝光光盘为例）。
Abstract:
Long term archival storage of mass meteorological data is one of the important businesses of the meteorological bureau. The traditional way of data archiving has been unable to meet the needs.The meteorological data compact disc auto archiving system gives out a perfect solution for this problem, which has completed system development and gained good application results. This system integrates data processing, disc burning, cover printing, and disc management, which solved the long term storage, auto archiving, and management problems of massive meteorological data. The whole processing time of massive data classifying, compressing, disc data organizing and burning is drastically reduced by using the multitask parallel mechanism based on multithreading pipeline technology. The system can handle 981.8GB data and record 577.3GB data per day (take the 50G blue light disc as an example).

参考文献/References:

[1] 荣裕良,张霞,马忠芬,等.松江智慧气象为农服务系统开发研究[J].气象研究与应用,2017,38(1):102-106.
[2] 陈少斌,苏彦,蒙炤臻,等.基于Google Maps API技术的自动气象站数据查询系统[J].气象研究与应用,2014,35(2):93-95.
[3] 周展程,孙志强.基于GIS的自动气象站数据业务平台的实现[J].气象研究与应用,2016,37(1):91-93.
[4] 严文瑞,曹强,姚杰,等.一种面向大容量光盘库的新型文件系统[J].计算机研究与发展,2015,52:1-8.
[5] 缪嘉嘉,付印金,余沛毅,等.低能耗磁光混合归档系统的设计与实现[J].计算机技术与发展,2017,27(8):52-56.
[6] 赵伟东.电子档案蓝光存储应用探究[J].档案学研究,2015,3:88-95.
[7] 杨鹏.基于蓝光存储技术的气象电子档案存储管理[J].信息与电脑,2015,(16):84-86.
[8] 王瑞通,李炜春.大数据基础存储系统技术研究[J].计算机技术与发展,2017,27(08):66-72.
[9] 宋丽娜.海量存储系统中数据分级存储的关键技术研究[D].长沙:国防科学技术大学硕士论文,2011.
[10] 曾行吉,李莹,宋瑶.地面气象观测数据入库多线程并行设计与实现[J].气象研究与应用,2017,38(3):114-116.
[11] 黎颖智,史彩霞,刘世学.关于异步多线程快速提取CIMISS数据入库方法的研究与应用[J].气象研究与应用,2018,39(1):118-120.
[12] 胡晓峰,张亮红,刘文怡,等.VC多线程流水线在数据存储系统中的设计与实现[J].电子器件,2016,39(4):964-967.
[13] 季圆圆,张涛,王海鹏.基于线程流水线的多核线程调度策略[J].计算机工程,2013,39(2):279-287.
[14] 王晶,樊晓桠,张盛兵,等.多核多线程结构线程调度策略研究[J].计算机科学,2007,34(9):256-258.
[15] 曹斌,张霞,刘积仁.多线程Web服务器设计中的流水线技术[J].东北大学学报(自然科学版),1999,20(3),229-231.
[16] 刘云生,陈世俊.基于多线程的流水线查询处理方式[J].计算机应用,2004,24(6):54-56.

相似文献/References:

[1]曾行吉,李莹,宋瑶.地面气象观测数据入库多线程并行设计与实现[J].气象研究与应用,2017,38(03):114.
　Zeng Xing-ji,Li Ying,Song Yao.Parallel Design and Implementation of Meteorological Observation Data Storage Base on Multi Thread Processing[J].Journal of Meteorological Research and Application,2017,38(02):114.
[2]黎颖智,史彩霞,刘世学.关于异步多线程快速提取CIMISS数据入库方法的研究与应用[J].气象研究与应用,2018,39(01):118.
　Li Yingzhi,Shi Caixia,Liu Shixue.The research and application of the fast extraction method for the asynchronous multithreading of CIMISS data[J].Journal of Meteorological Research and Application,2018,39(02):118.
[3]黄志,丘平珠,谭斐.区域自动站降水分时统计关键技术与实现[J].气象研究与应用,2019,40(02):86.
　Huang Zhi,Qiu Pingzhu,Tan Fei.Research and Implementation of Precipitation Timesharing Accounting Key Technologies for Regional Automatic Station[J].Journal of Meteorological Research and Application,2019,40(02):86.

备注/Memo

备注/Memo:
收稿日期:2017-12-05。
作者简介:张金标(1968-),男,高级工程师,理学学士,主要从事气象信息化和应用气象工作。
更新日期/Last Update: 1900-01-01