CN114862364A - 一种基于多源多维的核电材料数据的汇交系统及方法 - Google Patents
一种基于多源多维的核电材料数据的汇交系统及方法 Download PDFInfo
- Publication number
- CN114862364A CN114862364A CN202210569727.6A CN202210569727A CN114862364A CN 114862364 A CN114862364 A CN 114862364A CN 202210569727 A CN202210569727 A CN 202210569727A CN 114862364 A CN114862364 A CN 114862364A
- Authority
- CN
- China
- Prior art keywords
- data
- nuclear power
- power material
- module
- standard
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
- G06Q10/103—Workflow collaboration or project management
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/06—Energy or water supply
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02E—REDUCTION OF GREENHOUSE GAS [GHG] EMISSIONS, RELATED TO ENERGY GENERATION, TRANSMISSION OR DISTRIBUTION
- Y02E30/00—Energy generation of nuclear origin
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Strategic Management (AREA)
- Theoretical Computer Science (AREA)
- Economics (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Entrepreneurship & Innovation (AREA)
- Tourism & Hospitality (AREA)
- Health & Medical Sciences (AREA)
- Data Mining & Analysis (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- Operations Research (AREA)
- Databases & Information Systems (AREA)
- Public Health (AREA)
- Water Supply & Treatment (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Monitoring And Testing Of Nuclear Reactors (AREA)
Abstract
本发明公开了一种基于多源多维的核电材料数据的汇交系统及方法,包括文件读取模块、数据标准判断模块、数据存储模块、数据封装模块。文件读取模块:对核电材料数据文件进行准备,并读取核电材料数据文件中的数据内容;数据标准判断模块:对读取的数据内容在系统中判定是否存在数据标准,当存在数据标准时则对该数据进行同步;数据校验模块:对同步后的数据进行有效性判断,并筛选出有效数据;数据封装模块:对有效数据进行唯一标识关联,并进行封装存储。本发明通过使用数据标准,能直接将多源异构原始核电材料数据入库存储,减轻操作人员的学习成本,提升数据整合的效率,快捷实现数据的汇交融合。
Description
技术领域
本发明属于核电数据整理技术领域,具体涉及一种基于多源多维的核电材料数据的汇交系统及方法。
背景技术
核电关键设备通常在高温、高压、强腐蚀和强辐照的工况条件下工作,对材料的要求极高,通常要满足核性能、力学性能、化学性能、物理性能、辐照性能、工艺性能、经济性等各种性能的要求,要达到专用的标准法规要求。其数据内容丰富、数据来源广泛、数据结构多样。如核电材料工艺过程中,由于各类软件输入输出类型不尽相同,工艺数据之间难以汇交融合;核电材料性能试验项目多,指标要求严格,聚合汇交难度大,工艺、性能指标之间更难以形成联结。核电材料的设计、生产、试验在严格的质保体系下完成,相关数据的准确、快速汇交融合能保证数据质量可控、可追溯。
作为材料全生命周期数据中最基础的部分,如果能高效稳定地汇交核电结构材料数据,将会为后续的数据挖掘技术在从微观到宏观多尺度的研究应用打下坚实的基础。
在核电结构材料研发生产过程中,受材料性质、材料生命周期及其它因素影响,导致在研发生产过程中积累了大量不同格式、不同来源的异构数据源,如加工工艺数据、性能检测数据、计算和模拟数据、分析数据等。异构数据源汇交是数据库领域的经典问题,在汇交异构数据源时,主要会面对异构数据源的异构性、完整性、语义不一致、集成性能等问题。
发明内容
针对现有技术的不足,本发明的目的在于提供一种基于多源多维的核电材料数据的汇交系统及方法,解决了现有技术中存在的上述技术问题。
本发明的目的可以通过以下技术方案实现:
一种基于多源多维的核电材料数据的汇交系统,包括文件读取模块、数据标准判断模块、数据存储模块、数据封装模块。
所述文件读取模块:对核电材料数据文件进行准备,并读取核电材料数据文件中的数据内容;
所述数据标准判断模块:对读取的数据内容在系统中判定是否存在数据标准,当存在数据标准时则对该数据进行同步,当不存在数据标准时,则对读取的数据从新注册成数据标准后再进行同步;
所述数据校验模块:对同步后的数据进行有效性判断,并筛选出有效数据;
所述数据封装模块:对有效数据进行唯一标识关联,并进行封装存储。
进一步的,所述核电材料数据文件的类型包括分析数据文件、计算数据文件、模拟数据文件、性能检测文件、加工参数文件。
进一步的,所述数据标准判断模块中数据标准包括化学成分、冲击性能、拉伸性能、疲劳性能。
进一步的,所述数据校验模块时,有效性判断的标准包括数据类型是否匹配、数据上下限验证、数据格式验证、数据完整性验证。
进一步的,所述数据校验模块中当出现无效数据时,直接结束数据处理行程。
进一步的,所述数据封装模块中唯一标识关联标准包括工艺参数、化学成分、拉伸检测、金相检测。
所述的基于多源多维的核电材料数据的汇交方法,包括以下步骤:
S1、准备核电材料数据文件,并对核电材料数据文件进行数据读取;
S2、对读取的数据进行数据标准判断,当存在数据标准时,则与该数据进行匹配,当系统中不存在该数据标准时,则对该数据重新建立数据标准,随后再进行数据同步作业;
S3、对同步的数据进行有效性判断,对有效的数据进行存储,对无效的数据直接结束数据行程;
S4、对有效的数据进行唯一标识关联,并封装成一条完整的核电材料数据,最后保存到数据库中。
本发明的有益效果:
1、本发明通过使用数据标准,能直接将多源异构原始核电材料数据入库存储,减轻操作人员的学习成本,提升数据整合的效率,快捷实现数据的汇交融合,同时能进一步加强和规范核电结构材料数据的科学管理,保障数据安全,也为后续整合复杂程度更高的核电结构材料数据打下了坚实的基础。
2、本通过制定元数据标准规范数据语义,并采用标识符保证数据的唯一性;采用丰富的字段类型满足不同数据的存储需求,从系统层面保证异构数据也能完整汇交保存;最后支持多并发多线程处理数据汇交,保证数据汇交效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1是本发明实施例的数据汇交系统结构图;
图2是本发明实施例的数据汇交方法流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
如图1所示,本发明实施例提供一种基于多源多维的核电材料数据的汇交系统,包括文件读取模块、数据标准判断模块、数据存储模块、数据封装模块。
文件读取模块:对核电材料数据文件进行准备,并读取核电材料数据文件中的数据内容;核电材料数据文件的类型包括分析数据文件、计算数据文件、模拟数据文件、性能检测文件、加工参数文件等。
数据标准判断模块:对读取的数据内容在系统中判定是否存在数据标准(包括化学成分、冲击性能、拉伸性能、疲劳性能),当存在数据标准时则对该数据进行同步,当不存在数据标准时,则对读取的数据从新注册成数据标准后再进行同步;注释:数据标准是核电材料数据如性能、工艺数据做结构化处理产物,在系统中拆解为多个单一属性,组合形成核电材料结构,同时设置原始数据和材料结构的映射关系,形成特定多源异构核电材料文件的数据标准。
数据校验模块:对同步后的数据进行有效性判断(包括数据类型是否匹配、数据上下限验证、数据格式验证、数据完整性验证),并筛选出有效数据;当出现无效数据时,直接结束数据处理行程。
数据封装模块:对有效数据进行唯一标识关联(包括工艺参数、化学成分、拉伸检测、金相检测),并进行封装存储。
如图2所示,基于多源多维的核电材料数据的汇交方法,包括以下步骤:
S1、准备核电材料数据文件,可能是设备文件、计算数据文件、模拟数据文件等,并对核电材料数据文件进行数据读取。
S2、对读取的数据进行数据标准判断,当存在数据标准时,则与该数据进行匹配,当系统中不存在该数据标准时,则对该数据重新建立数据标准,随后再进行数据同步作业。
S3、对同步的数据进行有效性判断,即数据类型是否匹配、数据上下限验证、数据格式验证、数据完整性验证等,对有效的数据进行存储,对无效的数据直接结束数据行程;
S4、对有效的数据进行唯一标识关联(包括工艺参数、化学成分、拉伸检测、金相检测),并封装成一条完整的核电材料数据,最后保存到数据库中。
本发明通过制定元数据标准规范数据语义,并采用标识符保证数据的唯一性;采用丰富的字段类型满足不同数据的存储需求,从系统层面保证异构数据也能完整汇交保存;最后支持多并发多线程处理数据汇交,保证数据汇交效率。
以上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下,本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。
Claims (7)
1.一种基于多源多维的核电材料数据的汇交系统,其特征在于,包括文件读取模块、数据标准判断模块、数据存储模块、数据封装模块,
所述文件读取模块:对核电材料数据文件进行准备,并读取核电材料数据文件中的数据内容;
所述数据标准判断模块:对读取的数据内容在系统中判定是否存在数据标准,当存在数据标准时则对该数据进行同步,当不存在数据标准时,则对读取的数据从新注册成数据标准后再进行同步;
所述数据校验模块:对同步后的数据进行有效性判断,并筛选出有效数据;
所述数据封装模块:对有效数据进行唯一标识关联,并进行封装存储。
2.根据权利要求1所述的基于多源多维的核电材料数据的汇交系统,其特征在于,所述核电材料数据文件的类型包括分析数据文件、计算数据文件、模拟数据文件、性能检测文件、加工参数文件。
3.根据权利要求1所述的基于多源多维的核电材料数据的汇交系统,其特征在于,所述数据标准判断模块中数据标准包括化学成分、冲击性能、拉伸性能、疲劳性能。
4.根据权利要求1所述的基于多源多维的核电材料数据的汇交系统,其特征在于,所述数据校验模块时,有效性判断的标准包括数据类型是否匹配、数据上下限验证、数据格式验证、数据完整性验证。
5.根据权利要求4所述的基于多源多维的核电材料数据的汇交系统,其特征在于,所述数据校验模块中当出现无效数据时,直接结束数据处理行程。
6.根据权利要求1所述的基于多源多维的核电材料数据的汇交系统,其特征在于,所述数据封装模块中唯一标识关联标准包括工艺参数、化学成分、拉伸检测、金相检测。
7.根据权利要求1-6任一项所述的基于多源多维的核电材料数据的汇交方法,其特征在于,包括以下步骤:
S1、准备核电材料数据文件,并对核电材料数据文件进行数据读取;
S2、对读取的数据进行数据标准判断,当存在数据标准时,则与该数据进行匹配,当系统中不存在该数据标准时,则对该数据重新建立数据标准,随后再进行数据同步作业;
S3、对同步的数据进行有效性判断,对有效的数据进行存储,对无效的数据直接结束数据行程;
S4、对有效的数据进行唯一标识关联,并封装成一条完整的核电材料数据,最后保存到数据库中。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210569727.6A CN114862364A (zh) | 2022-05-24 | 2022-05-24 | 一种基于多源多维的核电材料数据的汇交系统及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210569727.6A CN114862364A (zh) | 2022-05-24 | 2022-05-24 | 一种基于多源多维的核电材料数据的汇交系统及方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114862364A true CN114862364A (zh) | 2022-08-05 |
Family
ID=82639334
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210569727.6A Pending CN114862364A (zh) | 2022-05-24 | 2022-05-24 | 一种基于多源多维的核电材料数据的汇交系统及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114862364A (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6182222B1 (en) * | 1997-03-25 | 2001-01-30 | Electronic Data Systems Corporation | Secure data storage system and method |
| US20090254572A1 (en) * | 2007-01-05 | 2009-10-08 | Redlich Ron M | Digital information infrastructure and method |
| CN111352982A (zh) * | 2018-12-24 | 2020-06-30 | 核工业计算机应用研究所 | 一种基于大数据的人力抽取分析系统 |
| CN113157795A (zh) * | 2021-05-18 | 2021-07-23 | 国网宁夏电力有限公司 | 适用于移动应用的电网调控运行多源数据建模与管理系统 |
| US11170022B1 (en) * | 2020-06-03 | 2021-11-09 | Shanghai Icekredit, Inc. | Method and device for processing multi-source heterogeneous data |
| CN113886355A (zh) * | 2021-09-15 | 2022-01-04 | 成都材智科技有限公司 | 一种核电结构材料工艺数据集成系统及方法 |
| CN114153885A (zh) * | 2021-11-23 | 2022-03-08 | 成都材智科技有限公司 | 一种核电结构材料性能数据集成系统和方法 |
-
2022
- 2022-05-24 CN CN202210569727.6A patent/CN114862364A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6182222B1 (en) * | 1997-03-25 | 2001-01-30 | Electronic Data Systems Corporation | Secure data storage system and method |
| US20090254572A1 (en) * | 2007-01-05 | 2009-10-08 | Redlich Ron M | Digital information infrastructure and method |
| CN111352982A (zh) * | 2018-12-24 | 2020-06-30 | 核工业计算机应用研究所 | 一种基于大数据的人力抽取分析系统 |
| US11170022B1 (en) * | 2020-06-03 | 2021-11-09 | Shanghai Icekredit, Inc. | Method and device for processing multi-source heterogeneous data |
| CN113157795A (zh) * | 2021-05-18 | 2021-07-23 | 国网宁夏电力有限公司 | 适用于移动应用的电网调控运行多源数据建模与管理系统 |
| CN113886355A (zh) * | 2021-09-15 | 2022-01-04 | 成都材智科技有限公司 | 一种核电结构材料工艺数据集成系统及方法 |
| CN114153885A (zh) * | 2021-11-23 | 2022-03-08 | 成都材智科技有限公司 | 一种核电结构材料性能数据集成系统和方法 |
Non-Patent Citations (1)
| Title |
|---|
| 韩超 等: "多源异构核电数据管理系统设计", 科技创新与应用, no. 5, 31 December 2021 (2021-12-31), pages 75 - 77 * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105373472B (zh) | 一种基于数据库的统计准确性的测试方法及测试系统 | |
| EP3513315A1 (en) | System for data management in a large scale data repository | |
| CN116303380B (zh) | 一种监测业务中的数据质量校验方法、设备及介质 | |
| CN101772760A (zh) | 数据库管理程序以及数据库管理装置 | |
| CN106530121B (zh) | 电力监控系统安全防护合规性检测方法和系统 | |
| CN105574039B (zh) | 一种晶圆测试数据的处理方法及系统 | |
| CN102122280A (zh) | 一种智能提取内容对象的方法及系统 | |
| CN107797916A (zh) | Ddl语句审核方法和装置 | |
| CN101957748A (zh) | 一种数据逻辑分析方法、装置及系统 | |
| CN110287114B (zh) | 一种数据库脚本性能测试的方法及装置 | |
| CN106649718B (zh) | 一种用于pdm系统的大数据采集与处理方法 | |
| CN114398857A (zh) | 一种cad图纸的图框标题栏属性信息自动批量填充方法 | |
| CN114862364A (zh) | 一种基于多源多维的核电材料数据的汇交系统及方法 | |
| CN110515926A (zh) | 基于分词和语义依存分析的异构数据源海量数据梳理方法 | |
| CN115965327A (zh) | 一种基于核电高通量计算数据的处理分析系统及方法 | |
| CN101196742A (zh) | 一种生产过程质量管理系统 | |
| CN105550267B (zh) | 一种利用Excel格式数据处理焊接性能数据的方法及系统 | |
| CN102799584A (zh) | 一种针对检测仪器输出数据筛选提取的处理方法 | |
| CN118735548A (zh) | 一种pcb全流程mes系统智能追溯系统 | |
| CN111597365A (zh) | 基于图元特征属性的变电站svg图形和模型关联校验方法 | |
| CN113760913B (zh) | 一种弹性可扩展的装备费用采集方法 | |
| CN116881512A (zh) | 一种跨系统元数据血缘自动解析方法 | |
| CN104850664A (zh) | 一种基于pdm的机械加工领域本体构建方法 | |
| CN110825030B (zh) | 一种数控系统在线监测方法 | |
| CN115185944A (zh) | 一种json数据自动结构化并入库的方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20220805 |
|
| RJ01 | Rejection of invention patent application after publication |