登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
支撑电信、金融、医疗、安全、电力等关键行业大数据应用的基础软件平台将呈一体化形态,它以数据为中心,将操作系统、分布式存储、数据库等产品融合起来,对结构化、半结构化和非结构化等全数据进行高效存储与管理,并对应用提供统一的数据服务支撑接口。大数据环境下的基础软件平台很像一个“泛OS”,将传统操作系统、存储、数据库等等产品和组件有机融合,做到存储资源、计算资源等有效管理和调度,同时为上层数据应用提供统一、易用接口,实现数据采集、存储、计算、应用等全周期的高效易用、安全可靠和易管理。
国际上一体化融合的大数据处理平台已经成为主流趋势。国际IT巨头们在积极发展以平台为核心、面向新型应用模式的一体化行业解决方案和生态系统。2013年,EMC公司发布了自身的Apache Hadoop发行版—Pivotal HD,它将大规模并行数据库技术与Apache Hadoop框架集成,同时发布了一个名为HAWQ的技术,将Greenplum分析型数据库与Hadoop分布式架构进行紧密地融合,实现了HDFS上SQL并行数据库处理,提高了性能并使Hadoop平台与SQL开发者实现了接轨。惠普则发布了大数据解决方案HAVEn分析平台,该平台是惠普大数据产品的组合,它整合了Hadoop/HDFS、HP Autonomy语义处理引擎、HP Vertica列存数据库、EntERPrise Security安全技术等形成大数据处理方案。
围绕行业大数据应用构建大数据处理基础软件平台的关键问题是如何解决结构化和非/半结构化不同类型的数据融合,以及实现不同类型数据处理模式的整合。单一的MPP数据库或Hadoop产品一般很难满足行业用户对结构化和非/半结构化数据融合的业务需求,这两种方式的界限正在实际应用部署被打破,市场上正逐步形成以全数据处理为核心,垂直整合操作系统、MPP数据库、Hadoop、统一数据服务的基础软件平台产品。
在国内,业界的主流思路是:用基于MPP架构的新型数据库集群(如EMC GreenPlum、南大通用GBase 8a、HP Vertica等)管理结构化大数据,侧重于行业大数据分析型应用场景;用基于Hadoop的技术扩展和封装(如HBase数据库)管理非/半结构化大数据,侧重于互联网大数据应用场景。MPP集群与Hadoop产品混搭部署、相互融合,共同支撑大数据应用。
MPP与Hadoop的应用融合是大数据处理基础软件平台需要解决的一个核心技术问题。为了让平台能够更好地支撑行业大数据应用,不改变用户习惯的SQL这种更易于理解的、交互性更好的访问接口,架构需要以MPP数据库及计算框架为核心,将MPP运算调度引擎完全融入非关系型运算调度框架,实现可以同时调度关系运算和非关系运算的调度引擎,构建统一的结构化信息提取和数据类型转换框架,将非/半结构化数据映射为关系模型,实现面向关系模型的全数据统一视图,从而平滑的实现MPP数据库和Hadoop的统一调度和处理,为新型的基础软件平台和上层应用提供数据服务。
当前,国家的大数据战略、信息安全战略,以及大数据行业应用引发了对国产大数据处理基础软件平台的强劲需求。国产基础软件厂商应协同作战,抓紧市场与技术的双重时机,发展国产化大数据处理基础软件平台,并在国计民生的大数据应用系统中成为重要支撑。与此同时,在关键发展时间窗,国家应及时给予大力支持和帮助,避免大数据领域基础软件平台几年后再次走上“国产化”替代的老路。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
国网大数据中心2024年度集中采购批次安排
3月21日,四川凉山州西昌市清洁能源科创特高压项目公示,拟新建80亩的清洁能源科创特高压基地,项目包括储能技术研发中心、电力大数据深化应用中心、全球最复杂环境下大电网保供研发中心。项目建设工期2年。项目位于安宁镇,以独资、合资方式合作,投资总额7亿元,省外投资额7亿元,业主单位西昌市成凉
近日,四川能源监管办发布了2023年度煤电机组大数据监管情况通报。通报指出,占全省电力装机总容量不到9%的煤电机组,提供了全年四川电网13%的电量,较好地发挥了煤电兜底保障作用。2023年四川燃煤火电机组平均利用小时数达5650小时,在全国31个省(市/自治区)中排名第一。同时随着2023年四川用电负荷
3月8日,上海市区供电公司客户经理蒋健来到杨浦区凤南一村旧房改造现场,带领施工队伍开展拉线、装表、送电工作,为该小区后续的旧房拆除工作提供临时用电。凤南一村旧房改造这项民心工程即将进入大规模施工阶段。2023年11月30日,习近平总书记在上海主持召开深入推进长三角一体化发展座谈会时强调,“
3月14日,安徽省工信厅征集2024年安徽省首版次软件研制需求目录。其中包括具有重大创新突破的行业应用软件:围绕十大新兴产业发展需求,面向汽车、光伏储能、高端装备等领域应用软件,以及嵌入式软件、信息安全软件等。原文如下:安徽省工业和信息化厅关于征集2024年安徽省首版次软件研制需求目录的通
为深入贯彻习近平总书记视察天津重要讲话精神,认真落实市委、市政府决策部署,在发展新质生产力上勇争先、善作为。日前,市发展改革委主要负责同志带队赴我市算力中心和人工智能大模型重点企业调研,并召开座谈会,委分管同志和有关处室负责同志参加。市发展改革委主要负责同志先后前往武清区和河北区
3月11日,由安徽合肥高新区管委会和国网合肥供电公司共同建立的合肥“高新碳云”正式启动。这是安徽首个园区碳服务管理平台,将进一步助力城市更绿色低碳。合肥高新技术产业开发区是首批国家级高新技术产业开发区。经过30多年发展,该区集聚企业8万余家,GDP超千亿元。为更好助力园区绿色低碳转型,优
近日,河南省能源大数据中心“1+18”(省级电力公司和18个地市供电公司)一体化运营体系全面建成。该中心具备的经济概况、新能源监测分析等11项标准功能和50项自选功能全部向省市两级供电企业开放,以此为基础打造的数据服务场景和产品可支撑全省电力保供、能源转型、经济发展等工作科学、精准、高效开
3月4日,国家能源局印发加强发电机组检修安全管理。其中提到,要加强外包作业现场管理,采用信息化、智能化、大数据等技术手段,全程掌握外包队伍和人员遵守安全生产规定、落实安全管理要求等情况。原文如下:国家能源局综合司关于加强发电机组检修安全管理的通知国能综通安全〔2024〕23号各省(自治区
3月1日,河南省工业和信息化厅河南省财政厅发布开展2024年河南省制造业数字化服务商申报工作的通知,其中申报方向共五类,分别是工业软件、工业大数据、工业互联网融合应用、工业信息安全、智能制造系统解决方案。原文如下:河南省工业和信息化厅河南省财政厅关于开展2024年河南省制造业数字化服务商申
2月28,日,云南省发改委云南省数据局发布公开征集“数据要素×”典型案例及有关工作建议的公告,申报重点包括工业制造、现代农业、商贸流通、交通运输、金融服务、科技创新、文化旅游、医疗健康、应急管理、气象服务、城市治理、绿色低碳等12个行业领域。原文如下:云南省发展和改革委员会云南省数据局
3月26日,国网天津电科院以“查隐患、控风险、抓落实、保安全”为主线开展春季信息安全大检查,全面排查信息设备、信息系统、网络专线、科技产出系统等信息安全,保障企业网络设备安全稳定运行,提升公司整体网络安全防护水平。本次工作中,电科院以现场排查、梳理自查、专项督查等多种形式相结合,结
3月27日,国网光山县供电公司2名信息专业工作人员正在认真梳理公司信息网络设备地址,确保省市公司关于IP地址资源管理提升工作的相关要求落实落地落细,为企业网络安全、稳定、可靠、高效运行夯实基础。IP地址资源管理是网络安全和性能管理的关键组成部分,有效的IP地址管理可以帮助企业确保网络的可用
为进一步加强和规范网络信息安全管理,切实提升员工网络与信息安全的主观防护意识,今年以来,国能晋江热电公司从安全自查、公司排查和规范管理三方面行动,构筑网络信息安全防护墙。根据网络信息安全管理要求,该公司要求所有员工对所使用电脑进行自查,确保所有办公电脑全部安装集团360软件,提高安
2月7日,国网天津电科院开展春节前网络信息安全专项检查,筑牢节日期间信息网络安全防线,严防信息安全事故发生,多措并举确保信息网络安全运行可靠。电科院信息安全分管领导和科技管理部门负责人带队,有序组织信息专责及运维人员成立专项排查小组,结合信息设备和办公区域实际运行情况,分别前往东丽
为进一步推动网络信息安全建设,强化各级人员网络安全辨识能力,规范网络及终端安全办公,最近,盐城供电公司营销部组织员工进行网络信息安全专项培训,主要针对场所防护、终端防护以及互联网资产三方面进行宣贯学习,通过网络安全宣传教育专项工作,为公司网络信息安全筑起一道坚实的防线。盐城供电公
近日,广东燃料电池汽车示范应用城市群综合监管平台(简称“广东燃料电池汽车监管平台”)获得了国家公安部核准颁发的“信息系统安全等级保护二级备案证明”(简称“等保二级”)。据悉,国家等级保护认证是中国最权威的信息产品安全等级资格认证,认证由国家信息安全监管部门进行监督、检查,要求非常严
6月26日,国家能源局在京召开电力行业网络与信息安全联席会议全体会议,会议总结“十四五”以来电力网络安全工作,分析研判电力网络安全面临的形势和风险,部署“十四五”后半期和2023年电力网络安全重点工作。国家能源局党组成员、副局长余兵出席会议并讲话。会上,中央网信办、国家发展改革委、公安
国家能源局综合司关于调整电力行业网络与信息安全联席会议成员单位组成人员的通知国能综通安全〔2023〕69号电力行业网络与信息安全联席会议各成员单位:根据工作需要,决定对电力行业网络与信息安全联席会议成员单位组成人员进行调整。现将调整后的名单通知如下。召集人:余兵国家能源局党组成员、副局
北极星电力网获悉,国家能源局综合司发布关于调整电力行业网络与信息安全联席会议成员单位组成人员的通知,国能综通安全〔2023〕69号,详情如下:电力行业网络与信息安全联席会议各成员单位:根据工作需要,决定对电力行业网络与信息安全联席会议成员单位组成人员进行调整。现将调整后的名单通知如下。
10月11日,中电联党委书记、常务副理事长杨昆在中电联本部会见三六零安全科技股份有限公司(以下简称“360集团”)创始人、董事长兼CEO周鸿祎一行。双方就当前国内外信息安全形势和电力企业数字安全工作开展深入交流和探讨。杨昆在会谈中指出,多年来,电力行业高度重视信息化建设,持续开展信息化战略
国网安徽电力基于密码算法打造了自主可控、技术先进的密码中台——“统一密码服务平台”,提供数字证书、数据加解密、签名签章、轻量级认证等多种高质量密码服务,提高了密码服务的便捷性,推动密码技术更好地服务电力发展。统一密码服务平台已应用于电力移动作业、电力物联网、输变电运检、电力交易等
2011年6月16日,由国家商务部、工业和信息化部、教育部联合主办的2010-2011中国软件和信息服务业年度颁奖典礼在大连举行。南瑞集团研制的“PI3000电力基础软件平台”获最具竞争力产品奖。PI3000电力基础软件平台是南瑞集团信通公司集多年电力信息系统项目实施经验,在对电力用户的企业模型、业务流程、业务应用等诸多方面深入研究和精心提炼后,结合最新信息技术研制的具有全新特性的电力业务基础软件平台。它能够针对电力企业复杂易变的需求敏捷的构建和维护业务模型,并为个性化的二次开发提供完备的基础设施,自动或辅助应用系统的生成。该平台成功应用于国家电网公司
南瑞研发电力业务基础软件平台通过国家电网公司验收 本网讯通讯员邬中建赵嘉莅报道南瑞信息公司“电力业务基础软件平台的研究与开发”项目2008年1月通过国家电网公司组织的验收。项目验收专家委员会听取了项目的研制报告,审查了技术资料、用户报告和由江苏省软件产品检测中心提供的“软件产品检测报告书”,经讨论一致认为,“电力业务基础软件平台”设计思想和实现技术先进,形成了具有自主知识产权的行业软件系统。系统功能齐全,稳定可靠,实用性强,应用系统构建速度快,便于用户自主维护,在行业内处于国内领先水平,尤其在动态业务建模和应用功能自动生成等技术方面具有创新性。同意通过
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!