星环科技孙元浩:用自研框架取代关于网赚Hadoop,加速实现基础软件国产化替代数字观察

作者:米米赚客日期:

分类:米米赚客

随着2019年的临近,创始人孙元浩简要总结了2019年迄今取得的成就。

  

”首先,从产品线的角度来看,星环科技自2017年以来已经基本确定了三条产品线。大数据产品是主要产品线,而人工智能机器学习平台和集装箱智能大数据云平台是围绕客户对人工智能建模、集装箱布局等需求延伸的产品线。基于使用大数据基础软件的基本需求。

同时,大数据产品线坚持自主研发,技术不断更新和迭代,应用范围越来越广。它已经成功地取代了国外制造商,如Teradata或Cloudera和IBM,一些典型的客户案例已经登陆。

其次,随着产品更新,星环科技的客户群也在扩大,覆盖金融、政府、能源、交通、教育、制造、运营商和媒体等20多个行业。其中,财政部、国家邮政局、国家商标局、中国人民银行、国泰君安、招商证券、中国邮政、中石油和广州供电局是星环的基准客户。

总的来说,我们在2019年的技术产品上取得了重大突破,这将整个公司的发展带到了一个新的里程碑阶段。我们将继续致力于品牌推广和市场份额。"

Starring Technology成立于2013年,总部位于上海,定位为提供大数据和人工智能的技术平台。创始人孙元浩曾担任英特尔亚太研发有限公司数据中心软件部门首席技术官,他于2009年带领团队研究Hadoop,并于2011年发布了英特尔Hadoop发行版。随着大数据概念的兴起,越来越多的人知道Hadoop,一种专门处理大数据的软件。

2013年,孙元浩带领创始团队成立了明星科技。

值得一提的是,2019年10月,明星科技完成了对D2回合的融资,仅比D1回合融资晚了半年多。与此同时,星环科技也被选为IDark Horse & Digital Watch发布工业互联网产业独角兽名单中的硬独角兽(Hard独角兽)称号。

大数据进入3.0周期

是人工智能、大数据和云计算的集成阶段

我们知道,自从计算机诞生以来,信息技术已经对人类生活的各个方面产生了微妙的影响。特别是,在过去十年左右,大数据、人工智能和云计算等技术得到了蓬勃发展,使得人们的生活方式每隔几年就会发生巨大变化。

此时,企业每天生成的数据量呈爆炸式增长。面对海量数据,传统数据库的信息技术架构和处理技术已经逐渐不能满足海量数据处理的需求。按照传统方式,数据量的存储和处理将消耗大量的时间和硬件成本。

孙元浩认为,目前大数据已经进入3.0时代。随着技术的不断延伸和发展,大数据、人工智能和云计算之间的界限越来越模糊,三种技术不断相互影响和融合。

“我们的意思是大数据3.0是从技术角度进行分类的。大数据技术可以分为三代。明星科技成立之初,处于大数据1.0阶段。大多数公司使用开源软件和应用编程接口来开发程序。问题是产品有限,只有大公司才有能力处理大数据。

大数据2.0时代是百花齐放的时代。越来越多的玩家参与技术竞赛,许多全新的技术诞生了,这些技术可以解决更多商业场景中的实际问题。

自2017年以来,结构化数据的处理问题已经基本解决,人们开始关注非结构化数据处理,尤其是图像、视频、语音和文本处理。在此期间,人们将在非结构化数据领域表现突出的深度学习技术与大数据技术相结合,大数据技术开始进入3.0时代。"

孙元浩告诉Idark horse &根据数字观察,大数据3.0时代的技术必须有四个统一:第一,统一的集成数据平台应该取代混合架构。

当前的企业数据服务架构通常需要包括不同的数据服务系统,如数据湖、数据仓库、数据集市、综合搜索等。许多企业采用复杂的混合架构,不仅产生巨大的数据冗余,而且严重限制了数据应用的及时性。新的大数据平台需要能够一站式满足所有需求,解决大数据的4v需求,应对从快速响应到大规模分析的所有级别的需求,并消除混合架构模型。

第二,统一的开放接口。据了解,作为一种经过历史测试的结构化查询语言,SQL拥有庞大的用户群和灵活性。开发人员可以在不了解架构细节的情况下高效地开发应用程序。然而,在过去,应用程序接口开发方法存在应用程序兼容性差和开发难度大的问题。

新一代大数据平台需要使用SQL来支持所有功能,包括数据仓库、OLTP数据库、搜索引擎、实时计算、时空数据库等。,以降低开发人员的门槛,加快产品开发和在线。

第三,统一管理和部署。云计算的灵活性和无处不在的访问可以让更多的数据服务和开发人员使用大数据技术,因此新的大数据技术需要能够提供云功能。

广电总局:推进有线电视网qq自由幻想怎么赚钱络IP 化、云化、智慧化、融合化

摘要:升级改造的重点是构建基于“云、网络、终端”的新网络架构。

10月8日下午,国家广播电影电视总局发布了《有线电视网络升级改造技术指南》,提出要加快有线电视网络与融合媒体、5G移动网络等新兴格式和通信渠道的相互融合和协同服务,推广有线电视网络& ldquo云、网络、终端和现状;有效整合资源要素,努力建设高速、无处不在、智能、安全的新型有线电视网络。

以下是“有线电视网络升级改造技术指南”的全文:

有线电视网络升级改造技术指南有线电视网络是党的重要宣传思想文化阵地,是国家重要的信息基础设施,是建设强大网络的重要战略资源。党中央、国务院高度重视有线电视网络的发展。国家-& ldquo;十三五规划。规划大纲和现状;十三五规划。本期文化改革发展规划、国家信息化发展战略规划和国家数字经济发展战略规划都将有线电视网络的发展列为重点项目并给予了重点支持。

然而,从有线电视网络本身的发展来看,随着近年来互联网、大数据、云计算、人工智能、5G等高科技技术的快速发展及其在媒体领域的广泛应用,有线电视网络的传统技术体系和功能架构已经无法满足新业务、新服务和新格式快速发展的需求。加快有线电视网络的技术改造和转型升级,加快有线电视网络的优质创新发展,不断巩固和拓展党的主流舆论阵地,不断满足新时期人民群众对高质量视听生活和信息服务的新需求和期望,是全系统的重要任务。

指导意见提出了有线电视网络升级改造的总体目标、技术框架和相关要求。目的是促进和引导各级有线电视网络的技术改造和转型升级,为推进深度媒体整合、深化智能广电格式创新、加快公共服务质量提升和效率提升、推进有线和无线协同服务提供技术支持。

一.总体目标

有线电视网络的升级改造是基于国家新一代信息基础设施建设和数字经济发展的要求,巩固和扩大宣传思想文化阵地,着眼于更好地满足新时期广大人民群众对精神文化和信息服务的新期待,以促进有线电视网络的优质创新发展为主线, 以新一代信息通信技术为重点,深化有线电视网络深度整合,以知识产权、云、智能、集成为方向,加快技术优化、系统重构、流程再造,推进有线电视网络-& ldquo; 云、网络、终端和现状;资源要素的有效整合、容纳和共享以及智能协调将着眼于建设一个高速、无处不在、智能、安全的新型有线电视网络。

知识产权:强化互联网思维,顺应知识产权发展趋势,把加快有线电视网络与互联网技术的深度融合作为升级改造的重要途径,全面推进知识产权技术在有线电视网络中的部署、应用和整合演进。

云化:推动云计算技术在有线电视网络中的应用,促进云资源的整合与协调,降低网络建设和运营维护成本,提高运营维护效率,支持快速业务部署、灵活调度和统一管理。

智能化:加快大数据、人工智能、软件定义网络、网络功能虚拟化、边缘计算和微服务等技术的部署和应用,全面提升有线电视网络传输、运营、管理和服务的智能化能力和水平。

融合:适应媒体融合和移动优先的发展趋势,加快有线电视网络与融合媒体、5G移动网络等新兴格式和通信渠道的相互适应和协同服务,促进广播通信协作、有线无线融合以及大屏幕和小屏幕互动,为媒体融合的深入发展提供有力支持。

二.技术框架

有线电视网络升级改造注重建设与现状;云、网络、终端和现状;基于的新网络架构,包括智能广播电视有线网络服务云、骨干网、城域网、接入网和终端,如图1所示。

图1有线电视网络技术架构示意图

智能广电有线网络服务云(Smart Radio and Television Cable Network Service Cloud)由分布式中央云平台、省级云平台等云平台组成,可以实现智能、敏捷、灵活的互联和资源共享,以及网络和服务的智能调度和集中管理。中央云平台应能够调度和管理省级云平台,并为整个网络提供资源调度和跨域服务。省级云平台接受中央云平台的统一调度和管理,为全省用户提供服务。其他云平台是指除中央云平台和省级云平台之外的云平台。骨干网分为国家和地区/省级骨干网,承载广播电视业务、数据业务和其他业务的骨干传输。全国骨干网实现了31个省级有线电视网与其他网络的互联。省级骨干网实现辖区内有线电视网络的互联。

#p#分页标题#e#

城域网承载广播电视服务、数据服务和其他服务,实现城域内的接入汇聚。接入网通过有线和无线融合为用户提供广播和电视服务、数据服务和其他服务的接入服务。终端直接面向用户,实现服务接收、呈现和交互操作。

三.技术要求

现阶段,有线电视网络的升级改造应当能够满足承载以下业务和服务的需求:一是广播电视业务、数据传输等通信业务;第二,县级金融媒体中心和其他综合媒体服务,公共服务如紧急广播,高科技视频服务如4K/8K/AR/VR,政府和企业服务如专用私人网络。第三,云计算、大数据、物联网、安全等技术服务。

(1)云

&ldquo。云&rdquo。智能有线网络服务云(Smart Cable Network Service Cloud)是基于云计算、大数据、人工智能、集成媒体处理和云安全等先进技术的综合服务云,支持国家有线网络和业务。

1.云技术架构

智能广电有线网络服务云由六部分组成:应用服务层、平台服务层、基础设施服务层、支持设施、管理域和安全域。技术架构如图2所示。

图2智能广播有线网络服务云技术架构示意图

应用服务层可以协同管理和调用平台服务层的各种能力,并向相应的用户提供各种应用服务。平台服务层具有媒体处理、内容分发、业务运营支持、网络运营支持、大数据、人工智能和安全支持的能力。媒体处理能力包括编码、解码、转码和打包。内容分发功能包括内容切片、缓存和分发等。业务运营支持能力包括用户管理、业务管理、计费管理和营销管理等。网络运行维护支持能力包括设备管理、巡检管理和故障管理等。大数据能力包括大数据采集、预处理、数据挖掘等。人工智能能力包括智能识别、智能处理和智能分析等。安全支持能力包括识别、流程清理和安全保护。

基础设施服务层基于计算、存储、网络、安全性和媒体特异性等物理资源,通过云计算技术对物理资源进行虚拟化和管理,并生成基础设施资源库,该资源库可以通过调度、动态迁移和计费度量进行分配,以实现资源的灵活调度和管理。辅助设施包括基本物理设备、水、电、空调和计算机房。

管理域负责云平台的运维管理支持,应具备资源管理、运维管理和运营管理等能力。实现资源部署应用、变更恢复、统计监控、调度优化等管理。安全域负责云平台基础设施、网络和服务的安全管理,确保智能有线网络服务云的运行安全。

2.云部署模式

智能广播有线网络服务云采用私有云、公共云和专有云的混合架构。中央云平台、省级云平台等云平台可以根据需要采用不同的部署模式,遵循统一的管理和调度界面。

对于网络虚拟化、支持系统和其他组件,它们应部署在私有云上,软件和硬件应相互隔离,以确保核心业务的安全性。

3.数据中心技术要求

数据中心(DC)为智能有线网络服务云提供基本支持,该云分为DC中部、DC地区和DC边缘地区。中央DC为中央云平台提供基本支持,区域DC为省级云平台提供基本支持,边缘DC为智能有线网络服务云的边缘计算提供支持。为加快数据中心的规模、集约化和绿色发展,升级改造应综合考虑网络架构、跨领域合作、业务流程、用户规模、区域分布、机房和传输资源等因素。探索建立新型数据中心。

互联网交换中心。

(2)网络

&ldquo。Net &rdquo。包括主干网、城域网和接入网。升级改造应满足互联网接入、高科技视频等大带宽业务传输的需求。在满足当前业务的基础上,网络设备应具备承载包括5G和物联网业务在内的综合业务的承载网平滑演进的能力,具有简化协议、网络切片、时钟同步等功能。以满足低延迟、高可靠性和大规模连接的承载要求。网络运行应部署智能管控平台,实现网络规划、部署、运行、维护和优化的智能管理。根据业务发展,网络建设应促进网络中网元云部署、软件定义网络等智能控制技术的应用,实现网络控制与转发分离、软硬件解耦。

1.主干网主干网包括主干数据网和主干传输网。

(1)主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络主干数据网络节点包括核心节点、主干节点和边缘节点。核心节点部署在现有节点的基础上,如北京、上海、广州、武汉、Xi安、成渝等。骨干节点按地区/省部署,应通过双重属性连接到核心节点。边缘节点部署到地级市,直接与城域网接口。

#p#分页标题#e#

(2)骨干传输网国家骨干传输网应采用环网保护和多平面结构。OTN单通道容量建议不低于200Gbps。关键链路可考虑单通道容量为400Gbps/1Tbps的OTN系统。区域/省级骨干传输8网络优先采用网状保护结构。OTN单通道容量不应小于100Gbps。对于关键链路,可以考虑单通道容量为200Gbps/400Gbps的OTN系统。

2.城域网分为城域数据网和城域传输网。

(1)城域数据网络城域数据网络体系结构包括核心层和汇聚层。网络拓扑结构应采用双重属性结构。汇聚层根据实际需要部署主要或次要汇聚节点。汇聚层采用25G/50G速率接口,核心层采用100G及以上速率接口。

(2)城域传输网城域传输网应以网状结构优先优化升级,城域传输网OTN单通道容量不低于100Gbps,关键链路可考虑部署单通道容量为200Gbps的OTN系统。3.接入网的升级改造应在现有同轴接入的基础上加快光纤接入的推进,以满足超高清电视频道、高速互联网接入和各种增值业务的发展需求。积极引进和部署全知识产权和高速无源光网络(PON)系统,能够为城市家庭提供总带宽不低于1Gbps的广播电视节目和宽带服务接入,为农村家庭提供总带宽不低于100Mbps的广播电视节目和宽带服务接入,推动政府、学校、医疗卫生、科技园、商业建筑、酒店等单位和部分城市家庭部署千兆光纤宽带接入。9接入网升级还应充分考虑有线和无线、固定移动融合的发展,并配合5G网络建设网络,从而实现有线电视网络资源和5G基础设施的共建共享。

(三)结束

&ldquo。结束。包括机顶盒、电视一体机、家庭网关等终端设备(如电脑、掌上电脑、手机、虚拟现实设备等)。)。各种终端应支持日志和查看数据收集功能。有线电视网络终端应充分利用自主创新技术,加快智能化、超高清化和标准化的推广,逐步实现大规模集中采购和社会化自主采购。

Iv .互连要求

全国有线电视网络互联互通建设应当与全国有线电视网络整合和各级有线电视网络升级改造的总体规划和推进相协调。积极推进网络间骨干直接连接点(NAP点/直接连接点)的建设,确保网络间互联互通的质量。积极推进异构云平台互联合作,支持跨区域、跨网络、跨终端的服务接入和内容共享,满足用户无处不在、社会化、个性化的服务需求,实现广电资源互联整合共享。

五、支持系统要求

支持系统包括业务运营支持系统和网络运营支持系统。

支持系统根据全球可感知、虚拟化和智能目标进行升级。在云部署中,应采用硬件资源隔离,以避免云10资源的共享和竞争,并确保资源的优先调用。

支持系统应根据监管机构的要求提供相应的监管数据接口。

(1)业务运营支持系统(Business Operation Support System)业务运营支持系统实现有线电视网络整体业务的统一运营支持、管理和服务,包括用户管理、业务管理、计费管理、营销管理和客户服务管理等核心功能。业务运营支撑系统采用国家中心和省级中心两级结构。国家中心负责跨网络用户和服务的统一管理、统一账户采集、互联互通和跨域业务计费结算等。省级中心负责对省内用户和地方企业的运营支持,并有能力向国家中心上传运营数据。互联和跨域等全国性业务由国家中心管理,省级中心负责接受和与国家中心对接。

(2)网络运维支撑系统网络运维支撑系统实现网络管理、资源管理、运维管理等核心功能。网络管理应包括配置管理、性能管理、报警管理和安全管理等功能。能够实时监控网络运行,对网络性能进行综合分析,进行智能分析和故障自动定位等。同时,应根据监管部门的要求提供相应的监管数据接口。资源管理应包括管道/管线管理、端口管理、机柜管理、设备管理和其他功能。基于地理信息系统技术可以对网络资源进行检查和存储,实现对网络资源的集约化、综合化动态管理。

运行维护管理应包括调度表管理、日常检查、故障调度表等功能。与资源和网络管理接口,实现链路资源的电子开放、故障工单的自动分发、日常检查的电子记录等功能。

六、IPv6部署要求

有线电视网络的升级改造应符合《国家信息发展战略纲要》的要求;十三五规划。《国家信息化计划》、《推进互联网协议版本6 (IPv6)规模化部署行动计划》、《广电有线网络IPv6规模化部署和推广实施指南》的要求推动了IPv6在有线电视网络中的部署和应用。

#p#分页标题#e#

有线电视网络运营商应当按照《中国广播电视IPv6地址规划(2018年版)》(广电[〔2018〕45号)使用IPv6地址,并将IPv6地址的分配和使用情况报中国广播电视网络有限公司备案。

七.基础设施要求

有线电视网络运营机构应当按照原国家广播电影电视总局和建设部联合发布的《关于加强有线电视设施建设和管理确保有线广播电视安全传输的通知》(广电总局字〔2002〕429号)的要求编制有线电视网络路由规划,并报当地规划行政主管部门批准。

同时,加强与城乡规划、自然资源、住房、城乡建设和投资等主管部门的沟通,米米赚客,积极推进网络基础设施需求融入当地土地和空间规划,在住宅小区、商业建筑和公共住房的审批和建设中预留有线电视网络基础设施建设资源。

有线电视网络基础设施的升级改造应全面提高基础网络资源接入的灵活性、安全性和可扩展性。加强机房和管道资源的规范化管理、建设和科学利用,增加城市机房和室外交接箱的数量和密度,逐步部署云网络集成智能模块机房;提高机房的拥有率,促进租赁机房产权转换、核心区架空线路落地、管道优化等。确保网络结构的稳定性;采取先进的节能技术措施和节能管理措施降低能耗。

有线电视网的国家骨干网和区域/省级骨干网建设应当统筹协调。在升级过程中,应优先升级性能严重恶化的电缆干线设施;对于容易发生事故的路段,应增加路线保护,为路段提供主要路线和备用路线。对有潜在故障危险的节点应实施故障保护措施。

八、安全要求

有线电视网络升级改造应在规划、设计、采购、施工、验收、运输和维和管理等各个环节实施安全防护措施,制定总体安全规划和安全计划,升级改造前进行安全评估和论证,竣工后进行安全测试和验收。

有线电视网络升级改造应全面提升网络、系统和平台的安全防护能力,建立主动高效的网络基础设施防护体系,提升重要数据资源和个人信息的安全防护能力,跟踪网络和系统变化,及时调整安全措施。增强有线电视网络的抗攻击能力,增强对异常流量的监控和快速处理能力。

有线电视网络的升级改造应促进安全可控的国内加密算法和密钥产品的应用,提高密钥信息基础设施的可控安全水平。加强供应链安全管理,推进关键信息基础设施网络产品的安全监控和认证,实施关键信息基础设施网络产品和服务采购国家安全审查制度。

有线电视网络升级改造应加强云安全系统建设,建立良好的域控制系统和三维防御系统,提升整体物理环境安全、主机安全、网络安全、虚拟化安全、接口安全、交通安全、数据安全、应用安全和管理安全等。确保智能有线网络服务云的安全运行。

有线电视网络升级改造应加强网络行为分析和追踪能力建设,实现网络实体行为的分析和挖掘以及高风险行为的识别、预警、追踪和定位,具备快速发现和追踪各种危害网络安全行为的能力。有线电视网络升级改造应符合国家和行业《信息安全技术网络安全等级保护基本要求》(GB/T 22239-2019)等网络安全等级保护要求。云平台的安全级别不得低于其承载的业务系统的安全级别。广播电视安全播出应当符合《广播电视安全播出管理条例》(总局令第62号)及其实施细则。

相关阅读

  • 5G,不只比网赚图标4G多一G

  • 米米赚客文章库
  • 日前在上海举行的2019世界移动大会上,一套5G+8K设备在展会现场拍摄并直播苏绣制作。超高可靠与超低时延通信:应
关键词不能为空
极力推荐