分享

一周活动早知道|分布式存储架构设计与运维、主流监控工具日常应用、电信行业大数据分析平台容器化改造、K...

 yi321yi 2020-05-05

社区每周均组织线上线下交流探讨,并邀请领域内专家分享、答疑,欢迎参与!

Zabbix、Prometheus等主流监控工具日常应用在线答疑

4月1日-4月10日

Linux系统在企业中的应用程度已经非常广泛,人们听到过太多关于Docker和Kubernetes的消息,以至于忘记了监控和日志记录也是同样重要的任务。Docker持续发展,随之而来的是围绕它构建的服务生态系统的成长。虽然部署系统主要涉及在系统内运行单个应用程序或服务,但随着部署规模越来越大,不仅仅是在操作系统或应用程序级别,了解环境状态和运行状况也变得越来越重要。

监控和测试工具分为实时数据库、数据采集工具、可视化工具、意见反馈工具、日志记录器等等。在过去的几年里,开源产品和商业监控应用程序发生了爆炸式增长,涌现出了一批优秀,且应用广泛的监控工具,如Zabbix、Prometheus等。由于企业在监控工具的可选性上越来越大,同时随着企业各系统的增加及多样化,多个系统应用多个监控工具的情况越来越多,这给众多的系统运维人员带来了一定的困扰,需要应用和运维多个工具。因此,这就要求系统运维人员要掌握多个监控工具,以及解决这些工具在日常应用中的各种故障,难题等。

在本次答疑活动,twt社区邀请了多位Zabbix、Prometheus等监控工具的应用高手,在线帮助大家解答这些Zabbix、Prometheus等监控工具的日常应用问题。大家可以将如下范围的问题发布到本次活动中:

1、关于监控工具/产品选型;

2、关于监控工具/产品应用过程遇到的具体问题;

3、关于监控工具/产品应用现状。

活动地址:

http://www./activity/?id=1539

电信行业如何基于OpenShift实现大数据分析平台容器化改造

4月2日

随着电信行业信息化速度的加快,不同类型的数据皆呈现出爆发性的增长并质变成大数据。随着海量、细致的新数据源的不断呈现,大数据在运营、策划、营销等方面的应用,得到不同层面的技术指标,产生系列的报表并反馈在生产和运营中,大数据价值的挖掘应用成为智慧企业发展的所迫切需要迈出的重要一步。基于海量数据的存储技术、挖掘技术、计算技术、剖析技术等各种技术的飞速进步,使企业可以深化发掘大数据的发展潜力,应用以往无法应用的商业信息,从而发现大量的商机。自2012年发展至今,大数据已经渗透到了每个行业和业务领域,逐渐成为重要的生产因素。但是,传统的信息化系统和工具逐渐无法承载如此庞大的数据存储和运算,分析效率逐步地下,以至于无法胜任数据挖掘分析的需求。在这种情况下,决策者们往往向大数据靠拢,对原有信息系统进行改造,去拥抱真正意义上的大数据资产。面对如此庞大而复杂的数据的处理需求,传统架构无法完全解决大数据平台的需求,电信企业开始尝试专门设计基于云计算、面向数据挖掘和数据可视化等领域的大数据服务容器平台,主要的应用场景包括数据的移植、数据整合、数据处理等,具体建设难点有:

  • 如何保证性能、稳定性及安全性,如果数据体量大,容器化是否能撑住

  • 多数据库协同,如何保证数据ACID及跨域访问

  • 数据源的异构协同、数据的敏捷抽取问题

  • 硬件资源利用的高效化与多复用化

  • 资源调度响应的即点即用和流量穿透

针对这些难点和问题,社区邀请到红帽电信行业资深技术专家赵锡漪,为大家分享电信行业大数据分析平台基于OpenShift实现容器化改造的解决方案和国外实践案例,同时在线为大家答疑解惑。此外,红帽电信行业数据处理PaaS平台解决方案可通过OpenShift和多个工具组合帮助企业高效解决如下数据处理容器化改造典型需求:

1)传统数据库如何迁移至PaaS平台;

2)不做传统数据库容器化,但应用部署在PaaS平台上,如何去对接数据层和应用层?;

3)新的应用不再借助传统数据库,如何在直接在PaaS平台解决数据处理问题?

欢迎各位电信行业会员报名参与本场活动,可以下载资料参考学习,还可以在线提出您的问题,与专家在线探讨。

支持企业:

欢迎进入红帽云社区

redhat.

专家简介:

赵锡漪   红帽高级解决方案架构师

20年IT从业经验,专注服务于电信行业。前后就职于BEA、甲骨文、红帽公司。伴随电信运营商的成长,先后为运营商BOSS系统的设计与演进、OSS系统的规划与演进、省分至总部的集中化等重大决策点设计做出过努力与贡献。目前更聚焦于业务支撑系统的容器化、PaaS化演进;5G/NFV/边缘计算/AI等新技术的设计与落地;IT/CT融合演进方案等多种最新技术理念在电信运营商内的推广与实现。熟悉中间件、数据库、微服务、DevOps,对IT规划、架构设计和项目管理有多年丰富的经验。

郭维   广东联通

分别担任过联通大数据产品经理,数据组组长,数据挖掘工程师,大数据架构师,高级研发工程师。自2012年来,一直在广东联通数据中心工作,先后从事ETL、数据库、数据仓库、hadoop、实时平台、微服务,容器云等平台和应用的架构和开发,以及数据和平台的运维,熟悉大数据的应用工具,以及大数据的元数据管理和数据治理工作。

活动礼品:

本次活动的奖品是书籍《OpenShift在企业中的实践:PaaS DevOps 微服务》,领取方式请联系社区运营及本场活动负责人:赵法威(微信号zhaofawei26)

活动地址:

http://www./activity/?id=1535

K8S Docker容器云平台日常运维在线答疑

3月25日-4月3日

当前大中型企业普遍的共识之一是要以科技为依托,通过科技创新引领银行的转型升级。云计算、大数据、人工智能成为各银行科技部门重点的投资建设领域。云计算领域的建设主要集中在IaaS和PaaS,目标是降低数据中心成本的同时,为上层应用的创新、快速迭代和稳定运行提供有效支撑。传统的IaaS调度的是虚拟机或者物理机,粒度较大,相对传统的虚拟化技术,在资源使用率、灵活性和弹性方面提升度并不高。依托传统IaaS建设而成的PaaS,也会面临同样的问题。而容器技术恰好可以比较好的解决这些问题,并且在微服务、DevOps、分布式等方面天生具备优势,因此成为数据中心新一代云基础架构的选择。  

建设k8S docker容器云平台的意义:1.让应用真正意义上弹性扩缩容;2.为应用微服务化提供有力支撑;3.让应用实现自动化故障探测、隔离和恢复;4.大幅度提升资源使用效率。企业都在做容器云的建设的同时,肯定会遇到这样那样的问题,因此twt社区邀请一些k8s docker运维实践经验比较丰富的专家线上进行运维过程中的问题答疑,解决大家日常运维问题。

答疑嘉宾:

Rock, 担任某国内著名餐饮连锁企业运维负责人,从事过数据库、大数据和容器集群的工作,对DevOps流程和工具方面有比较深刻的理解,具有K8S docker的丰富实践经验。

活动资料:

基于Docker&Kubernetes构建PaaS平台

活动地址:

http://www./activity/?id=1537

银行业分布式存储架构设计与实施运维难点在线交流

3月16日-3月31日

随着互联网数据规模越来越大,并发请求越来越高,传统的关系数据库系统在性能、价格、可扩展性方面已经不能很好地满足需求。谷歌、亚马逊等互联网公司率先在后台基础设施中引入超大规模分布式存储系统,用来解决海量数据的存储问题。与传统的集中式存储技术不同,分布式存储没有将数据存储在某个或特定节点上,而是通过网络将各个节点分散的存储资源汇聚成一个虚拟的存储设备,将数据分散在各处。相较于集中存储,分布式存储成本地,扩展性好,弱化了关系型数据模型,可以得到高并发和高性能。
金融业务与服务,利用信息化技术持续改进与发展,已有近30年的历程,这一发展过程的各个阶段,既有改善了金融服务,促进实体经济发展的收益性结果,也有因各类未知问题造成的事件与影响等经验教训,因此,金融业务发展与信息技术的改进优化,是一个互相促进、迭代发展的过程。随着银行业务数据字化水平的提高,配套技术的基础建设和实际运维过程也提上了日程。如何发挥分布式存储优点,实现线上化的数字资产交易与服务业务,都是许多银行企业在技术发展重定位中思考的问题之一。
由于业务场景需要不同,很多银行业务需要以HDFS、TFS和Lustre为代表的分布式文件系统,部分业务会运用到以Dynamo为代表的分布式键值系统和以Bigtable为代表的分布式表格系统,最后是以MongoDB为代表的分布式数据库。如何为不同业务需求和使用场景恰如其分的规划与选型?在面对国产化安全可靠性前提的前提下,如何保障分布式存储的稳定运行和快速高效的运维管理?分布式存储系统如何利用自身特性实现建容灾环境搭建与业务的快速切换?数据安全与备份管理是否可以即敏捷又安全的进行规范部署?这些都是银行也必须要面对的实际问题
在这次交流中,我们将会对银行业诸如此类的常见问题,进行专家问诊与交流讨论:
(1)金融行业如何针对结构化与非结构化数据,进行分布式存储的选型?尤其像客服中心语音数据与信贷类交易系统的影像文件等非结构化数据,如何既经济又安全地选择市场上高口碑和好评的分布式存储进行对接?
(2)集中式存储向分布式存储的转型,有哪些技术难点和运维管理困难?转型前期、中期和后期都有哪些注意的要点,对于渠道类、账务类和数据报送类业务,如何合理、分批次进行转型?
(3)从运维的角度看,分布式存储设计时要考虑哪些方面?运维管理中的监控告警、备份恢复与异地容灾等应该如何规划?
本次线上同行交流,欢迎大家提出目前遇到的各种关于分布式存储设计和实施运维的难题,与专家及同行进行线上的探讨!
活动资料:
金融行业分布式存储方案设计

活动地址:

http://www./activity/?id=1529

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多