唯一小编 发布时间:2025-04-01
2025开年 DeepSeek引爆全球 应用端的算力需求迎来大爆发! 传统数据中心直呼“顶不住啦” 供电不稳?延迟爆炸? 唯一网络东莞沙田数据中心 电力双保险! 冷能黑科技! 光速传输! 6+1柴油发电机组 双路市电+UPS(不间断电源) 停电?不存在的! 磁悬浮冷水机组+蓄冷罐 PUE低至1.29! 每一度电 都变成AI的战斗力! 直连国家骨干网 AI翻译、客服0延迟! 万亿参数模型?毫秒响应拿捏! 智能调度系统 算力按需分配! 训练猛如虎,推理快如风 成本还狂降! 算力效率↑30%,延迟↓50%! 作为国内领先的数字经济基础设施服务提供商 唯一网络致力于让每个企业 低成本驾驭AI浪潮! 从解决方案到场景落地 唯一网络 “全时响应、全域覆盖、全链可控” 托起你的智能时代!
唯一小编 发布时间:2025-03-11
2025开年,最火爆出圈的科技事件,莫过于DeepSeek R1引发的AI领域变革,DeepSeek通过降低AI应用门槛,推动算力需求从“训练主导”转到“推理主导”。来自各行各业的许多公司宣布部署DeepSeek大模型,应用端的算力需求迎来大爆发。 DeepSeek及其相同类型AI大模型的发展,正在加速推进AI的普及与落地,让AI真正以低成本走入生产生活的每一个角落。也正是低成本大模型的出现,AI成为水电一样的公共基础设施才会成为可能。 这也意味着,AI大模型产业的商业模式也将发生变化。MaaS(模型即服务)、个人部署、混合云将共同发展,巨型数据中心与分布式边缘节点形成梯度协同,更多的算力需求会多点爆发。据IDC数据显示,从2022年到2026年,中国区人工智能算力规模年复合增长率将达到52.3%。这意味着数据中心需要具备更高的计算能力来满足日益增长的算力需求,传统的数据中心架构和设备难以满足这一要求。 作为一种强大的人工智能应用,DeepSeek背后需要强大的算力支持。面对崭新的行业变局,智算中心需加快转型,从简单的算力提供商转向专业服务商,提供覆盖算力全生命周期的专业服务,提高算力资源利用效率。 在AI算力需求呈指数级增长的背景下,现代数据中心正朝着"智算一体化"方向加速演进。头部服务商纷纷构建智能算力集群。更值得关注的是,新型智算中心正构建起"算力-算法-数据"的协同网络,通过智能调度系统大幅提升GPU利用率,真正实现算力资源的精细化运营。 作为国内领先的数字经济基础设施服务提供商,在应对DeepSeek大模型带来的算力挑战方面,唯一网络东莞沙田数据中心展现出诸多优势,以4000MVA供电容量构筑起大模型训练的能源心脏。双线市电引入与2N UPS配置构建电力双保险,配合6+1冗余柴油机组及15分钟高储蓄电池,实现持续供电。磁悬浮变频冷水机组与4×80m³蓄冷罐组成的“冷能矩阵”,让50kW高密机柜在封闭冷通道中稳定运行,PUE值牢牢锁定1.15,将每一度电转化为有效算力。 对于类似于人工智能客服、ai翻译等有时效要求的客户,唯一网络东莞沙田数据中心直连国家骨干网并辐射全国热点城市,可实现低延迟、高带宽的数据传输,为万亿级参数模型的推理任务提供毫秒级响应保障,确保DeepSeek大模型在运行时能快速获取所需数据,提升模型响应速度。 同时,唯一网络东莞沙田数据中心具备先进的资源调度系统,能根据DeepSeek大模型不同阶段(如训练、推理)的负载情况,动态调整计算、存储、网络等资源分配。通过这种动态且智能的方式,灵活应对需求的波动,极大提升了资源的利用效率。这不仅有效降低企业的算力成本,还为DeepSeek大模型的稳定运行与高效运作筑牢坚实基础。 此外,DeepSeek大模型在不同行业应用时,需求存在差异。唯一网络东莞沙田数据中心根据DeepSeek大模型在金融、教育、医疗、政务等不同行业的具体应用场景,提供一站式定制化服务。为客户打造专属模块及企业自有数据中心,实现设计、建设、代维、运营、服务全生命周期业务的数据联通,赋能数字中心成为企业IT和通信服务的“战略服务中心”。 从解决方案到场景落地,唯一网络以“全时响应、全域覆盖、全链可控”的服务体系,用心服务,放心托付,让每个企业都能低成本驾驭AI浪潮。
唯一小编 发布时间:2025-02-12
2025年1月,唯一网络全资子公司厦门市唯云网络科技有限公司凭借其卓越的技术实力、创新的解决方案以及深厚的行业资源,荣获中国联通湖南省分公司2024年度“IDC优秀合作伙伴”称号。 唯云网络深耕IDC行业20年,基于丰富的产业资源及专业的运维体系为客户提供高品质的IDC产品,为客户提供优质的基础资源服务和专业的行业解决方案。 唯云网络作为湖南联通值得信赖的战略合作伙伴,始终秉持协同共赢的理念,深度融入主业的创新生态体系。依托多年行业积淀与技术创新实力,唯云网络持续优化云网融合服务能力,致力于打造数字化转型的坚实底座,为千行百业注入高效算力,助力湖南联通在数字经济浪潮中乘风破浪,为其业务高质量发展提供了强有力的支撑与保障。
唯一小编 发布时间:2025-02-12
祥蛇昂首闹元宵 万象更新庆团圆 元宵佳节到来之际 唯一网络祝您元宵快乐,幸福美满! 月照元宵夜 人聚情更浓 唯一网络愿与您携手并进 在这团圆佳节里 共享甜蜜 共绘美好新篇
唯一小编 发布时间:2025-02-05
新年新气象,卯劲开新局! 今天,唯一网络迎来农历蛇年的开工首日 带着饱满的精神 回归各自的工作岗位 向着新一年目标全速出发 一年之计在于春 站在新征程的起点 怀揣梦想与希望勇敢启程 元气满满对待工作!加油2025!
唯一小编 发布时间:2025-01-30
初二聚一堂,笑语盈门绕 愿您在新的一年里 心想事成,万事如意
唯一小编 发布时间:2025-01-29
零点的钟声还在耳边回荡 初一的拜年祝福准时来到 农历新年即将到来 唯一网络给您拜年啦! 时光轮转,川流不息 新的一年 唯一网络将持续优化服务品质 稳抓“技术驱动“底座 为中国数字经济发展贡献力量
唯一小编 发布时间:2024-12-31
日月其迈,时盛岁新。回顾2024,唯一网络作为国内领先的数字经济基础设施服务提供商,开拓进取,不断推动数据中心、云计算和云联网业务、数字化转型工作向高质量发展的总体目标奋进,在与时俱进中谱写新蓝图,在前行的道路中积蓄新动力,在创新中取得新突破。 新年伊始,让我们共同回顾2024年的重要时刻。 党建:星火之轮,生生不息 “党的历史我知道”党建知识竞赛 2024年9月20日,为深入学习贯彻党的二十届三中全会精神,特别是巩固拓展学习贯彻习近平新时代中国特色社会主义思想主题教育成果,在中国共产党成立103周年,东莞党组织成立100周年之际,由中共东莞市互联网行业委员会主办,广东唯一网络科技有限公司承办,东莞市信息与网络安全协会协办的“庆祝东莞党组织成立100周年,党的历史我知道”党建知识竞赛圆满落幕。 “筑梦百千万·党建赋能业务发展” 2024年10月22日,由中共东莞市委网信办和东莞市互联网行业党委主办,东莞市互联网协会承办的“筑梦百千万·党建赋能业务发展”党建活动于唯一网络东莞总部顺利举办。为巩固拓展主题教育成果,加强互联网企业自身建设能力和业务发展潜力,以党建引领互联网企业创业创新,促进党建工作与业务发展深度融合、同频共振,助力“百千万工程”高质量发展。 “结对帮村”便民服务 2024年10月23日,东莞市委网信办党支部、市互联网行业党委联合市信息和网络安全协会成员企业党员、唯一网络等企业党员代表赴万江街道胜利社区开展“结对帮村”便民服务主题党日活动。党员们统一着装、斗志昂扬,为居民送温暖,为社区添新彩。 新寨小学教学物资捐赠 2024年3月27日,唯一公益小分队前往揭阳玉滘镇新寨小学,为全校的学生带去了458份教学物资,并在学校举行了“唯爱同行 一路相伴”教学物资捐赠仪式,唯一网络公益小分队、新寨小学校长、学校教师代表、学生代表等约26人出席了本次捐赠仪式。 韶关乳源助学 2024年9月6日-9月8日,唯一公益小分队驱车前往韶关乳源,为53位品学兼优家庭困难的学生们送上温暖,“唯”爱筑梦,爱伴成长。 荣誉:前行之锚,坚定信念 SAC产业技术大会轮值委员单位 2024年3月8日,由厦门软件园发展战略咨询委员会(SAC)主办的“数字驱动·文化无界”2024年SAC第一季度产业发展大会暨2023年度会议(第七届)在厦门软件园二期甚妙视觉XR数字影棚成功举行,会议表彰了一系列新入会企业、年度最佳分享嘉宾以及杰出创新奖和杰出经营等奖项,唯一网络子公司厦门市唯云网络科技有限公司凭借持续不断地对产品与服务的深耕与创新,荣获“2023年度SAC产业技术大会轮值委员单位”称号。 智慧商业数字化运营优秀服务商奖 2024年4月11-12日,由中国零售(餐饮)CIO俱乐部、《智慧零售与餐饮》新媒体主办的“2024第十届智慧商业数字化运营高峰论坛”“2024中国零售CIO俱乐部春季思享会”,论坛颁发了“2023-2024智慧商业数字化运营优秀服务商奖”以表彰优秀企业对行业做出的贡献。唯一网络子公司厦门市唯云网络科技有限公司凭借持续不断地对产品与服务的深耕与创新,荣获“2023-2024智慧商业数字化运营优秀服务商奖”。 福建省创新型民营企业100强 2024年9月19日,福建省工商联发布2024福建省民营企业100强、制造业民营企业100强、服务业民营企业100强、创新型民营企业100强和民营企业社会责任100佳5个榜单。唯一网络全资子公司厦门市唯云网络科技有限公司、厦门市世纪网通网络服务有限公司凭借在科技创新、产品研发等方面的投入和突出成果,入选2024年“福建省创新型民营企业100强”榜单。 中国互联网成长型前二十家企业 2024年10月17日,中国互联网协会在厦门发布了《中国互联网企业综合实力指数(2024)》报告,唯云网络凭借对市场需求的敏锐洞察和持续的技术创新,在竞争激烈的互联网行业中脱颖而出,荣获“2024年中国互联网成长型前二十家企业”称号。 福建省互联网综合实力前50家企业 2024年11月15日,2024年中国福建互联网大会在福建石狮举办。会上,福建省互联网协会对外发布了《福建省互联网行业发展报告(2023年度)》和2024年福建省互联网企业综合实力研究结果。唯一网络下属两家子公司“厦门市唯云网络科技有限公司”和“厦门市世纪网通网络服务有限公司”凭借在科技创新、产品研发等方面的投入和突出成果双双入选“2024福建省互联网综合实力前50家企业”。 中国IDC产业算力创新突破奖 2024年12月19日至20日,第十九届中国IDC产业年度大典在北京举办,大典表彰了一批在算力技术创新、绿色算力实践、出海业务拓展等方面做出杰出贡献的优秀企业、项目和团队。唯一网络在数据中心领域丰富的行业经验和品牌优势,以及多年来在数据中心的建设运维成果揽获“2024年度中国IDC产业算力创新突破奖”奖项。 盛会:群英荟萃,共绘宏图 #生成式AI技术创新日# 3月21日,亚马逊云科技与广东唯一网络科技有限公司在唯一网络厦门分公司创新室内成功举办了《生成式AI技术创新日》线下活动。本次活动旨在探讨最新的生成式AI技术趋势和实践洞察,并提供了近期热门的Claude3模型动手实战体验。活动吸引了来自各行业的参与者,他们齐聚一堂,共同探讨生成式AI技术的应用前景。 #2024企业数字化转型推进会# 2024年5月16日,由东莞市工业和信息化局指导,东莞市专精特新企业联合会主办,南兴装备股份有限公司、广东唯一网络科技有限公司等10家企业联合承办的“数智引领,洞见未来”2024企业数字化转型推进会在东莞厚街顺利举办。推进会旨在共享应用案例,紧跟时代步伐,积极拥抱数字化转型,唯一网络在政府的正确领导下,不遗余力地为千行万业数智升级谋发展,注入新时代力量,焕发制造业新活力。 #云上数字创新交流会# 2024年9月12日,唯一网络联合阿里云在广州成功举办了云上数字创新交流会。本次活动汇聚了众多知名企业负责人与资深行业及云计算技术专家,围绕云计算架构赋能企业数字化创新增速的最新动向、技术优势、应用模式等内容展开探讨。应需求而生、应需求而变、应需求而兴,在企业数字化和全球化发展过程中,云上创新的脚步从未停止。唯一网络持续提升服务品质,主动应变,继续为企业赋能,共同打造具有核心竞争力的未来型企业。 #厦门国资国企战略性新兴产业培训班# 2024年9月25日至9月26日,由厦门国资委组织的厦门国资国企战略性新兴产业培训班在北京成功举办。作为本次培训班的协办单位,唯一网络将积极整合资源,搭建平台,促进企业之间的交流与合作,推动技术落地与应用,助力企业在战略性新兴产业发展与数字化转型中走在前列。在未来,唯一网络将以更加坚定的步伐,积极投身于战略新兴产业的发展浪潮中,为厦门的经济发展和国家的产业升级贡献更大的力量。 跋山涉水不改一往无前,山高路远但见风光无限。 岁序更替,华章又新,过去的一年是总结,是共勉更是对新年新目标的蓄力。2025年,唯一网络将继续紧紧围绕国家数字经济发展战略规划,持续践行为客户创造价值、为伙伴创造未来、为社会贡献正能量的使命,推动互联网行业繁荣发展,与全体伙伴同舟共济,砥砺奋进,携手为中国数字经济发展贡献力量。 最后,唯一网络全体同仁恭祝大家元旦快乐!万事如意!
唯一小编 发布时间:2024-12-27
在这数字世界的深海里 有这样一群无名英雄 他们默默守护着 让每一个特数据都能在 虚拟与现实的波涛中安全航行 每一秒的平稳运行 都是对我们工作的最好证明 拥有一支超过百人的专业运维团队 每一位成员都是持 证上岗的精英 他们的专业覆盖了 电气、暖通、消防、智能化、网络、系统等 全方位领域 从硬件到软件 从物理到网络 我们全方位守护 让数字世界无懈可击 从硬件设施到软件系统 从物理安全到网络安全 我们全方位守护 不留任何死角 7*24小时 无论节假日还是深夜 只要客户需要,我们就在 这份承诺,是我们对责任的坚守 也是对荣耀的追求 2024年11月26日,联通(广东)产业互联网有限公司举办联通产互数据中心守护精英挑战赛,唯一网络志享团队在比赛中展现出卓越的专业水平,最终团队总成绩在全省名列前茅,揽得最高奖项“一等奖”及“最佳创意表现奖”。 左右滑动可见更多 唯一网络致力于提供 7*24 小时全天候的应急响应和保障,为客户提供高标准的支持。通过多层次的安全体系,包括网络边界隔离与防护、安全监测与运维操作审计等,确保业务在安全和稳定的环境中运行。 唯一网络 以专业守护未来 用科技驱动梦想 在这片数字世界里,我们是您最坚实的后盾 以专业为翼,以科技为帆 在这片浩瀚的数字海洋中 与您共创无限可能!
唯一小编 发布时间:2024-12-20
2024年12月19日,以“多元重构 算力跃迁”为主题的第十九届中国IDC产业年度大典(IDCC2024)在北京首钢园(四高炉)隆重举行。本次大会作为算力产业知名盛会,旨在从多元视角,深入探讨算力产业发展趋势、技术创新、商业模式、生态建设等话题,迎接算力新十年。 唯一网络战略合作部总裁黄小华(右二)代表唯一网络上台领奖 为积极推动算力产业高质量、可持续发展,中国IDC产业年度大典组委会启动“2024中国IDC产业年度评选”活动,评选旨在挖掘和推广产业内的优秀案例和先进经验,推动产业向更高水平迈进,并表彰在算力技术创新、绿色算力实践、出海业务拓展等方面做出杰出贡献的优秀企业、项目和团队. 经组委会与及专家评审组研究评估决定,唯一网络荣获“2024年度中国IDC产业算力创新突破奖”,唯一网络战略合作部总裁黄小华代表唯一网络上台领奖。 在全球人工智能和数字化转型的推动下,人工智能技术日新月异,对算力的智能化、绿色化发展需求日益增加。国家发改委、工信部、国家数据局等部门连续发布《深化智慧城市发展 推进城市全域数字化转型》及《数据中心绿色低碳发展专项行动计划》等一系列政策文件,我国算力产业迎来了前所未有的发展机遇。 唯一网络作为国内领先的数字经济基础设施服务提供商,在粤港澳大湾区核心区域拥有志享(华南)数据中心和东莞沙田数据中心,并与三大运营商深度合作,在全国建立及运营80多个数据中心节点,覆盖30多个省市,拥有100+全球POP点以及全国骨干环网资源的优质云网服务能力,打造数字经济发展的坚实底座,为千行百业启动算力引擎。 未来,唯一网络将持续深耕产品与服务,深入探讨如何构建新一代智能算力体系,实现多元算力资源的高效协同,应对算力经济新格局带来的挑战和机遇,以及如何在推动技术进步的同时实现与环境、社会的和谐共生。
2020年,笔者负责的一个高德打车弹外订单系统进行了一次扩分库分表和数据库迁移。该订单系统全局部署在阿里云上,服务应用阿里云ECS部署,数据库采纳阿里云RDS,配置中心基于阿里云ACM自研,数据同步基于阿里云DTS自研以及自研分库分表组件、分布式ID组件等等。 此次进行扩分库分表的背景是,原4实例4库、各个库64张表一共256张表,部分单表已超千万量级,按目前每日单量量级,一年内单表会达到上亿条记载,单表数据量过大会带来数据库性能问题。 4实例(16C/64G/3TSSD),4库(各个实例一个库),每库64张表,共256张表。 经过RDS后台一键诊断功能,来计算表空间应用情形(这里拿测试情境数据库举例)。 数据库的瓶颈主要表现在:磁盘、CPU、内存、互联网、联结数,而联结数主要是受CPU和内存作用。CPU和内存可以经过动态升配来提高,可是SSD磁盘容量最大支持到6T(32C以下最大3T、32C及以上最大6T)。 可是现阶段兼顾成本,可先将实例扩容一倍,采纳8个实例(16C/64G/3TSSD),各个实例建4个库(database)、各个库128张表(这里实质上是一个成本取舍的流程,理论上应该采取”多库少表”的准则,单库128张表其实太多了,单库建议32或64张表为宜)。 接下来如果实例压力提高可进行实例配置改进(16C/128G、32C/128G、32C/256G等);将来如出现单实例升配无法解决,在考虑扩容实例,只需求将database迁移至新实例,迁移成本较小。 按单表最多1000w条数据评估,4096张表可支持日5000w单3年(10.1压测标准)、日2000w单5年的架构。(因业务表比较多,此处忽略掉单条数据大小的计算流程) 32个库,各个库128张表。将来可最大扩容到32个实例,无需rehash,只需求迁移数据。 阿里云RDS规格和价钱一览 因扩分库分表涉及到rehash流程(256表变4096表),而阿里云DTS只支持同构库数据迁移,所以我们基于DTS的binlog转kafka实力自研了数据同步中间件。 整体数据迁移工作包含:前期预备、数据同步环节(历史数据全量同步、增量数据实时同步、rehash)、数据校验环节(全量校验、实时校验、校验规章配置)、数据修复工具等。 在进行数据同步前,需求先整理一切表的惟一业务ID,只有确定了惟一业务ID才学兑现数据的同步操作。 需求重视的是: 一旦表中没有惟一索引,就会在数据同步流程中造成数据重复的危险,所以我们先将没有惟一索引的表依据业务场景增加惟一索引(有也许是联合惟一索引)。 在这里顺便提一下,阿里云DTS做同构数据迁移,应用的是数据库自增ID做为惟一ID应用的,这种情形如果做双向同步,会造成数据覆盖的问题。解决案例也有,之前我们的做法是,新旧实物采纳自增ID单双号解决,担保新旧实例的自增ID不会出现冲突就行。由于这次我们应用的自研双向同步组件,这个难题这里不细聊。 分表规章不同决定着rehash和数据校验的不同。需逐个表整理是用户ID纬度分表还是非用户ID纬度分表、是否只分库不分表、是否不分库不分表等等。 数据同步全局案例见下图,数据同步基于binlog,独立的中间服务做同步,对业务代码无侵入。 后续对每一个环节进行介绍。 单独一个服务,应用游标的方法从旧库分批select数据,通过rehash后批量插入(batchinsert)到新库,此处需求配置jdbc联结串参数rewriteBatchedStatements=true才学使批处理操作生效。 另外特殊需求重视的是,历史数据也会存在不断的更新,如果先开启历史数据全量同步,则刚同步达成的数据有也许不是最新的。所以这里的做法是,先开启增量数据单向同步(从旧库到新库),此时只是开启积压kafka消息并不会真正消费;然后在开始历史数据全量同步,当历史全量数据同步达成后,在开启消费kafka消息进行增量数据同步(提升全量同步效率变少积压也是核心的一环),这样来担保迁移数据流程中的数据一致。 增量数据同步考虑到灰度切流稳定性、容灾和可回滚实力,采纳实时双向同步案例,切流流程中一旦新库出现稳定性问题或者新库出现数据一致问题,可迅速回滚切回旧库,担保数据库的稳定和数据稳妥。 增量数据实时同步采纳基于阿里云DTS的数据订阅自研数据同步组件data-sync兑现,主要案例是DTS数据订阅实力会自动将被订阅的数据库binlog转为kafka,data-sync组件订阅kafka消息、将消息进行过滤、合并、分组、rehash、拆表、批量insert/update,最后再上交offset等一系列操作,最终达成数据同步工作。 整体流程中有几个问题需求重视: 问题1:怎样预防因异步消息无顺序而致使的数据一致问题? 第一kafka异步消息是存在顺序问题的,可是要知道的是binlog是顺序的,所以dts在对具体进行kafka消息投递时也是顺序的,此处要做的就是一个库担保只有一个顾客就能保障数据的顺序问题、不会出现数据状态覆盖,从而解决数据一致问题。 问题2:是否会有丢消息问题,假如顾客服务重启等情形下? 这里没有采纳自动上交offset,而是每次消费数据最终入库达成后,将offset异步存到一个mysql表中,如果顾客服务重启宕机等,重启后从mysql拿到最新的offset开始消费。这样惟一的一个问题也许会出现瞬间部分消息重复消费,可是由于上面介绍的binlog是顺序的,所以能担保数据的最终一致。 问题3:update转insert会不会丢字段? binlog是全字段发送,不会存在丢字段情形。 问题4:循环消息问题。 后面进行单独介绍。 前文有提到,由于是256表变4096表,所以数据每一条都需求通过一次rehash重新做分库分表的计算。 要说rehash,就必须先介绍下目前订单数据的分库分表策略,订单ID中冗余了用户ID的后四位,经过用户ID后四位做hash计算确定库号和表号。 数据同步流程中,从旧库到新库,需求拿到订单ID中的用户ID后四位模4096,确定数据在新库中的库表位置;从新库到旧库,则需求用用户ID后四位模256,确定数据在旧库中的库表位置。 想象一下,业务写一条数据到旧实例的一张表,于是诞生了一条binlog;data-sync中间件接到binlog后,将该记载写入到新实例,于是在新实例也诞生了一条binlog;此时data-sync中间件又接到了该binlog……不断循环,消息愈来愈多,数据顺序也被打乱。 怎样解决该问题呢?我们采纳数据染色案例,只要能够标识写入到数据库中的数据使data-sync中间件写入而非业务写入,当下次接收到该binlog数据的时候就不必进行再次消息流转。 所以data-sync中间件需求,各个数据库实例创建一个事务表,该事务表tb_transaction只有id、tablename、status、create_time、update_time几个字段,status默认为0。 再回到上面的问题,业务写一条数据到旧实例的一张表,于是诞生了一条binlog;data-sync中间件接到binlog后,如下操作: 此时data-sync中间件将上面这些语句打包全体上交到新实例,新实例更新数据后也会生产对应上面语句的binlog;当data-sync中间件再次接收到binlog时,只要推断碰到tb_transaction表status=1的数据开始,后面的数据都直接舍弃不要,直到碰到status=0时,再陆续接收数据,以此来担保data-sync中间件只会流转业务诞生的消息。 数据校验模块由数据校验服务data-check模块来兑现,主要是基于数据库层面的数据对照,逐条核对每一个数据字段是否一致,不一致的话会通过配置的校验规章来进行重试或者报警。 通过数据校验,一旦发觉数据不一致,则需求对数据进行修复操作。 数据修复有两种案例,一种是适用于大范围的数据不一致,采纳重置kafkaoffset的方法,重新消费数据消息,将有问题的数据进行覆盖。 全局灰度案例:SP+用户纬度来兑现,SP纬度:凭仗灰度情境切量来做,用户纬度:依靠用户ID后四位百分比切流。 灰度切量的流程肯定要配合停写(秒级),为什么要停写,由于数据同步存在肯定拖延(正常毫秒级),而一切业务操作肯定要保障都在一个实例上,否则在旧库中业务刚刚调整了一条数据,此时切换到新库如果数据还没有同步过来就是旧数据会有数据一致问题。所以流程应该是: 虽然在切流之前,在测试情境进过了大量的测试,可是测试情境毕竟和生产情境不相同,生产情境数据库一旦出问题就也许是灭顶之灾,虽然上面介绍了数据校验和数据修复步骤,可是把问题拦截在发生之前是做服务稳定性最重大的工作。 因此我们提出了ABC验证的概念,灰度情境ABC验证预备: 详细灰度案例和数据源切换步骤: 整体数据迁移流程还是比较复杂的,时光也不是非常充裕(流程中还穿插着十一全链路压测改变),在有限的时光内集大家之力重复探讨发掘也许存在的问题,然后论证解决案例,不放过任何一个也许出现问题的环节,还是那句话,把问题拦截在发生之前是做服务稳定性最重大的工作。 流程中的细节还是非常多的,从数据迁移的预备工作到数据同步测试,从灰度步骤确定到正式生产切换,尤其是融合业务和数据的特色,有非常多需求考虑的细节,文中没有一一列出。 最终通过近两个月的紧张工作,无业务代码侵入、零事故、平稳地达成了扩分库分表和数据迁移的工作。
唯一小编 2021-03-01 阿里云服务器
改进terraform到v0.13后,初始化terraform也许会出现以下问题 因素是terraform自v0.13后就交给provider自己维持了。解决案例: 1.应用命令查看自己版本 示例得到 +provider.tencentcloudv1.53.0 2.粘贴以下代码至terraform配置中,version采纳自己的tencentcloudterraform版本
唯一小编 2021-03-01 腾讯云服务器
在网络相关的业务中,高弹性是往往被提及的一个架构设计目的,前两个我就碰到一个用户需求我们帮助设计一个高弹性的架构以承载他们周期性暴增的业务压力,用户90%以上的业务压力都集合在业务高峰期,因此在设计这个架构之初,我和用户就在纠结,到底是采纳更了解的“堆”服务器的想法呢,还是采取更具弹性的容器化的案例呢?其实作为一个技术人员,在问这个难题的时候就已经有确定的答案了,最终我们设计出了这样的一个架构: 容器平台选择阿里云的ACK(阿里云容器服务Kubernetes版)。其中ACK分成专有版和托管版,区分是专有版的管控节点需求用户自行预备,而托管版应用阿里云的资源进行资源管控,在托管版中又分成标准版和Pro版,其中Pro版有确定的SLA保障,生产系统建议选择Pro版。同时为了保障worker节点的内容安全,建议为充当worker节点的ECS配置云安全中心服务进行主机安全防护。 除了ACK,阿里云还提供无服务器架构的ASK,区分是ACK有ECS服务器充当worker节点,创建POD所需的资源经过ECS进行安排,而ASK没有worker节点,ASK直接在阿里云的分享资源池中经过ECI(弹性容器节点)来安排资源创建POD。 在这个项目中为了担保永远有肯定量的稳定资源供给,我们决定应用ACK再融合阿里云的ECI来兑现资源的弹性供给。ECI资源的申请和释放可经过ACK的ack-virtual-node插件出自动达成,动态增加的POD将自动运行在ECI之上。 考虑到业务高峰期和平常存在庞大的应用量落差,选择应用按流量的方法购入手互联网带宽资源,并经过购入手分享流量包将一切的互联网流量进行集合抵扣。这个项目所用到的互联网流量主要有如下三个: 鉴于ECI节点上服务的启动需求肯定的时光,而业务流量也许瞬间到达峰值,因此经过MQ来缓冲瞬时的业务压力,为运行在ECI弹性资源上的服务争取启动时光。 阿里云MQ服务依据访问协议的不同分成RocketMQ、AMQP、Kafka三个系列,对于海量的业务交易场景建议选择通过双十一检验的RocketMQ系列,在RocketMQ系列中又分成一般版和公司铂金版两个版本,公司铂金版采纳独享硬件资源,能够更充分的保障峰值吞吐实力,对于瞬时业务峰值高的业务,建议尽也许选择铂金版。 数据库采纳云原生数据库PolarDB,PolarDB可以从2个节点扩容到16个节点,单节点可改进至88核710G规格,集群采纳分布式分享存储架构,单个集群可存储100TB的数据,有赖于其采纳分布式分享存储的架构,PolarDB集群增加节点时无需进行大量的数据拷贝,因此可以在分钟级达成集群的横向扩容。 我觉得这个架构对于大部分“腰部”级其他网络行业用户都是适用的,因此共享出来,盼望对大家有所协助。
唯一小编 2021-03-01 阿里云服务器
云专线和普通专线区别,首先我们说一下云专线在定义和应用方 面的区别。 普通物理专线,是端口带宽资源被用户独占的物理专线,此种类型的物理专线由用户单独使用该物理线路,专线用户可以创建多个虚拟接口。 云专线(Direct Connect)用于搭建用户本地数据中心与云上VPC之间高速、低时延、稳定安全的专属连接通道。 传统专线主要应用于用户的局域网互联或快速浏览互联网。用户可以根据需要选择64Kbps- 2Mbps不等的速率。通过互联专线实现数据、语音、图像等业余的安全传输:实现各公司、部门间的资源交换和共享;通过拥有固定、独享的IP地址,视需要建立自己的Mail-Server. Web- Server等服务器,并可通过Internet组建公司内部的VNP业务。 云专线是连接客户局域网与行业云的专线网络,全程独立通道,能够不经互联网连接云主机,同时能保证高网速,对于银行、金融机构等高保密性要求的客户具有重要意义。 下面,我们在分别从开通时间、费用、弹性伸缩、稳定性等维度对他们之间的区别进行说明: 对比一下可以发现 , VPN是开通便捷,费用上比云专线要低很多,但是在公网的质量保障上不如专线,时延高,安全性不如云专线强。相对来说云专线低时延、服务质量稳定,但是在费用上就较高一些。而且在开通时间上,因为受限于物理专线的部署、运营商的线路资源的情况,所以部署时间要比VPN长。在这个情况下,一个量级, VPN如果双方都有internet资源的话,基本上是即开即用,双方配置好,协商起来就可以通信。但是云专线一般是将数据中心和公有云VPC对接,这个时候受限于物理链路,要运营商去核查资源,要去做物理线路的对接。这些正常情况下,就运营商的承诺。有诺的时间一般都是至少需要20个工作日。云专线线上的配置开通,现在一般也是天级,在拿到这种线路配置信息,且物理专线对接完以后,在一天内就可以完成这个线路配置打通的。 唯一网络是中国市场专业的云托管服务商( Cloud MSP ),在数据中心和云计算领域有近十年的专业交付和管理经验,目前正服务于2000多家企业级客户并与全球多家超大规模公有云服务商建立了战略合作关系。在云计算驱动产业变革的今天,安畅以客户需求为驱动,积极投资于核心技术研发和团队组织的云原生技能,致力于成为IT新生态和产业互联网的新-代连接器。 为客户提供”云+大数据+AI”的咨询、集成和管理服务,以及数字化解决方案,帮助客户利用新技术进行业务创新,实现数字化变革。
唯一小编 2021-02-19 专线