| 发布日期：2024-10-01 15:19 点击次数：147 |
21独家丨云音乐“崩了”：或与网易Curve系统连接手机小程序开发，该团队曾裁人
贺泓源
网易云音乐崩了。
2024年8月19日，词条#网易云音乐崩了#登上微博热搜第一。不少网友暗意，网易云音乐“一直刷新不出来”“一条挑剔也刷不出来”“搜歌也搜不出来”。
不久后，网易云音乐在官方微博回复，“因基础本领故障，导致网易云音乐各端无法普通使用，咱们正在加紧开导，超越对不起。”
另据21世纪经济报说念记者从多位有过网易责任资格的工夫东说念主员处了解到，此番网易云音乐出现工夫故障， 或与Curve存储系统连接。该系统由网易开发，团队曾资格过裁人。
对此，网易云音乐方面向21世纪经济报说念记者回复称，“莫得删库，莫得跑路， 正在加快开导”。但关于触及Curve团队问题，关系责任主说念主员暗意并不明晰。
随后，网易云音乐官方微博暗意，故障已接续开导。同期，看成抵偿，8月20日0-24时，云音乐搜“畅听音乐”，可领取7天会员权力到用户的账户。
什么是Curve？
事实上，网易云音乐使用Curve有着历史维捏。
据网易云音乐工夫团队在2022年6月对外暴露，云音乐使用云盘的业务主要包括主站、UGC、曲库等Java利用，其中主站是云音乐中枢业务，需要提供最高品级的SLA保险(年可用率>=99.99%)，靠近提供上亿级用户量褂讪的云音乐体验，这一直以来亦然该平台的重难点。
2019年之前云音乐主要使用Ceph云盘，但Ceph在大限制场景下存在性能颓势，且很难保证在多样很是(坏盘慢盘、存储机宕机、存储集中拥塞等)场景下云盘IO反当令延不受影响；Ceph云盘的IO抖动问题，该团队曾尝试花好多东说念主力元气心灵作念优化变调，但齐仅仅稍稍有所缓解，无法透顶处理；性能问题也插足迢遥东说念主力进行分析优化，但仍然不行达到预期。因此网易云音乐才立项了解Curve块存储分散式存储系统。
网易云音乐提到，Curve块存储不错精深适配主流云计较平台，况且具备高性能、易运维、褂讪不抖动等上风。在施行利用中，使用Curve块存储对接Cinder看成云主机云盘存储后端，对接Nova看成云主机系统盘，对接Glance看成镜像存储后端。在创建云主机过程中，Nova领悟过 Curve块存储提供的Python SDK克隆出新卷看成云主机系统盘使用。在创建云盘过程中，Cinder领悟过Python SDK创建空卷冒昧通过已有的卷快照克隆出新卷，之后不错挂载到云主机上看成云盘使用。云主机使用Libvirt看成假造化管控行状，使用QEMU/KVM看成假造化引擎。Curve块存储为Libvirt/QEMU提供了最先库，编译后就不错奏凯使用Curve卷看成远端存储，不需要把Curve块存储卷挂载到土产货。
2020年，网易数帆告示，开源一款名为Curve的高性能分散式存储系统。
已往的网易数字+大会上，网易副总裁、网易杭州想象院推论院长兼网易数帆总司理汪源清楚，Curve主要具有三大想象特色：高性能、高可用和自治。汪源公布了Curve和CephL版块的测试数据对比，在单卷的场景下，中枢的4K就地读/写的IOPS性能，Curve分裂是Ceph的1.84倍和1.58倍，同期蔓延比拟Ceph分裂裁汰48.39%和37.50%。
那时，网易暴露，Curve系统上线400多天，从未出现数据不一致和丢数据的情况，莫得发生过紧要故障，数据可靠性达到100%，行状可用率达到4个9以上。
可变动来得比思象中快，连年网易杭州想象院裁人外传不竭，汪源本东说念主已从网易下野。
机房挪动？
还需详确的是，此刻网易云音乐本就处在机房挪动的恰当环节节点，这可能亦然此番故障诱因。
据网易云音乐工夫团队在2024年7月对外暴露，2023年笃定要将云音乐合座行状搬迁至贵州机房，名堂需要在多样限制条目下，保险2000+利用、100w+QPS的行状褂讪挪动，是云音乐历史上限制最大、东说念主员最多、难度最高的工夫名堂。在此过程中，处理了迢遥历史工夫债务，同期化解了迢遥新增系统性风险。
具体来看，这次需要云音乐以及旗下荒芜App的行状均合座挪动至贵州。触及2000+利用、100w+QPS的褂讪挪动，同期触及中间件、存储、机房、三方依赖行状等合座的搬迁，搬迁限制大。
小程序开发业务复杂度亦高。其中，场景复杂。挪动限制大，带来更广的业务场景隐蔽。而不同的场景对数据一致性要求不同、蔓延明锐度不同。挪动有运筹帷幄需要讨论多样场景带来的问题，并提供圭臬化的处理有运筹帷幄。
另外，小程序开发价格行状间依赖复杂。这次带来约2000+利用的搬迁，各行状间的调用和依赖情况复杂，在分批挪动有运筹帷幄中需要协作，以及处理迁顷然候跨机房30msRT高涨带来的问题。
此外，关系历史积弊也多。网易云音乐提到，挪动贵州前，存在诸多历史工夫积弊，影响着全站合座的褂讪性。
这次搬迁还有新增风险。网易云音乐建议，挪动贵州带来诸多新增风险，且处理难度高。部分场景无法作念到的确环境全过程预演。在基础工夫设置上，也有一些不及的情况，影响合座搬迁推论后果、挪动准确性。
大邱坐镇主场，如同大多数K1球队一样，能够得到数据照顾，但大邱在初始给到的一档超高位就存在非常大的信任问题，机构并没有显示出对大邱理应的信心，这个数据与早前大邱1:0战胜济州联的初始和走势形成鲜明对比，而济州联的市场定位明显要略高仁川联一筹，显然本场对大邱的能力存在怀疑。
川崎春花开始一天时就吞下柏忌，领先优势一度只剩下1杆，可是之后她再也没有丢分，抓到4只小鸟，包括五号洞，三杆洞6号铁打到2米抓到全天第一只小鸟，以及17号洞，三杆洞推入3米推杆抓到最后一只小鸟，战胜了最后一组出发的同学年、同期的两位选手：尾关彩美悠、樱井心那。
限制条目也严苛。云音乐有着迢遥的用户基数，这次搬迁要求：抑止机挪动、不产生P2及以上事故。除此以外还有机器、集中带宽、集中褂讪性、集中RT、挪动有运筹帷幄等限制条目。
总体来看，前述搬迁鞭策、协作难度大。“这次搬迁限制大，相似，参与东说念主员限制大，合座协作难度大。此外带来较多的东说念主因风险。可能因极小的细节未推论到位，就会变周至局事故。”网易云音乐工夫团队关系著作表态。
结构退换
回到网易云音乐运营来看，该公司处于结构退换期。
财报炫耀，2023年，云音乐营收78.67亿元，同比下滑13%；经退换净利润为8.19亿元，上年同期为失掉1.15亿元。
具体到业务来看，2023年，网易云音乐在线音乐行状收入为43.51亿元，同比增长18%。其中，会员订阅收入为36.49 亿元，同比增长20%，平均付费会员数同比增长15%达到4412万，月均ARPU值同比增长5%达到6.9元。非订阅收入为7亿元，同比增长6%。
但受战略影响，以直播为主要业务的酬酢文娱业务收入在2023年同比下滑34%至35.16亿元。付用度户为160万，同比晋升20%，月均ARPU同比下滑45%达到179元。
好音信是，网易云音乐毛利率在晋升。2023年，该公司内容行状资本45.99亿元，同比下滑31%，占收入比从2022年的75%着落至2023年的58%，主要因为音乐版权资本完全值基本褂讪，退换了酬酢文娱业务的分红比例，收入因流量分拨退换等身分也有较大幅度的下滑，勾通分红比例收窄，带来内容资本的大幅缩减。
2023年下半年，网易云音乐毛利率较上半年进一步晋升，达到28.7%。2023年合座运营用度的完全值同比小幅收窄。
2024年一季度，网易云音乐公布营收39.6亿元，同比增长3.6%。
客不雅上，结构退换亦然种行业性趋势。
财报炫耀，本年二季度，腾讯音乐营收71.6亿元，同比下滑2%；经退换净利润19.85亿元，同比增长25.7%。具体来看，在线音乐业务收入54.24亿元，同比增长28%；酬酢文娱业务收入17.36亿元，同比下滑43%。
其中，酬酢文娱MAU在二季度同比下滑31.6%至9300万。付用度户为790万，同比增长5%。季度ARPU为220元，同比下滑45%。
总体而言，跟着竞争加重手机小程序开发，网易音乐每一步齐需要更严慎。
