J9集团

  • Modelb@nk5.0未来银行架构
  • “乾坤”企业级数智底座
  • 平台级产品
  • AI+金融解决规划
  • 银行行业解决规划
  • 其它沉要行业解决规划
银行行业解决规划
  • 主题利用产品族

    聚焦主题业务系统建设 ,支持数字化转型

  • 云推算产品族

    提供云原生架构解决规划

  • 数据智能产品族

    以数据中台为主题的数据全性命周期产品

  • 智能银行(网点)产品族

    覆盖智能风控、远程视频银行等场景化产品

  • 数字金融产品族

    通过盛开银行等延长互联网金融产品

  • 信贷治理产品族

    覆盖信贷全流程 ,助力普惠金融

  • 风险治理产品族

    提供信誉风险与本钱计量产品

  • 科技监管产品族

    聚焦监管合规 ,强化金融系统安全性

其它沉要行业解决规划
  • 金融信创

    散布式主题系统国产适配 ,构建金融安全底座

  • 行业信创

    全栈式信创云平台 ,驱动多行业自主可控

  • 基于云原生的智能服务

    云原生+AI驱动 ,全栈式火速部署与智能运维

  • 量子通讯

    量子密钥分发技术 ,构建金融级安全通讯网络

  • 农业村落场景金融

    数字技术赋能农业产融 ,构建智慧村落生态

  • 中幼微场景金融

    大数据风控+线上化服务 ,破解幼微融资难题

  • 数字供给链金融

    区块链+AIoT技术整合 ,优化产融协同效能

  • 数字人民币场景利用

    智能合约+多载体支付 ,拓展消费场景

  • 征询规划
  • 行业数字化转型
  • 软件及服务
征询规划
  • 金融征询服务

    面向银行11大领域32个征询产品

  • 业务征询

    数字化战术、经营造模、零售与绿色信贷征询

  • 数字化征询

    科技战术与系统群架构及治理研发规划等

  • 数据治理征询

    企业整体战术导向全局数据治理与利用规划

  • PMO治理征询

    萦绕项目进行全性命周期管控与专家赋能

  • 金融信创征询

    3-5年信创工作整体规划造订

行业数字化转型
  • 企业AI利用场景解决规划(建设中)

    泛行业AI数智化解决规划

  • 企业IT治理服务产品族

    散布式架构+智能运维平台 ,全性命周期IT治理

  • 企业IT治理服务解决规划

    丰硕的IT治理解决规划 ,保险业务陆续性

  • 企业数字化转型服务

    科研知识产权规划 ,提升全性命周期治理能力

  • 工业数字化转型服务

    工业智能体+物联网优化出产 ,打造数智工厂

软件及服务
  • 研发治理及DevOps

    云原生+DevOps全性命周期平台

  • 自动化产品

    自动化建模、执杏注测试、业务流程自动化

  • 测试解决规划

    AI+TMMi赋能全性命周期测试 ,智能天生用例

  • 征询及表包

    全性命周期IT服务 ,PMO征询与行业级交付

首页- J9集团国际站官网入口
数字中国·星火文集 | 物流核算系统机能调优实战
颁布功夫:2022-06-27

news_20220629_05_01

物流核算系统机能调优实战

J9集团控股

宁尚军

news_20220629_05_02

物流企业在经营中总会遇到高低游结费问题 ,按大类能够分为“应收”、“应酬”两部门。应收是物流企业收上游客户的钱 ,应酬是物流企业付给下游运输或其他合作同伴的用度。若是只有一家上游一家下游 ,那结费没有任何难度 ,手工也能算明显账务。而行业中物流企业的现实情况 ,是面对多多的客户和下游合作同伴 ,并且对于第三方物流企业 ,每个客户提出的合同模式都有较大差距 ,这种情况就会把结账前的对账工作造成一个“实力活儿” ,每个月几万张的物流待结费单据 ,结费方式分歧、结费项目分歧、单价分歧 ,一旦算错 ,要么被质疑 ,要么接受损失。这时辰就必要物流核算系统(BMS)来解决数据汇集和算账的问题。

核算系统是对物流出产活动收入与用度进行治理的系统 ,用度类型蕴含物流出产各环节产生各类用度 ,如运费、仓储费、操作费、包装费、高端服务费、人力费、资产费、装建费等。通;岽釉耸湎低场⒉执⑾低场⑷肆ο低场⒆什认低车慕尤氪岱训ゾ ,而后每天凌晨实现所有单据用度推算。

其重要特点是:

• 系统日均接见量不大 ,用户通常是财政核算人员 ,几十人的规模;

• 系统使用功夫点比力集中 ,结账日前后三天会罕见百万单量的用度由于改单和总汇算而有大量推算 ,对系统压力集中;

• 系统运算量大 ,月均千万单;

• 系统导出量大 ,月均千万单;

为能支持这类特点的系统在顶峰期正常运行 ,必要对系统不休优化。今天这篇文章 ,就是结合J9集团控股智慧产业链下的物流业务和系统 ,分享一下调优的思路。J9集团核算系统目前是3.0版本 ,目前用的是MySQL数据库 ,之前老版本使用的是Oracle数据库。由于Oracle数据库单库机能比MySQL壮大好多 ,所以在3.0新版本上做机能调优就显得越发难题。

1.

开发前 ,总结老版系统的问题预防沉蹈覆辙

老版系统是Oracle库 ,使用存储过程实现业务逻辑比力多 ,给数据库带来压力大。

对“查问返回了局集行数”没有限度最大领域 ,单量幼的时辰没什么问题 ,但是单量大的时辰已经就不合用了 ,导致数据库负载过高。

没有合理节造事务 ,有些事务过于大并且处置业务逻辑过多 ,大事务持久占用数据库资源从而不能实时开释。

凭据以上总结出的老版系统问题 ,新系统不再使用存储过程把所有业务逻辑用法式代码来实现 ,数据库的查问做了最大条数的限度。为了能使用上MySQL只读库来分压 ,在业务处置过程中查问与推算用度过程不启用事务 ,只有最后保留数据时辰才开缘由务。

2.

加强与产品经理沟通 ,去掉不用要的推算

核算系统3.0刚上线时辰发现归并单据业务用时很长必要优化 ,合单逻辑是把每天切合合单规定的单据归并成一单 ,3183个承运商与85个平台4天的合单 ,就要1082220次归并单据查问。相识业务后发现并不是所有承运商在85个平台上有业务 ,也并不是所有承运商必要合单 ,优化规划是在合单之前先筛选出切合前提的承运商和平台合单 ,有效的查问只有23308次 ,这样削减了1058912次没必要的查问;从而大大提高归并单据的效能。

3.

串行变并行 ,通过多线程提高效能

运输用度推算有归并单据、推算用度、记入账单三个? ,并且过程是挨次执行的。

news_20220629_05_03

经过会商 ,发现已经合单的单据没必要比及合单?槭迪趾笤偻扑阌枚 ,三个串行的?槭悄芄徊⑿。经过优化后把运输用度按时拆解四个并行的幼工作合单工作、合单、推算用度、记入账单 ,

news_20220629_05_04

每个幼工作实现后会把单据流转到后面的工作。并且每个幼工作的按时的线程数量是可配置 ,在双十一大促期间凭据硬件接受能力 ,适当调高的线程数量应对忽然高涨的单量。

4.

巧用数据库事务ACID解决大量用度同时入账单并发问题

为了保障账单的正确性账单金额扭转是通过版本号更新 ,每更新一次版本号加1 ,当存在并发更新金额时辰 ,只会一条可更新成功 ,预防了账单金额谬误的问题。这种设计有它的利益 ,对人力、资产、装建这种单量幼的用度推算很合用 ,并发的概率很幼 ,即便并发了能够再沉新推算一次。

news_20220629_05_05

而推算运单用度的情况复杂 ,统一个承运商的单据用度是集中推算 ,大量的用度同时记入统一个账单内 ,从而造成不成预防的并发。我最先的解决规划是加锁节造 ,当并发时辰只有抢到锁能力更新账单其他更新工作锁期待 ,这个规划来预防账单不一致再沉新推算。

news_20220629_05_06

但是统一个承运商的单据用度是集中推算的 ,加锁后造成了大量列队影响了效能 ,并且我使用的是redisson散布式锁有超不断间限度 ,还是没底子解决沉新推算的问题。后来不得不烧毁用版号节造并发的设计 ,改用利用数据库事务ACID个性 ,把更新交给了数据库实现 ,利用数据库自身行锁美满地解决了这个问题。

news_20220629_05_07

5.

总结

以上 ,是我在现实工作中总结出来的一些零散的思路。通过这些问题的解决 ,我也有些幼感悟 ,方式步骤上要从业务逻辑、实现思路、技术使用多维度不休尝试。内心要坚信问题注定能解决 ,肯定不要中途烧毁。这类机能问题通常都不是能等闲解决的 ,肯定咬住问题不放 ,以坚定必胜的信想来对待才可能走到成功点。一点心得 ,分享给各人 ,但愿我们每个技术人都能感触这种攻克难题时的成就感!

news_20220629_05_08

news_20220629_05_09

【网站地图】