站牛网,注册商标流程,现在做什么行业前景好,域名备案好了后怎么做网站技术交流#xff0c;请加QQ群#xff1a;538327407我的各种github 开源项目和代码#xff1a;https://github.com/linbin524背景笔者 目前架构的IOT 项目是使用abp 框架作为后台,虽然abp的框架适用于中小型项目框架#xff0c;但由于架构优美#xff0c;笔者认为还是可以经… 技术交流请加QQ群538327407我的各种github 开源项目和代码https://github.com/linbin524背景 笔者 目前架构的IOT 项目是使用abp 框架作为后台,虽然abp的框架适用于中小型项目框架但由于架构优美笔者认为还是可以经过改造作为大型项目中使用。但IOT 的这个项目目前刚上线不久十几天数据库已经有了上百GB而且由于实施检查设备状态调用设备状态维护表审计日志压力很大单单审计日志一天的数据量就有几十万目前在架构上笔者做了几个优化处理1、针对审计日志笔者重写了Abp 原有的 IAuditingStore实现mongodb和redis 两种转移并且针对审计日志内容做了过滤DisableAuditing特性标记指定的类或方法不进行记录。psabp 虽然有mongodb 的封装但它的出发点是和EF 同一个模式左右系统唯一的ORM如果要使用abp 的mongo 封装必须要替代EF或者重写ABP UnitOfWorkOptions否则直接用会出现工作单元转换失败的问题。2、站点层面使用nginx 做了反向代理进行多站点服务通信模式由原来的队列、改为服务化EventBus等方式3、数据库底层 做了Percona XtraDB Cluster—MySQL 集群处理迁移。 思考评估1、审计日志这样处理从源头做了缩减并且进行Nosql拆分有助于缓解数据库压力。 2、中间层的处理是一般IOT 中间件各种脚手架的组合成熟也有经过多年生产环境的检验。 3、数据库底层 使用Percona XtraDB Cluster是因为它支持集群可以缓解数据库请求压力又支持abp的事务 但从真正大系统考虑其实最理性的模式应该是分片结合SOA、或者微服务才能真正解决底层压力目前考量了Tidb张善友 张队推荐的、oceanbase淘宝 自有数据库生产环境十年、mycat中间件听说这个坑多等 为了暂时不做大改造只能先使用 Percona XtraDB Cluster后续可能使用Orleans(Azure 云框架)、akka.net大型的框架 或者 Service Fabric微服务框架 二、Percona XtraDB Cluster 评估 优点如下1.当执行一个查询时在本地节点上执行。因为所有数据都在本地无需远程访问。2.无需集中管理。可以在任何时间点失去任何节点但是集群将照常工作。3.良好的读负载扩展任意节点都可以查询。缺点如下1.加入新节点开销大。需要复制完整的数据。2.不能有效的解决写缩放问题所有的写操作都将发生在所有节点上。3.有多少个节点就有多少重复的数据。 Percona XtraDB Cluster是MySQL高可用性和可扩展性的解决方案.Percona XtraDB Cluster提供的特性有1.同步复制事务要么在所有节点提交或不提交。2.多主复制可以在任意节点进行写操作。3.在从服务器上并行应用事件真正意义上的并行复制。4.节点自动配置。5.数据一致性不再是异步复制。Percona XtraDB Cluster完全兼容MySQL和Percona Server表现在1.数据的兼容性2.应用程序的兼容性无需更改应用程序 1.集群是有节点组成的推荐配置至少3个节点但是也可以运行在2个节点上。2.每个节点都是普通的mysql/percona服务器可以将现有的数据库服务器组成集群反之也可以将集群拆分成单独的服务器。3.每个节点都包含完整的数据副本。 三、部署流程 1、环境准备 在腾讯云上开设三个测试服务器系统 镜像 CentOS 7.5 64 用远程工具连接三台测试服务器完成如下操作 1 关闭firewalld防火墙# setenforce 0# sed -i s,^SELINUXenforcing,SELINUXdisabled,g /etc/selinux/config 2、主节点部署 1安装PXC yum源# yum install Percona-XtraDB-Cluster-56 最终下载下来的版本是Percona-XtraDB-Cluster-56-5.6.303 修改 /etc/my.cnf[mysqld]datadir/var/lib/mysql
usermysqlwsrep_provider/usr/lib64/galera3/libgalera_smm.so
#集群的ip
wsrep_cluster_addressgcomm://节点ip1,节点ip2,节点ip3binlog_formatROWdefault_storage_engineInnoDBinnodb_autoinc_lock_mode2#当前主节点的ip
wsrep_node_address当前节点ipwsrep_sst_methodxtrabackup-v2wsrep_cluster_namemy_centos_cluster
#初始化一个mysql的用户和密码
wsrep_sst_authadmin:123456 4启动主节点mysql -uroot -p 6 登录客户端查看数据库的状态在进行权限配置允许ip访问默认无法远程访问但是我们需要远程通过图形化等界面查看所以要做如下配置yum install http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm2 安装PXC vim /etc/my.cnf systemctl start mysql5进入mysql登录 初始化状态无密码遇到要输密码直接回车mysql show status like wsrep%;CREATE USER adminlocalhost IDENTIFIED BY 123456;//如果这里报错看一下是否有 用户存在了GRANT RELOAD, LOCK TABLES, REPLICATION CLIENT ON *.* TO adminlocalhost; FLUSH PRIVILEGES; 完成后可以用Navicat For mysql 连接看一下是否可以成功访问 7可以在mysql中执行如下命令查看systemctl stop mysqlbootstrap.service
systemctl start mysqlbootstrap.service其他节点也再次启动 add nameDefault connectionStringserver主节点ip;port3306;databaseabpzero4_6db;uidadmin;password123456; providerNameMySql.Data.MySqlClient /3 执行迁移 4查看对应的三台服务器集群都自动同步该数据库 5在Appservice 中建立测试服务进行增删改查、事务等测试pre stylemargin-top: 0px;margin-bottom: 0px;padding: 0px;white-space: pre-wrap;overflow-wrap: break-word;font-family: !important; 12px courierusing _consigneeRepository.DeleteAsync(predicate); } } }在swagger ui中增删改查都已经正常而且数据在三个数据库中正常同步 针对事务做了人为异常处理确认会实现回滚abp 自带工作单元处理事务 五、后记 这一次只是做了简单的实验性测试后续需要在加强深入检测才可以用生产环境中。原文地址: https://www.cnblogs.com/linbin524/p/10150300.html.NET社区新闻深度好文欢迎访问公众号文章汇总 http://www.csharpkit.com
