es同步mysql数据库 mysql表数据量太大,达到了1亿多条数据,除了分库分表之外,还有没有其他的解决方式?

mysql表数据量太大,达到了1亿多条数据,除了分库分表之外,还有没有其他的解决方式?

在正常配置下,MySQL只能承载2000万数据(同时读写,表中有大文本字段,单服务器)。现在已经超过1亿,而且还在增加,建议按以下方式处理:

es同步mysql数据库 mysql表数据量太大,达到了1亿多条数据,除了分库分表之外,还有没有其他的解决方式?

1子表。它可以按时间或一定的规则进行拆分,以便尽可能地查询子表中的数据库。这是最有效的方法。特别是写,放入一个新表,并定期同步。如果记录不断更新,最好将写入的数据放在redis中,并定期同步表3的大文本字段,将它们分隔成一个新的独立表。对于较大的文本字段,可以使用NoSQL数据库

4优化体系结构,或者优化SQL查询,避免联合表查询,尽量不要使用count(*)、in、recursion等性能消耗语句

5使用内存缓存,或者在前端读取时增加缓存数据库。重复读取时,直接从缓存中读取。

以上是一种低成本的管理方法,基本上几个服务器就可以做到,但是管理起来有点麻烦。

当然,如果总体数据量特别大,而且您不关心成本,请使用群集或tidb

首先配置MySQL的数据源:控制面板-->管理工具--> ODBC数据源-->系统DSN-->添加-->选择MySQL ODBC xxdriver-->完成-->数据源命名自己,TCP/TP写localhost,然后填写您的用户和密码,选择相应的数据库,然后在vs:openvs-->视图中连接

标签:

最新文章

  1. 如何在CorelCAD 2018 x64中开启并使用原始格式2025-03-09
  2. 匡威1970s正品与高仿 匡威1970s带金属吗?2025-03-23
  3. java入门编程 怎么才能学好java?2025-03-26
  4. 苹果11dock栏怎么设置 苹果下滑搜索栏不见?2025-03-31
  5. 苹果手机分哪些版本 iphone的版本列表?2025-03-17
  6. 电量不足对笔记本电脑的危害2025-03-14
  7. Win10无法删除文件夹进程的解决方法2025-03-14
  8. 绵阳高新区周边哪里有桃园 绵阳什么地方可以看桃花?2025-03-22
  9. 手机字体变大软件 ios14字体大小怎么设置?2025-03-30
  10. react强制重新渲染 怎么封装一个按钮的react组件?2025-03-28
  11. 荣耀play3怎么升级鸿蒙系统2025-03-15
  12. SAP QM配置手册 SAP QM配置手册2025-03-15
  13. java类名首字母要大写吗 Java源程序如何变成Java字节码?2025-03-26
  14. 钦州住房公积金网(广西钦州公积金提取方法?)2025-03-23
  15. 测评表模板 研究大学生心理健康的意义是什么?2025-03-30
  16. 设计测量app 软件测试工程师算程序员吗?2025-03-24
  17. 爱奇艺无广告版破解版下载 为什么苹果手机用爱奇艺没有广告?2025-03-18
  18. cad安装完闪退怎么解决 CAD安装闪退解决方案2025-03-16
  19. 橱柜中延米是什么意思 在橱柜中什么是延米?延米是什么意思?2025-03-23
  20. io多路复用的通俗理解 在学JAVA的时候对io,多线程一知半解,是继续往后学到做项目的时候弄明白呢还是刚开始就要弄懂它们?2025-03-30
  21. 如何快速打印100份表格 Excel表格打印多份如何自动排页码?2025-03-24
  22. 乒乓球台有多少种类 乒乓球台尺寸与做法?2025-03-20
  23. cad怎么知道圆心坐标 CAD如何查找圆心坐标?2025-03-22
  24. pr怎么做微信对话框往上滑的效果 pr中如何将画布变成竖着的?2025-03-16
  25. 如何在Photoshop中绘制箭头指引线2025-03-14
  26. 如何设置爱奇艺看图启用窗口置顶2025-03-12
  27. 小米手机怎么被限制使用时间了 红米手机达到设备时长无法使用?2025-03-11
  28. switch的dns联通设置哪个最好 switch的dns设置哪个最好?2025-03-12
  29. 上海迪士尼概念股(吃喝玩乐的迪斯尼概念股有哪些?)2025-03-22
  30. 新如何挑选适合学生的电脑?2025-03-10
优质自媒体
优质自媒体 微信号:优质自媒体 扫描二维码关注公众号
优质自媒体

小编推荐

  1. 1 王者荣耀墨子强不强 王者荣耀墨子地位最近摇摇欲坠,玩家集体要求将其重做,你认为他有重做的必要吗?

    王者荣耀墨子地位最近摇摇欲坠,玩家集体要求将其重做,你认为他有重做的必要吗?《国王的荣耀》中的英雄各具特色,适合不同的玩家。因此,在这个游戏中,删除或重做一个英雄是很常见的。事实上,每个球员都有点自私。他们想加强他们喜欢的英雄,削弱他们不喜

  2. 2 面试最忌讳穿什么衣服 面试时最佳的穿着应该是怎样的?

    面试时最佳的穿着应该是怎样的?但是如何正确着装呢?南哥给你一些建议,这是最重要也是最有效的。并不是所有的公司和面试都需要非常正式的西装来搭配周围的人。最好的衣服是看不见的。毕竟,在很多人的认知中,西装和鞋子是中介和保险。有些人可能会说他们不

  3. 3 c语言让程序暂停几秒 C语言暂停代码是什么?

    C语言暂停代码是什么?可以通过系统(“Pause”)实现暂停,系统应包括<stdlib。H>头文件。它也可以通过使用getch()和getchar()函数来实现。请注意<conio。H>和<stdio。应相应地包括H&g

  4. 4 企业邮箱注册 企业邮箱哪个比较好?

    企业邮箱哪个比较好?目前,阿里云邮箱是国内企业最好的邮箱。几家有过类似经历的公司都在使用阿里云邮箱,而且做得很好

  5. 5 网络营销的功能有哪些? 2010年到2019年电商对实体店有多大的冲击?实体店经济收入是怎样的?

    2010年到2019年电商对实体店有多大的冲击?实体店经济收入是怎样的?马云说,电子商务是穷人反击的平台,但事实是,不管产品多好,没有高额的推广费,你只能被大海淹没,而反击平台不一定是坑。电子商务也在摧毁一些著名的产品。在一个国家的幸福指数

  6. 6 学完java能做什么 新手如何学习Java?

    新手如何学习Java?看看C语言、数据结构、线性代数和网络工程,然后学习javase(封装、继承、多态性、集合、多线程、IO等),然后学习JavaWeb(HTML、CSS、JS、AJAX、jQuery等),最后学习JavaEE(SSH、SS

  7. 7 int32和int64的区别 int在64位操作系统中占多少位?

    int在64位操作系统中占多少位?它与操作系统无关,与编译器有关在32位编译器中unsigned int=int=32bit short int=16bit在64位编译器中unsigned int=int=32bit short int=3

  8. 8 ios账户设置在哪里 苹果短信验证码怎么设置自动弹出?

    苹果短信验证码怎么设置自动弹出?首先,打开苹果手机的设置按钮,点击密码和账号按钮,然后在密码和账号页面中找到密码自动填写。单击后面的按钮,绿色处于打开状态,然后单击打开。

  9. 9 哪个网站可以免费建站啊 网站免费建站的方法有什么?

    网站免费建站的方法有什么?如果没有技术,没有基础,想做免费的网站,你可以选择智能站平台,可以实现零码、低成本、多功能的站,至于操作步骤,也是一个非常简单的傻瓜操作,我只使用文慧智能站系统之前,非常方便,给你一个推荐!1. 访问网站平台,注册

  10. 10 apk修改强制兼容 最新发布的荣耀20用的是方舟操作系统,对APP是否能兼容呀?会不会出现卡顿,求解?

    最新发布的荣耀20用的是方舟操作系统,对APP是否能兼容呀?会不会出现卡顿,求解?

Copyright 2025 优质自媒体,让大家了解更多图文资讯!百度地图 360地图