魔乐社区

魔乐社区

社区官网工具模型库数据集体验空间

去全站搜索看看？

登录社区云

登录社区云，与社区用户共同成长

魔乐社区

邀请您加入社区

欢迎加入社区

欢迎加入社区

数据库

MySQL 读取百万数据进行处理，该怎么做？前后端交互百万数据需要考虑什么问题?

Mysql 百万数据查询优化

 专抢傻瓜棒棒糖
2023-03-04 15:16:05

 536

#mysql #数据库 #java
软件开发常用文档模板（规格说明书+详细设计+测试计划+验收报告）

在软件开发过程中，文档资料是非常关键的一部分，它们帮助团队成员理解项目需求、设计、实施、测试、验收等各个环节，确保项目的顺利进行。以下是各个阶段的文档资料概述：

小苏爱分享-毕设源码方案
2024-05-05 23:13:56

 3277

 12

#java #前端 #数据库 +4
分布式事务Seata 1.0.0

什么是分布式事务分布式事务就是指事务的参与者、支持事务的服务器、资源服务器以及事务管理器分别位于不同的分布式系统的不同节点之上。简单的说，就是一次大的操作由不同的小操作组成，这些小的操作分布在不同的服务器上，且属于不同的应用，分布式事务需要保证这些小操作要么全部成功，要么全部失败。本质上来说，分布式事务就是为了保证不同数据库的数据一致性。分布式事务的基础数据库的 ACID 满足...

微笑点燃希望
2019-12-25 09:46:00

 222

#分布式 #数据库 #java +2
Mysql主备架构启停顺序

a.先查看当前的主从同步状态show slave status\G;看是否双yesb.执行stop slavec.停止从库服务mysqladmin shutdown -u用户名 -p密码d.查看是否还有mysql的进程ps -ef | grep mysql。

capricorn_don
2024-04-02 18:47:48

 1059

 4

#mysql #架构 #数据库
Docker搭建mongo数据库不能命令创建用户-跳坑指南

Docker搭建数据库不能添加用户

 ljp1112
2024-05-09 21:42:51

 685

 5

#数据库 #docker #运维 +2
菜鸟的Django+MongoDB搭建简单爬虫显示网站踩坑心得

本文基于《Django企业开发实战》一书和网络资料，拼拼凑凑，做了简单的网站实现，大致把前后端+数据库方面的内容结合爬虫代码做通了。不得不说，Django和MongoDB是真的不搭配，强烈建议不要使用。开始：conda环境本文在Ubuntu18.04LTS系统上，使用anaconda搭建虚拟环境，python版本为3.6.10，主要库版本为django(1.11.4)，mongoengine(0.

白夜繁华尽
2020-09-16 16:32:01

 2052

 2

#django #python #数据库 +2
maven后端到前端Web项目开发流程一阶段汇总自用--三层架构包开发

maven基础开发流程mavenWeb项目的创建maven三层架构包开发maven是做项目的基础,很重要,进行一点汇总加深记忆mavenWeb项目的创建maven的web项目开发首先创建一个maven项目maven三层架构包开发maven开发也要使用基础的三层架构包开发,使用过后的感觉就是哪里有病找哪里,很好使!...

java冲啊
2020-08-30 23:41:30

 1843

 2

#java #数据库 #mysql
聊聊 MySQL 网络缓冲区、net_buffer_length、max_allowed_packet 那些事

本文主要介绍了连接缓冲区、结果集缓冲区，它们的自动增长逻辑和上下限。以及超过 16M 的大数据怎么发送和接收，net_buffer_length、max_allowed_packet 两个系统变量的配置。

cschmin
2022-03-07 13:24:29

 5568

 4

#mysql #数据库 #database
前后端分离页面(从数据库到前端、后端手把手教你如何搭建 -- 功能实现：增加查询) 前端数据无法展示-跨域问题

小编事先准备了一份前台、后台的基本架构的代码，如果你手上有现有的那就按照小编的步骤来就ok，没有就需要创建spa项目、后台项目。

七月472
2022-11-21 11:14:51

 3758

 4

#数据库 #java #前端
【实践案例分享】58的商业DMP数据管理平台的架构与实践

分享嘉宾：林鹏 58同城大数据架构师编辑整理：张磊出品平台：DataFunTalk导读：随着大数据的快速发展，大数据应用已经融入各行各业。在很多场景中得到了商业化实践。今天和大家分享下...

木东居士
2020-08-26 19:49:12

 1794

 1

#大数据 #数据库 #java +2
开源的嵌入式分析型数据库duckdb介绍及下载

DuckDB 是一个开源的嵌入式分析型数据库，专为数据分析和处理大规模数据集设计，具有高性能、轻量级和易嵌入的特点。定位：DuckDB 是一个面向分析型工作负载（OLAP）的列式存储数据库，类似于 SQLite 的 OLTP 数据库，但专注于快速执行复杂查询（如聚合、连接、过滤等）。嵌入式：无需单独的服务器进程，DuckDB 直接嵌入到应用程序中，运行在客户端进程内，减少了网络开销。目标：为数据科

 qq_35582643
2025-06-18 12:50:55

 2008

 13

#开源 #数据库
ERROR 1010 (HY000): Error dropping database (can‘t rmdir ‘./acct_01/‘, errno:

3.解决方法：退出数据库，使用shell命令进入数据库对应目录，使用rm -f* 命名，删除所有剩余文件。4.重新使用mysql命令登录数据库，重新使用drop database命令删除数据库。1.现象：使用drop database命令删除数据库时，报17错误码，导致删除失败；2.原因，数据库中有其他文件，导致无法正常删除。

进击的CJR
2023-11-02 09:53:51

 2152

#数据库 #oracle
HBase运维需要掌握的技能（2）

HBase 是一个基于列式存储的分布式 NoSQL 数据库，通常用于处理大规模的数据存储和随机读写操作。它的架构、数据模型和核心操作具有独特的特点，运维人员需要熟悉这些内容，以便设计、管理和优化 HBase 集群。：列族应该根据访问模式进行设计，确保频繁一起访问的列存储在同一个列族中，避免跨列族的 I/O。HBase 是一个列式存储数据库，其数据模型与传统的关系型数据库有所不同，基于。等）来限制扫

 韭菜笔记本
2024-11-27 12:00:00

 1025

 11

#hbase #运维 #数据库
08001] Could not create connection to database server. Attempted reconnect 3 times.

https://blog.csdn.net/Roker_966/article/details/105038178

zxfBdd
2022-12-13 21:17:34

 1.3w

 3

#数据库 #mysql
详解前后端交互 B/S

千锋逆战班，Rayson.Jin学习打卡第三天！今天给大家介绍一下前后端交互 B/S。1.前后端认知前端：1.把后端给的数据渲染再页面你上2.把用户输入的数据传递给后端存储起来后端：1.接受前端的数据存储到数据库2.把数据库里面的数据拿出来传递给前端数据库：专门让后端进行数据的增删改查2.了解服务器什么是服务器？一台网络那一头的电脑运行了一个特殊的环境启动了...

RaysonJinS
2020-02-27 20:11:10

 2006

 7

#mysql #数据库 #sql +2
【运维工具】golang mysql client

命令行进入mysql后台需要输入用户名和密码，通过client工具定义好用户和密码，直接进入，省去输入用户和密码的麻烦。package mainimport ("os""os/exec")func main() {const (USER = "root"PASS = "pass"HOST = "127.0.0.1")cmd := exec.Command("mysql", "-u"+USER, "

chromiumer
2020-06-07 22:20:37

 777

#mysql #运维 #数据库
IT运维工程师证书推荐（非常详细）零基础入门到精通，收藏这一篇就够了

网络安全产业就像一个江湖，各色人等聚集。相对于欧美国家基础扎实（懂加密、会防护、能挖洞、擅工程）的众多名门正派，我国的人才更多的属于旁门左道（很多白帽子可能会不服气），因此在未来的人才培养和建设上，需要调整结构，鼓励更多的人去做“正向”的、结合“业务”与“数据”、“自动化”的“体系、建设”，才能解人才之渴，真正的为社会全面互联网化提供安全保障。

网络安全学习资源库
2025-03-25 10:30:08

 1543

 23

#运维 #web安全 #测试工具 +4
【Redis】Redis 高阶内容详解：性能优化与高级特性

通过掌握 Redis 的高阶内容，您可以更好地利用其强大的功能来解决实际问题。无论是性能优化、高级数据结构的应用，还是持久化、复制、分布式锁和事务处理，这些知识都将为您的项目提供支持。希望这篇博客能够帮助您深入理解 Redis 的高级特性！如果您有任何疑问或建议，欢迎在评论区留言交流。

丶2136
2024-09-25 10:40:24

 1938

 14

#redis #性能优化 #数据库
Leaf——美团点评分布式ID生成系统

美团给出的解决时钟回拨方案

 Ethan_199402
2023-09-04 15:21:28

 1042

#分布式 #数据库
django解决自定义用户验证模型类时报错--django.db.migrations.exceptions.InconsistentMigrationHistory

Django解决自定义用户模型报错（django.db.migrations.exceptions.InconsistentMigrationHistory: Migration admin.0001_initial is applied before its dependency users.0001_initial on database 'default'.）

simpleyako
2022-07-29 18:36:30

 1183

 5

#django #数据库 #python
数据库服务器运维最佳实践：深入探索与策略优化

数据库服务器运维是一项复杂而重要的工作，涉及到硬件选择、系统优化、性能监控、备份恢复、安全管理以及高可用性等多个方面。通过采用最佳实践和优化策略，可以确保数据库的稳定运行和高效性能，为企业的业务发展提供有力支撑。然而，随着技术的不断进步和业务的不断发展，数据库运维也面临着新的挑战和机遇。未来，我们可以期待更多新技术和新工具的出现，为数据库运维带来更多的便利和可能性。同时，也需要加强运维团队的技术培

 shiming8879
2024-08-15 09:17:50

 1860

 18

#运维 #数据库 #服务器
dba_hist和wrh%前缀的视图

一、通过dba_hist_*来诊断1、确定时间段：select*fromdba_hist_snapshotwheresnap_idbetween &snapid1and&snapid2order by end_interval_time;例如以上&snapid1 and &snapid2的值分别为10910 and 109132、对瓶颈时间段的等待时间进行汇总排序：

柠檬
2022-02-24 17:17:13

 332

#dba #数据库 #database
模板项目前后端总结——后端

模板项目后端总结(mysql,node)

一麻袋小猫
2022-05-23 13:49:09

 246

#数据库 #mysql #sql
kafka参数解析unclean.leader.election.enable

本文主要阐述的是Kafka可靠性相关参数中的一个，即unclean.leader.election.enable。随着Kafka版本的变更，有的参数消失，也有的参数被加入进来，而传承下来的参数一般都不太会修改既定的默认值，而unclean.leader.election.enable参数却是其中的一个反例。从Kafka 0.11.0.0版本开始unclean.leader.election....

大数据从业者FelixZh
2020-11-30 11:16:00

 1186

#java #kafka #分布式 +2
金仓数据库KingbaseES V8R3集群运维案例之---message length (8) in slot 1 does not match with slot 0(12)故障__

当主备库的sys_hba.conf中，对用户连接集群的认证方式不同时，将会出现”message length (12) in slot 1 does not match with slot 0(8)“的故障，在生产环境中注意集群配置文件配置，主备库配置要一致。---如上所示，备库在连接9999端口服务时，出现“message length (8) in slot 1 does not match

沉舟侧畔千帆过_
2023-05-17 15:40:30

 331

#数据库
MongoDB中使用Criteria查询：常用语法总结

利用MongoDB Criteria进行高效查询：语法总结

 辰兮要努力
2023-11-24 08:00:00

 4181

 7

#数据库 #mongodb #经验分享 +1
Error querying database. Cause: java.sql.SQLException: No database selected 问题处理

在springboot中使用数据库操作语句在执行是提示Error querying database. Cause: java.sql.SQLException: No database selected，说明数据库没有被选中。中配置数据库路径时要配上数据库名称。

weixin_46634079
2024-04-11 17:37:52

 1389

 3

#数据库
MongoDB使用安全的sha256认证

使用MongoDB 3.2 仅支持默认SCRAM-SHA-1，不够安全需要使用SCRAM-SHA-256，但只有MongoDB4.0才支持。又因为3.2到4.0是大版本升级，云不支持在线升级，所以只能切换数据库做数据同步。

无极之岚
2025-06-15 17:53:57

 747

 1

#mongodb #安全 #数据库
Mysql连表查报error querying database.Cause: java.sql.SQLSyntaxErrorException: Duplicate column name ‘id‘

如果sql的字段名中有sql关键字，会导致PageHelper插件出现 com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Duplicate column name 'Id' 这样的错误

 程序员臭蔡
2023-06-20 13:11:25

 1296

#java #mysql #数据库
studio3T连接不上mongoDB

使用studio 3T连接不上mongoDB，使用RoBo 3T可以连接。

斧头湖懒客
2022-10-31 16:54:41

 1433

#mongodb #数据库
分布式事务有这一篇就够了！不能再多了

1. 基础概念1.1 什么是事务事务可以看做是一次大的活动，它由不同的小活动组成，这些活动要么全部成功，要么全部失败。1.2 本地事务在计算机系统中，更多的是通过关系型数据库来控制事务，这是利用数据库本身的事务特性来实现的，因此叫数据库事务，由于应用主要靠关系数据库来控制事务，而数据库通常和应用在同一个服务器，所以基于关系型数据库的事务又被称为本地事务。数据库事务的四大特性：ACID**A（Ato

小白不想上班
2020-12-22 20:27:33

 666

#分布式 #数据库 #网络 +2
Oracle EBS 客户化报表性能优化一二谈

需要描述：抽凭的抽凭证制单人和审核人的逻辑没有通过子模块的弹性域传递到凭证上的弹性域上，需要穿透到子模块去获取，并且每个子模块的的抽取逻辑还不一样，目前凭证行规模和子分类账规模都是几千万级别，多个表联查效率有点低下，因为改写SQL代价太高，奔着尽量不改动业务逻辑代码的前提下，从代码架构改造和参数配置上来进行优化。尝试方法：先后尝试了如下方法SQL TUNING利用Oracle内置的SQL 执行计划

 贤时间
2021-06-23 16:27:54

 756

#oracle #数据库 #sql
java后端CRUD功能实现

1、springboot框架建立框架建立可参考以下博客，需要把补充部分也完成https://blog.csdn.net/daniaoxp/article/details/119811741内容稍有不同，还要做以下改变。改变1：下面操作不需要改变2：在HelloApplication.java文件中新增**@MapperScan（“com.xp.dao”）**改变3：application.yml文

 haichuangdianzi
2021-09-14 21:29:58

 4166

 2

#java #mysql #数据库
web--学校官网页面制作

【代码】web--学校官网页面制作。

nn7354
2024-07-21 14:50:02

 532

 3

#前端 #java #数据库 +1
MongoDB安装全攻略：一步步教你轻松上手

本文详细阐述了MongoDB数据库的安装过程，从准备工作到成功安装，为初学者提供了清晰的指导。首先，介绍了安装MongoDB前需要准备的环境，包括操作系统版本要求、内存和存储空间等。接着，详细说明了MongoDB的安装步骤，包括下载安装包、解压文件、配置环境变量、创建数据目录等。此外，还介绍了如何启动MongoDB服务以及验证安装是否成功的方法。通过本文的指导，读者可以轻松地完成MongoDB的安

 abcafdsgr123456789
2024-03-08 15:11:03

 2152

 25

#mongodb #数据库 #后端 +2
SOA快速指南 1 2 3，第 3 部分: 服务实现及架构设计

级别：初级姚辉 (yaohui@cn.ibm.com), IBM 中国SOA 设计中心高级工程师, IBM 中国软件开发实验室金戈, IBM软件部企业集成解决方案架构师, IBM 中国软件开发实验室 SOA设计中心赵勇 (zhaoyong@cn.ibm.com), IBM 中国SOA 设计中心工程师, IBM 中国软件开发实验室2007 年 1 月 31 ...

dlwvvx1943
2009-04-07 22:35:00

 578

 8

#系统架构 #数据库 #人工智能
【企业级自动化运维神器/工具Ansible】【ansible-playbook 剧本(1)重点】【单个剧本】【触发器剧本】【循环：迭代juben】【变量vars_files剧本】

ansible-playbook剧本(1)Playbook介绍playbook是ansible用于配置，部署，和管理被控节点的剧本。通过playbook的详细描述，执行其中的tasks，可以让远端主机达到预期的状态。playbook是由一个或多个”play”组成的列表。当对一台机器做环境初始化的时候往往需要不止做一件事情，这时使用playbook会更加适合。通过playbook你可以一次在多台机器

 一个运维小青年
2021-09-17 23:06:41

 1135

#运维 #数据库 #ruby
navicat查询转换json/查询批量insert语句操作

VALUES”,“('”,‘uuid’,“‘,’”,user_id,“‘,’”,(SELECT id FROM uc_user_group_discount WHERE name=‘GPU折扣组’),“',”,gpu_discount,“,”,is_enable,“,'”,替换’uuid’为 (select replace(UUID(),‘-’,‘’))//查询出来的语句是多条insert替换u

生命不息bug不止
2024-03-20 11:09:29

 1015

 7

#json #java #数据库
通宵整理：后端接口优化的14个技巧！

你好，我是田哥。最近，有很多盆友找我咨询后端接口优化问题，主要也应该是现在前后端分离比较多，导致很多人就只知道干后端的活，所以就想着把后端的接口油画起来。在实际项目中，当越来越多对性能的吐槽反馈到我们这里的时候，我们意识到，接口性能的问题的优先级必须提高了。然后我们就跟踪了1周的接口性能监控，这个时候我们的心情是这样的：有20多个慢接口，5个接口响应时间超过5s，1个超过...

田维常
2022-07-03 14:38:57

 1527

#数据库 #编程语言 #mysql +2
【mongoDB】mongoDB 用户创建、授权、删除和修改密码

mongoDB 用户创建、授权、删除和修改密码

 HunterMichaelG
2022-09-09 23:44:07

 2496

#mongodb #数据库 #java
软件开发全周期文档（开发&实施&运维&安全&交付）

在软件项目管理中，每个阶段都有其特定的目标和活动，确保项目的顺利进行和最终的成功交付。以下是软件项目管理各个阶段的详细资料：

瓯雅爱分享
2024-06-27 14:19:48

 757

 28

#java #前端 #数据库 +4
hive函数及其性能优化

目录一、函数的分类二、Hive内置函数三、UDF开发流程四、hive事务五、hive的优化设计六、压缩算法一、函数的分类从输入输出角度分类标准函数：一行数据中的一列或多列为输入，结果为单一值聚合函数：多行的零列到多列为输入，结果为单一值表生成函数：零个或多个输入，结果为多列或多行从实现方式分类内置函数自定义函数UDF：自定义标准函数UDAF：自定义聚合函数UDTF：自定义表生成函数二、Hive内置

 Mr.梧桐
2020-09-22 19:02:26

 443

#hive #数据库
使用Gorm，渗透测试检测出sql注入问题

大坑就是order()排序，gorm使用order时，不会进行预编译，首先明确一个问题，什么时候会存在SQL注入？当CRUD操作直接拼接了用户输入*，并且未做有效过滤/防护时，就会存在注入。

Devil枫
2022-11-17 17:10:14

 940

#sql #数据库
[鸿篇巨制]蚂蚁金融级分布式架构SOFAStack编年史

简介：十几年前，一群支付宝“懒汉”程序员一起开发了一套.......有人说，历史是由懒汉推动的。科技的演进史，其实就是人类不断偷懒的过程。我们懒得浪费体力，于是有了蒸汽机；我们懒得动笔演算，于是有了电子计算机；我们懒得随身携带现钞，于是有了线上交易和无接触支付……程序和信息成为这个时代的基底，服务和应用围绕着我们的指尖打转。我们从网络上索取一切，海量的数据和代码在赛博空间里奔流不息。突然有一天，构

 阿里云开发者
2020-07-31 11:08:16

 3531

 1

#运维 #安全 #中间件 +1
MongoDB设置开机自启动

找到自己安装的MongoDB所在路径，我的是D:\softwares\mongodb-win32-x86_64-2012plus-4.2.18，在该目录下新建一个log文件夹，然后在log文件夹下新建一个日志文件mongod.log，如下所示。如果启动失败，右击服务上的MongoDB，点击属性，查看下图中可执行文件的路径，检查是否正确，不正确进行修改即可。右键我的电脑，点击管理，点击服务和应用程序

 m0_73100347
2024-11-17 16:41:29

 873

 7

#mongodb #数据库
软件项目开发的文档全套（开发&实施&运维&安全&交付）

在软件项目管理中，每个阶段都有其特定的目标和活动，确保项目的顺利进行和最终的成功交付。以下是软件项目管理各个阶段的详细资料：

瓯雅爱分享
2024-05-31 09:37:17

 1353

 30

#java #前端 #数据库 +4
Windows10环境下MongoDB安装配置

2）以管理员方式打开cmd（在文件夹C:\Windows\System32下找到cmd.exe，右键以管理员方式打开）如果每次启动MongoDB都要如此就非常麻烦，所以我们接下来在系统中添加MongoDB服务。注：一定要以管理员方式打开cmd，日志文件mongodb.log不要事先创建。注：在执行命令之前必须在data文件夹下新建db文件夹，否则命令不生效。选择你需要的版本，推荐选择Package

向之所欣
2024-02-28 20:33:57

 1585

 6

#mongodb #数据库
渗透测试实战分享—从app到网站沦陷我是怎么做到的？

分享一下今天对某app进行渗透测试，从基础的信息收集到拿到网站的shell。总体来是还是很简单的，也没什么技术含量首先1. 使用模拟器挂上代理并对app进行抓包，我们把其域名给拿出来2. 使用工具对主域名进行敏感目录扫描，发现存在一个admin的目录对该目录进行访问，发现存在管理后台，且目前看没有验证码，可以尝试爆破输入不同的账号，看是否存在用户名枚举，如下输如admin显示账号或者密码错误输入a

Python_入门教程
2025-03-12 10:00:59

 1167

 26

#前端 #web安全 #安全 +2
[SSL: UNSAFE_LEGACY_RENEGOTIATION_DISABLED] unsafe legacy renegotiation disabled (_ssl.c:1000)‘)))

ssl 错误

 齐整。
2024-12-10 20:06:22

 461

 1

#ssl #c语言 #数据库
Feign性能优化及最佳实践

消费者的FeignClient 客户端：（调用提供者的接口）提供者的controller：定义一个公共的接口，让消费者的FeignClient客户端继承这个接口，提供者的controller实现这个接口，但是不推荐这样做，因为提供者的controller实现这个接口时候，参数不可继承，得再写一次，并且服务的耦合度高多个服务都要调用userservice，每个消费者都要写FeignClient客户端

 Abenazhan
2022-07-14 01:28:42

 1644

#java #数据库 #前端

加载更多

回到
顶部

提供社区服务与技术支持

提供社区服务与技术支持

©1999-2023北京创新乐知网络技术有限公司京ICP备19004658号