学习笔记 -- 数据库开发

本贴最后更新于 2538 天前,其中的信息可能已经时移世异

//JDBC 基础

JDBC URL

jdbc:

jdbc:oracle:thin:@::database

jdbc:microsoft::; DatabaseName=database

常用方法:

Statement stmt = conn.createStatement();

ResultSet rs = stmt.executeQuery("select userName from user“);

ResultSet 常用方法:

.next();

.previous();

.absolute();

.beforeFirst();

.afterLast();

.getString(ColumnName/Index);

.getInt(ColumnName/Index);

.getObject(ColumnName/Index);

构建步骤:

1. 装载驱动程序

Class.forName("com.mysql.jdbc.Driver");

2. 建立数据库连接

Connection conn = DriverManager.getConnection("jdbc:, user, password);

3. 执行 SQL 语句

Statement stmt = conn.createStatement(); //java.sql 包

ResultSet rs = stmt.executeQuery("select userName from user");

4. 获取执行结果

while (rs.next()) {

System.out.println("Hello " + rs.getString("userName"));

}

5. 清理环境

conn.close(); //一般需判断不为 null,需要放在异常处理的 finally 中

stmt.close();

rs.close();

//JDBC 进阶

游标提供一种客户端读取部分服务器端结果集的机制

DB_URL = jdbc: //开启游标

利用 PreparedStatement

.setFetchSize(1);

对于大对象的读取,采用流方式

ResultSet.getBinaryStream("columnName")

一次性往数据库中插入大量数据,采用批处理

Statement

.addBatch()

.executeBatch()

.clearBatch()

字符集编码

mysql 语句:

show variables like '%character%'; //显示字符集编码信息,优先级别:column>table>database>server

show create table user;

JDBC 设置:

DB_URL = DB_URL + characterEncoding=utf8

//数据库连接池

DBCP 连接池,Tomcat 的连接池组件,由三个 jar 包组成:

commons-dbcp.jar

commons-pool.jar

commons-logging.jar

创建 BasicDataSource 对象:

    public static BasicDataSource ds = null;

    ds = new BasicDataSource();

    ds.setUrl(DB_URL);

    ds.setDriverClassName(JDBC_DRIVER);

    ds.setUsername(USER);

    ds.setPassword(PASSWORD);

创建连接:

        conn = ds.getConnection();

        ...同JDBC基础

DBCP 高级配置

BasicDataSource

.setInitialSize() //设置初始连接数

.setMaxTotal() //设置最大连接数

.setMaxWaitMillis() //设置最大等待时间

.setMaxIdle() //设置最大空闲连接数

.setMinIdle() //设置最小空闲连接数,一般设置与最大空闲相同

DBCP 定期检查

BasicDataSource

.setTestWhiteIdle(true) //开启检查线程是否为有效的功能

.setMinEvictableIdleTimeMillis() //设置关闭数据库连接的空闲时间阈值

.setTimeBetweenEvictionRunMillis() //设置检查运行时间的间隔,一般小于默认最小空闲连接时间 8 小时

//SQL 注入与防范

SQL 注入例子:

在 SQL 语句拼接中,userName = "zhangsan';#",欺骗服务器

SQL 注入防范:

使用 PreparedStatement:

        PreparedStatement ptmt = null;

        ptmt = conn.prepareStatement("select * from user where userName = ? and password = ?");

        ptmt.setString(1, userName);

        ptmt.setString(2, password);

        rs = ptmt.executeQuery();

//事务

JDBC 事务控制

Connection

.setAutoCommit(false) //开启事务,默认为 true 即未开启事务,设置为 false 为开启事务

.commit() //提交事务

.rollback() //回滚事务

检查点

Savepoint sp = conn.setSavepoint(); //设置检查点

conn.rollback(sp); //回滚到检查点状态

脏读,不可重复读,幻读

事务并发执行

事务隔离级别:

读未提交(read uncommitted)

读提交 (read committed)

重复读(repeatable read)

串行化(serializable)

默认级别为重复读,级别越高,数据库性能越差

设置隔离级别:

Connection

.getTransactionIsolation()

.setTransactionIsolation()

死锁

死锁的必要条件:

互斥,请求和保持,不剥夺,环路等待

外部加锁:

共享锁(S):select * from table lock in share mode

排他锁(X):select * from table for update

内部加锁:

数据库系统为实现 ACID 特性自动添加

快照读:支持不加锁,select * from table 为快照读

当前读:可能加锁

解决死锁方法:强制回滚代价小的事务

分析死锁方法:show engine innodb status

//Mybatis

ORM 框架

SqlSessionFactory 配置,xml 文件内容:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE configuration PUBLIC "-//mybatis.org//DTD Config 3.0//EN" "http://mybatis.org/dtd/mybatis-3-config.dtd">
<configuration>
	<environments default="development">
		<environment id="development">
			<transactionManager type="jdbc" />
			<!-- 配置数据库连接信息 -->
			<dataSource type="POOLED">
				<property name="driver" value="com.mysql.jdbc.Driver" />
				<property name="url" value="jdbc:mysql://localhost:3306/test" />
				<property name="username" value="root" />
				<property name="password" value="qiyao.luo" />
			</dataSource>
		</environment>
	</environments>
</configuration>	

创建 Java 对象与 SQL 语句映射关系配置文件,xml 文件内容:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mapper PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN" "http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.micro.profession.mybatis.GetUserInfo">
	<!-- 在select标签中编写查询的SQL语句,设置select标签的id属性为getUser,
		 resultType="MyBatisTest.User"就表示将查询结果封装成一个User类 -->
	<!-- 根据id查询得到一个user对象 -->
	<select id="getUser" parameterType="int" resultType="com.micro.profession.mybatis.User">
	select id, userName, corp from user where id =#{id}
	</select>
</mapper>

注册配置文件

在 SqlSessionFactory 的配置文件中加入

<mappers>
    <mapper resource="com/micro/profession/mybatis/userMapper.xml" />
</mappers>

Mybatis 使用步骤:

    //1. 声明配置文件的目录

    String resource = "conf.xml";

    //2. 加载应用配置文件

    InputStream is = HelloMybatis.class.getClassLoader().getResourceAsStream(resource);

    //3. 创建SqlSessionFactory

    SqlSessionFactory sessionFactory = new SqlSessionFactoryBuilder().build(is);

    //4. 获取session

    SqlSession session = sessionFactory.openSession();

    //5. 获取操作类

    GetUserInfo getUserInfo = session.getMapper(GetUserInfo.class);

    User user = getUserInfo.getUser(2);

    System.out.println(user.getId() + " " + user.getUserName() + " " + user.getPassword());

    session.close();

采用注解的方法进行映射:

@Select("select * from user where user_id = #{id}")

public User getUser(int id);

使用方法:

在原来使用步骤基础上插入:

    SqlSessionFactory sessionFactory = new SqlSessionFactoryBuilder().build(is); 

    Configuration conf = sessionFactory.getConfiguration();

    conf.addMapper(GetUserInfoAnnotation.class);

    SqlSession session = sessionFactory.openSession();  

其他操作,增删查改:

select user_id, userName, password from user where user_id =#{user_id}

insert into user (userName, password) values(#{userName}, #{password})

update user set userName = #{userName}, password = #{password} where user_id = #{user_id}

delete from user where user_id = #{user_id}

使用实例:

    //1. 声明配置文件的目录

    String resource = "conf.xml";

    //2. 加载应用配置文件

    InputStream is = HelloMybatis.class.getClassLoader().getResourceAsStream(resource);

    //3. 创建SqlSessionFactory

    SqlSessionFactory sessionFactory = new SqlSessionFactoryBuilder().build(is);

    //4. 获取session

    SqlSession session = sessionFactory.openSession(true);

    //5. 获取操作类

    GetUserInfo getUserInfo = session.getMapper(GetUserInfo.class);

    //插入用户

    User user = new User("xiaoming", "123456");

    getUserInfo.addUser(user);

    System.out.println(user.getId());

    //查询用户

    user = getUserInfo.getUser(user.getId());

    System.out.println(user.getId() + " " + user.getUserName() + " " + user.getPassword());

    //更改用户

    user.setUserName("LiMing");

    getUserInfo.updateUser(user);

    //删除用户

    getUserInfo.deleteUser(user);

    //关闭session

    session.close();

Mybatis 传递多个参数的方法

DAO 层函数

Public User selectUser(@param(“userName”)String name,@param(“userArea”)String area);

对应 Mapper

<select id=" selectUser" resultMap="BaseResultMap">
   select  *  from user_user_t   where user_name = #{userName,jdbcType=VARCHAR} and user_area=#{userArea,jdbcType=VARCHAR}
</select> 

复杂查询,使用 ResultMap,实现复杂查询结果到复杂对象关联关系的转化

Constructor

类在实例化时,用来注入结果到构造方法中

idArg —— ID 参数;标记结果作为 ID 可以帮助提高整体性能

arg —— 注入到构造方法的一个普通结果

Collection

实现一对多的关联

id —— 一个 ID 结果;标记结果作为 ID 可以帮助提高整体性能

result —— 注入到字段或 JavaBean 属性的普通结果

Mapper 的 xml 文件内容:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mapper PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN" "http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.netease.mybatis.practice.UserOp">
	<select id="getUser" parameterType="int" resultMap="UserMap">
	select u.user_id as user_id, userName, password, c.id as courseId, courseName from user u left
	join
	UserCourse uc on u.user_id = uc.user_id left
	join
	course c on c.id = uc.course_id	where u.user_id =#{user_id}
	</select>

	<resultMap id="UserMap" type="com.netease.mybatis.practice.User">
		<constructor>
			<idArg column="user_id" javaType="int" />
			<arg column="userName" javaType="String" />
			<arg column="password" javaType="String" />
		</constructor>
		<collection property="courses" ofType="com.netease.mybatis.practice.Course">
			<id property="courseId" column="courseId" />
			<result property="courseName" column="courseName" />
		</collection>
	</resultMap>
</mapper>

collection 项若为 Integer,String 等类型,可设为

  <collection property="list" column="productname" ofType="java.lang.String">
     <result column="productname" />
  </collection>

Association,实现复杂类型之间的关联

id —— 一个 ID 结果;标记结果作为 ID 可以帮助提高整体性能

result —— 注入到字段或 JavaBean 属性的普通结果

xml 文件内容中增加 association 项,修改为:

<collection property="courses" ofType="com.netease.mybatis.practice.Course">
			<id property="courseId" column="courseId" />
			<result property="courseName" column="courseName" />
			<association property="teacher" column="teacherId" javaType="com.netease.mybatis.practice.Teacher">
				<id property="teacherId" column="teacherId" />
				<result property="teacherName" column="teacherName" />
			</association>
</collection>

Mybatis 自带连接池

连接池常用配置选项

poolMaximumActiveConnections:

数据库最大活跃连接数,不宜设置过大

poolMaximumIdleConnections:

最大空闲连接数,一般设置与 poolMaximum 相同即可

poolMaximumCheckoutTime:

获取连接时如果没有 idleConnection 同时 activeConnection 达到最大值,则从 activeConnection 列表第一个连接开始检查,如果超过此时间,则使其失效,返回该连接,建议设置为预期最大 SQL 执行时间

poolTimeToWait:

获取服务器连接的超时时间,如果超时,打印日志重新获取连接。默认为 20s

poolPingEnabled:

启用连接侦测,检查连接池中的连接是否为有效连接,默认为关闭,建议开启

poolPingQuery:

侦测 SQL,建议使用 select 1,开销小

poolPingConnectionsNotUsedFor:

侦测时间,建议小于服务器端超时时间,MySQL 默认超时 8 小时

  • 数据库

    据说 99% 的性能瓶颈都在数据库。

    330 引用 • 614 回帖
  • MySQL

    MySQL 是一个关系型数据库管理系统,由瑞典 MySQL AB 公司开发,目前属于 Oracle 公司。MySQL 是最流行的关系型数据库管理系统之一。

    675 引用 • 535 回帖

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...

推荐标签 标签

  • Thymeleaf

    Thymeleaf 是一款用于渲染 XML/XHTML/HTML5 内容的模板引擎。类似 Velocity、 FreeMarker 等,它也可以轻易的与 Spring 等 Web 框架进行集成作为 Web 应用的模板引擎。与其它模板引擎相比,Thymeleaf 最大的特点是能够直接在浏览器中打开并正确显示模板页面,而不需要启动整个 Web 应用。

    11 引用 • 19 回帖 • 319 关注
  • 京东

    京东是中国最大的自营式电商企业,2015 年第一季度在中国自营式 B2C 电商市场的占有率为 56.3%。2014 年 5 月,京东在美国纳斯达克证券交易所正式挂牌上市(股票代码:JD),是中国第一个成功赴美上市的大型综合型电商平台,与腾讯、百度等中国互联网巨头共同跻身全球前十大互联网公司排行榜。

    14 引用 • 102 回帖 • 405 关注
  • 互联网

    互联网(Internet),又称网际网络,或音译因特网、英特网。互联网始于 1969 年美国的阿帕网,是网络与网络之间所串连成的庞大网络,这些网络以一组通用的协议相连,形成逻辑上的单一巨大国际网络。

    96 引用 • 330 回帖
  • Pipe

    Pipe 是一款小而美的开源博客平台。Pipe 有着非常活跃的社区,可将文章作为帖子推送到社区,来自社区的回帖将作为博客评论进行联动(具体细节请浏览 B3log 构思 - 分布式社区网络)。

    这是一种全新的网络社区体验,让热爱记录和分享的你不再感到孤单!

    131 引用 • 1114 回帖 • 151 关注
  • Shell

    Shell 脚本与 Windows/Dos 下的批处理相似,也就是用各类命令预先放入到一个文件中,方便一次性执行的一个程序文件,主要是方便管理员进行设置或者管理用的。但是它比 Windows 下的批处理更强大,比用其他编程程序编辑的程序效率更高,因为它使用了 Linux/Unix 下的命令。

    122 引用 • 73 回帖
  • Bug

    Bug 本意是指臭虫、缺陷、损坏、犯贫、窃听器、小虫等。现在人们把在程序中一些缺陷或问题统称为 bug(漏洞)。

    77 引用 • 1741 回帖
  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统,支持完全离线使用,同时也支持端到端加密同步。

    融合块、大纲和双向链接,重构你的思维。

    18709 引用 • 69853 回帖 • 1 关注
  • Vditor

    Vditor 是一款浏览器端的 Markdown 编辑器,支持所见即所得、即时渲染(类似 Typora)和分屏预览模式。它使用 TypeScript 实现,支持原生 JavaScript、Vue、React 和 Angular。

    313 引用 • 1667 回帖 • 1 关注
  • Node.js

    Node.js 是一个基于 Chrome JavaScript 运行时建立的平台, 用于方便地搭建响应速度快、易于扩展的网络应用。Node.js 使用事件驱动, 非阻塞 I/O 模型而得以轻量和高效。

    138 引用 • 268 回帖 • 194 关注
  • React

    React 是 Facebook 开源的一个用于构建 UI 的 JavaScript 库。

    192 引用 • 291 回帖 • 443 关注
  • Mobi.css

    Mobi.css is a lightweight, flexible CSS framework that focus on mobile.

    1 引用 • 6 回帖 • 697 关注
  • 微服务

    微服务架构是一种架构模式,它提倡将单一应用划分成一组小的服务。服务之间互相协调,互相配合,为用户提供最终价值。每个服务运行在独立的进程中。服务于服务之间才用轻量级的通信机制互相沟通。每个服务都围绕着具体业务构建,能够被独立的部署。

    96 引用 • 155 回帖
  • IDEA

    IDEA 全称 IntelliJ IDEA,是一款 Java 语言开发的集成环境,在业界被公认为最好的 Java 开发工具之一。IDEA 是 JetBrains 公司的产品,这家公司总部位于捷克共和国的首都布拉格,开发人员以严谨著称的东欧程序员为主。

    180 引用 • 400 回帖
  • IBM

    IBM(国际商业机器公司)或万国商业机器公司,简称 IBM(International Business Machines Corporation),总公司在纽约州阿蒙克市。1911 年托马斯·沃森创立于美国,是全球最大的信息技术和业务解决方案公司,拥有全球雇员 30 多万人,业务遍及 160 多个国家和地区。

    16 引用 • 53 回帖 • 123 关注
  • OnlyOffice
    4 引用 • 23 关注
  • wolai

    我来 wolai:不仅仅是未来的云端笔记!

    1 引用 • 11 回帖 • 2 关注
  • 阿里云

    阿里云是阿里巴巴集团旗下公司,是全球领先的云计算及人工智能科技公司。提供云服务器、云数据库、云安全等云计算服务,以及大数据、人工智能服务、精准定制基于场景的行业解决方案。

    89 引用 • 345 回帖
  • SpaceVim

    SpaceVim 是一个社区驱动的模块化 vim/neovim 配置集合,以模块的方式组织管理插件以
    及相关配置,为不同的语言开发量身定制了相关的开发模块,该模块提供代码自动补全,
    语法检查、格式化、调试、REPL 等特性。用户仅需载入相关语言的模块即可得到一个开箱
    即用的 Vim-IDE。

    3 引用 • 31 回帖 • 71 关注
  • 持续集成

    持续集成(Continuous Integration)是一种软件开发实践,即团队开发成员经常集成他们的工作,通过每个成员每天至少集成一次,也就意味着每天可能会发生多次集成。每次集成都通过自动化的构建(包括编译,发布,自动化测试)来验证,从而尽早地发现集成错误。

    14 引用 • 7 回帖
  • 招聘

    哪里都缺人,哪里都不缺人。

    189 引用 • 1056 回帖
  • Logseq

    Logseq 是一个隐私优先、开源的知识库工具。

    Logseq is a joyful, open-source outliner that works on top of local plain-text Markdown and Org-mode files. Use it to write, organize and share your thoughts, keep your to-do list, and build your own digital garden.

    4 引用 • 55 回帖 • 10 关注
  • Q&A

    提问之前请先看《提问的智慧》,好的问题比好的答案更有价值。

    6554 引用 • 29428 回帖 • 246 关注
  • Ruby

    Ruby 是一种开源的面向对象程序设计的服务器端脚本语言,在 20 世纪 90 年代中期由日本的松本行弘(まつもとゆきひろ/Yukihiro Matsumoto)设计并开发。在 Ruby 社区,松本也被称为马茨(Matz)。

    7 引用 • 31 回帖 • 175 关注
  • Java

    Java 是一种可以撰写跨平台应用软件的面向对象的程序设计语言,是由 Sun Microsystems 公司于 1995 年 5 月推出的。Java 技术具有卓越的通用性、高效性、平台移植性和安全性。

    3168 引用 • 8207 回帖
  • 支付宝

    支付宝是全球领先的独立第三方支付平台,致力于为广大用户提供安全快速的电子支付/网上支付/安全支付/手机支付体验,及转账收款/水电煤缴费/信用卡还款/AA 收款等生活服务应用。

    29 引用 • 347 回帖
  • 单点登录

    单点登录(Single Sign On)是目前比较流行的企业业务整合的解决方案之一。SSO 的定义是在多个应用系统中,用户只需要登录一次就可以访问所有相互信任的应用系统。

    9 引用 • 25 回帖 • 2 关注
  • Typecho

    Typecho 是一款博客程序,它在 GPLv2 许可证下发行,基于 PHP 构建,可以运行在各种平台上,支持多种数据库(MySQL、PostgreSQL、SQLite)。

    12 引用 • 60 回帖 • 465 关注