学习笔记 -- 数据库开发

本贴最后更新于 2747 天前,其中的信息可能已经时移世异

//JDBC 基础

JDBC URL

jdbc:

jdbc:oracle:thin:@::database

jdbc:microsoft::; DatabaseName=database

常用方法:

Statement stmt = conn.createStatement();

ResultSet rs = stmt.executeQuery("select userName from user“);

ResultSet 常用方法:

.next();

.previous();

.absolute();

.beforeFirst();

.afterLast();

.getString(ColumnName/Index);

.getInt(ColumnName/Index);

.getObject(ColumnName/Index);

构建步骤:

1. 装载驱动程序

Class.forName("com.mysql.jdbc.Driver");

2. 建立数据库连接

Connection conn = DriverManager.getConnection("jdbc:, user, password);

3. 执行 SQL 语句

Statement stmt = conn.createStatement(); //java.sql 包

ResultSet rs = stmt.executeQuery("select userName from user");

4. 获取执行结果

while (rs.next()) {

System.out.println("Hello " + rs.getString("userName"));

}

5. 清理环境

conn.close(); //一般需判断不为 null,需要放在异常处理的 finally 中

stmt.close();

rs.close();

//JDBC 进阶

游标提供一种客户端读取部分服务器端结果集的机制

DB_URL = jdbc: //开启游标

利用 PreparedStatement

.setFetchSize(1);

对于大对象的读取,采用流方式

ResultSet.getBinaryStream("columnName")

一次性往数据库中插入大量数据,采用批处理

Statement

.addBatch()

.executeBatch()

.clearBatch()

字符集编码

mysql 语句:

show variables like '%character%'; //显示字符集编码信息,优先级别:column>table>database>server

show create table user;

JDBC 设置:

DB_URL = DB_URL + characterEncoding=utf8

//数据库连接池

DBCP 连接池,Tomcat 的连接池组件,由三个 jar 包组成:

commons-dbcp.jar

commons-pool.jar

commons-logging.jar

创建 BasicDataSource 对象:

    public static BasicDataSource ds = null;

    ds = new BasicDataSource();

    ds.setUrl(DB_URL);

    ds.setDriverClassName(JDBC_DRIVER);

    ds.setUsername(USER);

    ds.setPassword(PASSWORD);

创建连接:

        conn = ds.getConnection();

        ...同JDBC基础

DBCP 高级配置

BasicDataSource

.setInitialSize() //设置初始连接数

.setMaxTotal() //设置最大连接数

.setMaxWaitMillis() //设置最大等待时间

.setMaxIdle() //设置最大空闲连接数

.setMinIdle() //设置最小空闲连接数,一般设置与最大空闲相同

DBCP 定期检查

BasicDataSource

.setTestWhiteIdle(true) //开启检查线程是否为有效的功能

.setMinEvictableIdleTimeMillis() //设置关闭数据库连接的空闲时间阈值

.setTimeBetweenEvictionRunMillis() //设置检查运行时间的间隔,一般小于默认最小空闲连接时间 8 小时

//SQL 注入与防范

SQL 注入例子:

在 SQL 语句拼接中,userName = "zhangsan';#",欺骗服务器

SQL 注入防范:

使用 PreparedStatement:

        PreparedStatement ptmt = null;

        ptmt = conn.prepareStatement("select * from user where userName = ? and password = ?");

        ptmt.setString(1, userName);

        ptmt.setString(2, password);

        rs = ptmt.executeQuery();

//事务

JDBC 事务控制

Connection

.setAutoCommit(false) //开启事务,默认为 true 即未开启事务,设置为 false 为开启事务

.commit() //提交事务

.rollback() //回滚事务

检查点

Savepoint sp = conn.setSavepoint(); //设置检查点

conn.rollback(sp); //回滚到检查点状态

脏读,不可重复读,幻读

事务并发执行

事务隔离级别:

读未提交(read uncommitted)

读提交 (read committed)

重复读(repeatable read)

串行化(serializable)

默认级别为重复读,级别越高,数据库性能越差

设置隔离级别:

Connection

.getTransactionIsolation()

.setTransactionIsolation()

死锁

死锁的必要条件:

互斥,请求和保持,不剥夺,环路等待

外部加锁:

共享锁(S):select * from table lock in share mode

排他锁(X):select * from table for update

内部加锁:

数据库系统为实现 ACID 特性自动添加

快照读:支持不加锁,select * from table 为快照读

当前读:可能加锁

解决死锁方法:强制回滚代价小的事务

分析死锁方法:show engine innodb status

//Mybatis

ORM 框架

SqlSessionFactory 配置,xml 文件内容:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE configuration PUBLIC "-//mybatis.org//DTD Config 3.0//EN" "http://mybatis.org/dtd/mybatis-3-config.dtd">
<configuration>
	<environments default="development">
		<environment id="development">
			<transactionManager type="jdbc" />
			<!-- 配置数据库连接信息 -->
			<dataSource type="POOLED">
				<property name="driver" value="com.mysql.jdbc.Driver" />
				<property name="url" value="jdbc:mysql://localhost:3306/test" />
				<property name="username" value="root" />
				<property name="password" value="qiyao.luo" />
			</dataSource>
		</environment>
	</environments>
</configuration>	

创建 Java 对象与 SQL 语句映射关系配置文件,xml 文件内容:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mapper PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN" "http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.micro.profession.mybatis.GetUserInfo">
	<!-- 在select标签中编写查询的SQL语句,设置select标签的id属性为getUser,
		 resultType="MyBatisTest.User"就表示将查询结果封装成一个User类 -->
	<!-- 根据id查询得到一个user对象 -->
	<select id="getUser" parameterType="int" resultType="com.micro.profession.mybatis.User">
	select id, userName, corp from user where id =#{id}
	</select>
</mapper>

注册配置文件

在 SqlSessionFactory 的配置文件中加入

<mappers>
    <mapper resource="com/micro/profession/mybatis/userMapper.xml" />
</mappers>

Mybatis 使用步骤:

    //1. 声明配置文件的目录

    String resource = "conf.xml";

    //2. 加载应用配置文件

    InputStream is = HelloMybatis.class.getClassLoader().getResourceAsStream(resource);

    //3. 创建SqlSessionFactory

    SqlSessionFactory sessionFactory = new SqlSessionFactoryBuilder().build(is);

    //4. 获取session

    SqlSession session = sessionFactory.openSession();

    //5. 获取操作类

    GetUserInfo getUserInfo = session.getMapper(GetUserInfo.class);

    User user = getUserInfo.getUser(2);

    System.out.println(user.getId() + " " + user.getUserName() + " " + user.getPassword());

    session.close();

采用注解的方法进行映射:

@Select("select * from user where user_id = #{id}")

public User getUser(int id);

使用方法:

在原来使用步骤基础上插入:

    SqlSessionFactory sessionFactory = new SqlSessionFactoryBuilder().build(is); 

    Configuration conf = sessionFactory.getConfiguration();

    conf.addMapper(GetUserInfoAnnotation.class);

    SqlSession session = sessionFactory.openSession();  

其他操作,增删查改:

select user_id, userName, password from user where user_id =#{user_id}

insert into user (userName, password) values(#{userName}, #{password})

update user set userName = #{userName}, password = #{password} where user_id = #{user_id}

delete from user where user_id = #{user_id}

使用实例:

    //1. 声明配置文件的目录

    String resource = "conf.xml";

    //2. 加载应用配置文件

    InputStream is = HelloMybatis.class.getClassLoader().getResourceAsStream(resource);

    //3. 创建SqlSessionFactory

    SqlSessionFactory sessionFactory = new SqlSessionFactoryBuilder().build(is);

    //4. 获取session

    SqlSession session = sessionFactory.openSession(true);

    //5. 获取操作类

    GetUserInfo getUserInfo = session.getMapper(GetUserInfo.class);

    //插入用户

    User user = new User("xiaoming", "123456");

    getUserInfo.addUser(user);

    System.out.println(user.getId());

    //查询用户

    user = getUserInfo.getUser(user.getId());

    System.out.println(user.getId() + " " + user.getUserName() + " " + user.getPassword());

    //更改用户

    user.setUserName("LiMing");

    getUserInfo.updateUser(user);

    //删除用户

    getUserInfo.deleteUser(user);

    //关闭session

    session.close();

Mybatis 传递多个参数的方法

DAO 层函数

Public User selectUser(@param(“userName”)String name,@param(“userArea”)String area);

对应 Mapper

<select id=" selectUser" resultMap="BaseResultMap">
   select  *  from user_user_t   where user_name = #{userName,jdbcType=VARCHAR} and user_area=#{userArea,jdbcType=VARCHAR}
</select> 

复杂查询,使用 ResultMap,实现复杂查询结果到复杂对象关联关系的转化

Constructor

类在实例化时,用来注入结果到构造方法中

idArg —— ID 参数;标记结果作为 ID 可以帮助提高整体性能

arg —— 注入到构造方法的一个普通结果

Collection

实现一对多的关联

id —— 一个 ID 结果;标记结果作为 ID 可以帮助提高整体性能

result —— 注入到字段或 JavaBean 属性的普通结果

Mapper 的 xml 文件内容:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mapper PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN" "http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.netease.mybatis.practice.UserOp">
	<select id="getUser" parameterType="int" resultMap="UserMap">
	select u.user_id as user_id, userName, password, c.id as courseId, courseName from user u left
	join
	UserCourse uc on u.user_id = uc.user_id left
	join
	course c on c.id = uc.course_id	where u.user_id =#{user_id}
	</select>

	<resultMap id="UserMap" type="com.netease.mybatis.practice.User">
		<constructor>
			<idArg column="user_id" javaType="int" />
			<arg column="userName" javaType="String" />
			<arg column="password" javaType="String" />
		</constructor>
		<collection property="courses" ofType="com.netease.mybatis.practice.Course">
			<id property="courseId" column="courseId" />
			<result property="courseName" column="courseName" />
		</collection>
	</resultMap>
</mapper>

collection 项若为 Integer,String 等类型,可设为

  <collection property="list" column="productname" ofType="java.lang.String">
     <result column="productname" />
  </collection>

Association,实现复杂类型之间的关联

id —— 一个 ID 结果;标记结果作为 ID 可以帮助提高整体性能

result —— 注入到字段或 JavaBean 属性的普通结果

xml 文件内容中增加 association 项,修改为:

<collection property="courses" ofType="com.netease.mybatis.practice.Course">
			<id property="courseId" column="courseId" />
			<result property="courseName" column="courseName" />
			<association property="teacher" column="teacherId" javaType="com.netease.mybatis.practice.Teacher">
				<id property="teacherId" column="teacherId" />
				<result property="teacherName" column="teacherName" />
			</association>
</collection>

Mybatis 自带连接池

连接池常用配置选项

poolMaximumActiveConnections:

数据库最大活跃连接数,不宜设置过大

poolMaximumIdleConnections:

最大空闲连接数,一般设置与 poolMaximum 相同即可

poolMaximumCheckoutTime:

获取连接时如果没有 idleConnection 同时 activeConnection 达到最大值,则从 activeConnection 列表第一个连接开始检查,如果超过此时间,则使其失效,返回该连接,建议设置为预期最大 SQL 执行时间

poolTimeToWait:

获取服务器连接的超时时间,如果超时,打印日志重新获取连接。默认为 20s

poolPingEnabled:

启用连接侦测,检查连接池中的连接是否为有效连接,默认为关闭,建议开启

poolPingQuery:

侦测 SQL,建议使用 select 1,开销小

poolPingConnectionsNotUsedFor:

侦测时间,建议小于服务器端超时时间,MySQL 默认超时 8 小时

  • 数据库

    据说 99% 的性能瓶颈都在数据库。

    342 引用 • 708 回帖
  • MySQL

    MySQL 是一个关系型数据库管理系统,由瑞典 MySQL AB 公司开发,目前属于 Oracle 公司。MySQL 是最流行的关系型数据库管理系统之一。

    691 引用 • 535 回帖

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...

推荐标签 标签

  • Thymeleaf

    Thymeleaf 是一款用于渲染 XML/XHTML/HTML5 内容的模板引擎。类似 Velocity、 FreeMarker 等,它也可以轻易的与 Spring 等 Web 框架进行集成作为 Web 应用的模板引擎。与其它模板引擎相比,Thymeleaf 最大的特点是能够直接在浏览器中打开并正确显示模板页面,而不需要启动整个 Web 应用。

    11 引用 • 19 回帖 • 355 关注
  • jsoup

    jsoup 是一款 Java 的 HTML 解析器,可直接解析某个 URL 地址、HTML 文本内容。它提供了一套非常省力的 API,可通过 DOM,CSS 以及类似于 jQuery 的操作方法来取出和操作数据。

    6 引用 • 1 回帖 • 476 关注
  • TGIF

    Thank God It's Friday! 感谢老天,总算到星期五啦!

    287 引用 • 4484 回帖 • 669 关注
  • TextBundle

    TextBundle 文件格式旨在应用程序之间交换 Markdown 或 Fountain 之类的纯文本文件时,提供更无缝的用户体验。

    1 引用 • 2 回帖 • 49 关注
  • Linux

    Linux 是一套免费使用和自由传播的类 Unix 操作系统,是一个基于 POSIX 和 Unix 的多用户、多任务、支持多线程和多 CPU 的操作系统。它能运行主要的 Unix 工具软件、应用程序和网络协议,并支持 32 位和 64 位硬件。Linux 继承了 Unix 以网络为核心的设计思想,是一个性能稳定的多用户网络操作系统。

    944 引用 • 943 回帖
  • 宕机

    宕机,多指一些网站、游戏、网络应用等服务器一种区别于正常运行的状态,也叫“Down 机”、“当机”或“死机”。宕机状态不仅仅是指服务器“挂掉了”、“死机了”状态,也包括服务器假死、停用、关闭等一些原因而导致出现的不能够正常运行的状态。

    13 引用 • 82 回帖 • 52 关注
  • Rust

    Rust 是一门赋予每个人构建可靠且高效软件能力的语言。Rust 由 Mozilla 开发,最早发布于 2014 年 9 月。

    58 引用 • 22 回帖
  • 阿里巴巴

    阿里巴巴网络技术有限公司(简称:阿里巴巴集团)是以曾担任英语教师的马云为首的 18 人,于 1999 年在中国杭州创立,他们相信互联网能够创造公平的竞争环境,让小企业通过创新与科技扩展业务,并在参与国内或全球市场竞争时处于更有利的位置。

    43 引用 • 221 回帖 • 114 关注
  • 安全

    安全永远都不是一个小问题。

    199 引用 • 816 回帖 • 1 关注
  • GitLab

    GitLab 是利用 Ruby 一个开源的版本管理系统,实现一个自托管的 Git 项目仓库,可通过 Web 界面操作公开或私有项目。

    46 引用 • 72 回帖 • 1 关注
  • 机器学习

    机器学习(Machine Learning)是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能。

    83 引用 • 37 回帖 • 1 关注
  • VirtualBox

    VirtualBox 是一款开源虚拟机软件,最早由德国 Innotek 公司开发,由 Sun Microsystems 公司出品的软件,使用 Qt 编写,在 Sun 被 Oracle 收购后正式更名成 Oracle VM VirtualBox。

    10 引用 • 2 回帖 • 6 关注
  • API

    应用程序编程接口(Application Programming Interface)是一些预先定义的函数,目的是提供应用程序与开发人员基于某软件或硬件得以访问一组例程的能力,而又无需访问源码,或理解内部工作机制的细节。

    77 引用 • 430 回帖
  • Spring

    Spring 是一个开源框架,是于 2003 年兴起的一个轻量级的 Java 开发框架,由 Rod Johnson 在其著作《Expert One-On-One J2EE Development and Design》中阐述的部分理念和原型衍生而来。它是为了解决企业应用开发的复杂性而创建的。框架的主要优势之一就是其分层架构,分层架构允许使用者选择使用哪一个组件,同时为 JavaEE 应用程序开发提供集成的框架。

    944 引用 • 1459 回帖 • 17 关注
  • GitBook

    GitBook 使您的团队可以轻松编写和维护高质量的文档。 分享知识,提高团队的工作效率,让用户满意。

    3 引用 • 8 回帖 • 4 关注
  • Android

    Android 是一种以 Linux 为基础的开放源码操作系统,主要使用于便携设备。2005 年由 Google 收购注资,并拉拢多家制造商组成开放手机联盟开发改良,逐渐扩展到到平板电脑及其他领域上。

    334 引用 • 323 回帖 • 2 关注
  • GraphQL

    GraphQL 是一个用于 API 的查询语言,是一个使用基于类型系统来执行查询的服务端运行时(类型系统由你的数据定义)。GraphQL 并没有和任何特定数据库或者存储引擎绑定,而是依靠你现有的代码和数据支撑。

    4 引用 • 3 回帖 • 9 关注
  • 程序员

    程序员是从事程序开发、程序维护的专业人员。

    568 引用 • 3532 回帖
  • Hadoop

    Hadoop 是由 Apache 基金会所开发的一个分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。

    86 引用 • 122 回帖 • 625 关注
  • 外包

    有空闲时间是接外包好呢还是学习好呢?

    26 引用 • 232 回帖 • 2 关注
  • Vim

    Vim 是类 UNIX 系统文本编辑器 Vi 的加强版本,加入了更多特性来帮助编辑源代码。Vim 的部分增强功能包括文件比较(vimdiff)、语法高亮、全面的帮助系统、本地脚本(Vimscript)和便于选择的可视化模式。

    29 引用 • 66 回帖
  • 负能量

    上帝为你关上了一扇门,然后就去睡觉了....努力不一定能成功,但不努力一定很轻松 (° ー °〃)

    88 引用 • 1235 回帖 • 412 关注
  • PostgreSQL

    PostgreSQL 是一款功能强大的企业级数据库系统,在 BSD 开源许可证下发布。

    22 引用 • 22 回帖
  • 大数据

    大数据(big data)是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

    93 引用 • 113 回帖
  • Telegram

    Telegram 是一个非盈利性、基于云端的即时消息服务。它提供了支持各大操作系统平台的开源的客户端,也提供了很多强大的 APIs 给开发者创建自己的客户端和机器人。

    5 引用 • 35 回帖 • 1 关注
  • 房星科技

    房星网,我们不和没有钱的程序员谈理想,我们要让程序员又有理想又有钱。我们有雄厚的房地产行业线下资源,遍布昆明全城的 100 家门店、四千地产经纪人是我们坚实的后盾。

    6 引用 • 141 回帖 • 585 关注
  • 阿里云

    阿里云是阿里巴巴集团旗下公司,是全球领先的云计算及人工智能科技公司。提供云服务器、云数据库、云安全等云计算服务,以及大数据、人工智能服务、精准定制基于场景的行业解决方案。

    89 引用 • 345 回帖