JAVA 实践项目 --- 树莓派信息自动化采集后入库项目 (五)

本贴最后更新于 2466 天前,其中的信息可能已经时移俗易

项目源代码可访问我的 github:https://github.com/Spacider/Gather-and-store
如果觉得好的话请给个 star 哦~

开发 IDE: IDEA 2018.03 JDK 1.8
开发环境: macOS 10.13.6 (如 windows 请对项目中部分路径进行改写)
数据库: Oracle 11g


第四阶段:发送给我们的服务端,并进行入库操作

这一阶段我们的任务就是接收上节客户端发送的对象数据,并且在分析以后把数据写入数据库!

imagepng

此层项目结构为:
imagepng


接下来,看代码:
1.编写一个 EnvServer 接口,其中有个抽象方法,作用就是接收各个客户端发送过来的集合对象:

/** * 服务器端模块 */ public interface EnvServer extends WossModel { /** * 接收各个客户端发送过来的集合对象 Collection(Environment) */ void receive(); }

新创建一个实现包为 Impl ,创建实现类 EnvServerImpl,其中实现了 receive 方法,在写 receive 方法之前,我们先定义一个线程来接收,运用线程可以很好的体现"持续性"读取的特点。

class EnvServerThread extends Thread { private Socket socket; public EnvServerThread (Socket socket){ this.socket = socket; } }

使用构造器把 socket 对象传入!这样我们就可以在线程类中操作流来接收我们需要的数据了!

is = socket.getInputStream(); ois = new ObjectInputStream(is); List <Environment> environmentList = (List <Environment>) ois.readObject();

获取到我们的输入流时,直接将其包装成对象流(上文发过来的时候使用对象流发送),故我们可以通过 readObject 方法来得到我们上文从客户端发过来的对象!

之后 receive 方法可以这么写:

/** * 服务器接收方法 */ public void receive() { Socket socket = null; try { ServerSocket server = new ServerSocket(port); logger.info("server 启动"+ server); while(true){ socket = server.accept(); new EnvServerThread(socket).start(); } } catch (IOException e) { e.printStackTrace(); } }

运行 EnvServerImpl 类和 ClientMain 类和 DataServer 类,在服务端的线程中打印对象数组,在看见数组并且数组正确时,就说明你这一部分写对了!


2.在获得对象以后我们需要对数组进行入库操作:
编写接口

/** * 入库模块 */ public interface DBStore extends WossModel { /** * 把服务器接收到的数据写入到数据库中持久保存 * 注意数据的录入是按天进行录入的 * t_s ---> 拆分成多张表 * 20/5 取余数 * t_s0 t_s1 t_s2 t_s3 t_s4 * @param col */ void saveEnvToDB(Collection<Environment> col); }

数据库操作自然会用到 jdbc!为了方便编写一个数组库的操作类,里边包含各种关于数据库的操作:
此处,请记得修改你的文件路径,第二记得修改文件中的内容,修改为你对应数据库的链接信息!
这个和一般网上所写的都差不多,就直接贴代码了:

/** * 数据库处理帮助类 * 书写关于数据库的一些操作方法,比如 获取连接对象 、 封装插入方法 */ public class DBhelper { // dhcp 缓冲池对象 private static BasicDataSource DATA_SOURCE; static { Properties properties = new Properties(); FileInputStream fis = null; try { fis = new FileInputStream(new File("/Users/wjh/Desktop/FirstProject/src/main/resources/config.properties")); properties.load(fis); // 通过读取 properties 文件来初始化 DATA_SOURCE DATA_SOURCE = new BasicDataSource(); DATA_SOURCE = BasicDataSourceFactory.createDataSource(properties); } catch (Exception e) { e.printStackTrace(); } finally { IOUtil.close(fis); } } /** * 获取 Connection 连接对象 * @return */ public static Connection getConnction(){ Connection connection = null; try { connection = DATA_SOURCE.getConnection(); } catch (SQLException e) { e.printStackTrace(); } return connection; } /** * 处理 SQL 语句方法 * @param sql */ public static void ExecuteSql(String sql){ Connection connection = getConnction(); PreparedStatement ps = null; try { ps = connection.prepareStatement(sql); ps.execute(); } catch (SQLException e) { e.printStackTrace(); } finally { try { if (ps != null) { ps.close(); } if (connection != null) { connection.close(); } } catch (SQLException e) { e.printStackTrace(); } } } }

之后我们就可以写入库的实现类 DBStoreImpl
通过我们刚才写的数据库操作类来获得一个数据库链接:

Connection connection = DBhelper.getConnction();

之后就是对对象的拆分并通过 PreparedStatement 来对 sql 语句进行预加载,把对应的数据存入:

for (Environment environment : col) { DateFormat sdf = new SimpleDateFormat("yyyy-MM-dd-HH:mm:ss"); Timestamp timestamp = environment.getGather_date(); String tsStr = sdf.format(timestamp); // gather_date=2018-09-15 11:17:48.0 String[] time = tsStr.split("\\-"); String day = time[2]; // 拼接 sql 语句 String sql = "insert into T_DETAIL_" + day + " values(?,?,?,?,?,?,?,?,?,?)"; ps = connection.prepareStatement(sql); ps.setString(1,environment.getName()); ps.setString(2,environment.getSrcID()); ps.setString(3,environment.getDstID()); ps.setString(4,environment.getDevID()); ps.setString(5,environment.getSensorAddress()); ps.setInt(6,environment.getCount()); ps.setInt(7,environment.getCmd()); ps.setString(8,environment.getData()+""); ps.setInt(9,environment.getStatus()); ps.setTimestamp(10,environment.getGather_date());

接下来是对数组运行的处理,这里采用了缓存机制,等待 count 为 100 条的整数倍时再运行响应的 sql 语句,当 sql 语句较多时可以减少大量 sql 等待的场景。

ps.addBatch(); if ( count % 100 == 0 ) { ps.executeBatch(); } count ++;

实现了入库的操作之后在 EnvServerImpl 类的线程类中加入如下一行,
把数据递交给入库类处理:

// 数据库入库操作 dbStore.saveEnvToDB(environmentList);

最后,运行 EnvServerImpl 类和 ClientMain 类和 DataServer 类,看到提示信息,并发现数据库内有我们需要的数据的时候,就完成了当前部分的编写!

  • 实践项目
    6 引用
  • Java

    Java 是一种可以撰写跨平台应用软件的面向对象的程序设计语言,是由 Sun Microsystems 公司于 1995 年 5 月推出的。Java 技术具有卓越的通用性、高效性、平台移植性和安全性。

    3203 引用 • 8217 回帖 • 1 关注

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...

推荐标签 标签

  • IDEA

    IDEA 全称 IntelliJ IDEA,是一款 Java 语言开发的集成环境,在业界被公认为最好的 Java 开发工具之一。IDEA 是 JetBrains 公司的产品,这家公司总部位于捷克共和国的首都布拉格,开发人员以严谨著称的东欧程序员为主。

    181 引用 • 400 回帖
  • 资讯

    资讯是用户因为及时地获得它并利用它而能够在相对短的时间内给自己带来价值的信息,资讯有时效性和地域性。

    56 引用 • 85 回帖
  • IPFS

    IPFS(InterPlanetary File System,星际文件系统)是永久的、去中心化保存和共享文件的方法,这是一种内容可寻址、版本化、点对点超媒体的分布式协议。请浏览 IPFS 入门笔记了解更多细节。

    20 引用 • 245 回帖 • 233 关注
  • Java

    Java 是一种可以撰写跨平台应用软件的面向对象的程序设计语言,是由 Sun Microsystems 公司于 1995 年 5 月推出的。Java 技术具有卓越的通用性、高效性、平台移植性和安全性。

    3203 引用 • 8217 回帖 • 1 关注
  • 心情

    心是产生任何想法的源泉,心本体会陷入到对自己本体不能理解的状态中,因为心能产生任何想法,不能分出对错,不能分出自己。

    59 引用 • 369 回帖 • 1 关注
  • LaTeX

    LaTeX(音译“拉泰赫”)是一种基于 ΤΕΧ 的排版系统,由美国计算机学家莱斯利·兰伯特(Leslie Lamport)在 20 世纪 80 年代初期开发,利用这种格式,即使使用者没有排版和程序设计的知识也可以充分发挥由 TeX 所提供的强大功能,能在几天,甚至几小时内生成很多具有书籍质量的印刷品。对于生成复杂表格和数学公式,这一点表现得尤为突出。因此它非常适用于生成高印刷质量的科技和数学类文档。

    12 引用 • 59 回帖 • 1 关注
  • Office

    Office 现已更名为 Microsoft 365. Microsoft 365 将高级 Office 应用(如 Word、Excel 和 PowerPoint)与 1 TB 的 OneDrive 云存储空间、高级安全性等结合在一起,可帮助你在任何设备上完成操作。

    5 引用 • 34 回帖
  • flomo

    flomo 是新一代 「卡片笔记」 ,专注在碎片化时代,促进你的记录,帮你积累更多知识资产。

    6 引用 • 143 回帖
  • Gitea

    Gitea 是一个开源社区驱动的轻量级代码托管解决方案,后端采用 Go 编写,采用 MIT 许可证。

    5 引用 • 16 回帖
  • 智能合约

    智能合约(Smart contract)是一种旨在以信息化方式传播、验证或执行合同的计算机协议。智能合约允许在没有第三方的情况下进行可信交易,这些交易可追踪且不可逆转。智能合约概念于 1994 年由 Nick Szabo 首次提出。

    1 引用 • 11 回帖 • 1 关注
  • 又拍云

    又拍云是国内领先的 CDN 服务提供商,国家工信部认证通过的“可信云”,乌云众测平台认证的“安全云”,为移动时代的创业者提供新一代的 CDN 加速服务。

    20 引用 • 37 回帖 • 571 关注
  • SSL

    SSL(Secure Sockets Layer 安全套接层),及其继任者传输层安全(Transport Layer Security,TLS)是为网络通信提供安全及数据完整性的一种安全协议。TLS 与 SSL 在传输层对网络连接进行加密。

    70 引用 • 193 回帖 • 409 关注
  • 机器学习

    机器学习(Machine Learning)是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能。

    77 引用 • 37 回帖
  • RabbitMQ

    RabbitMQ 是一个开源的 AMQP 实现,服务器端用 Erlang 语言编写,支持多种语言客户端,如:Python、Ruby、.NET、Java、C、PHP、ActionScript 等。用于在分布式系统中存储转发消息,在易用性、扩展性、高可用性等方面表现不俗。

    49 引用 • 60 回帖 • 354 关注
  • Kafka

    Kafka 是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。 这种动作(网页浏览,搜索和其他用户的行动)是现代系统中许多功能的基础。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。

    36 引用 • 35 回帖 • 2 关注
  • 京东

    京东是中国最大的自营式电商企业,2015 年第一季度在中国自营式 B2C 电商市场的占有率为 56.3%。2014 年 5 月,京东在美国纳斯达克证券交易所正式挂牌上市(股票代码:JD),是中国第一个成功赴美上市的大型综合型电商平台,与腾讯、百度等中国互联网巨头共同跻身全球前十大互联网公司排行榜。

    14 引用 • 102 回帖 • 313 关注
  • 以太坊

    以太坊(Ethereum)并不是一个机构,而是一款能够在区块链上实现智能合约、开源的底层系统。以太坊是一个平台和一种编程语言 Solidity,使开发人员能够建立和发布下一代去中心化应用。 以太坊可以用来编程、分散、担保和交易任何事物:投票、域名、金融交易所、众筹、公司管理、合同和知识产权等等。

    34 引用 • 367 回帖
  • 一些有用的避坑指南。

    69 引用 • 93 回帖 • 1 关注
  • 生活

    生活是指人类生存过程中的各项活动的总和,范畴较广,一般指为幸福的意义而存在。生活实际上是对人生的一种诠释。生活包括人类在社会中与自己息息相关的日常活动和心理影射。

    230 引用 • 1432 回帖
  • Quicker

    Quicker 您的指尖工具箱!操作更少,收获更多!

    37 引用 • 157 回帖 • 2 关注
  • Access
    1 引用 • 3 回帖
  • PWA

    PWA(Progressive Web App)是 Google 在 2015 年提出、2016 年 6 月开始推广的项目。它结合了一系列现代 Web 技术,在网页应用中实现和原生应用相近的用户体验。

    14 引用 • 69 回帖 • 186 关注
  • CAP

    CAP 指的是在一个分布式系统中, Consistency(一致性)、 Availability(可用性)、Partition tolerance(分区容错性),三者不可兼得。

    12 引用 • 5 回帖 • 634 关注
  • VirtualBox

    VirtualBox 是一款开源虚拟机软件,最早由德国 Innotek 公司开发,由 Sun Microsystems 公司出品的软件,使用 Qt 编写,在 Sun 被 Oracle 收购后正式更名成 Oracle VM VirtualBox。

    10 引用 • 2 回帖 • 18 关注
  • iOS

    iOS 是由苹果公司开发的移动操作系统,最早于 2007 年 1 月 9 日的 Macworld 大会上公布这个系统,最初是设计给 iPhone 使用的,后来陆续套用到 iPod touch、iPad 以及 Apple TV 等产品上。iOS 与苹果的 Mac OS X 操作系统一样,属于类 Unix 的商业操作系统。

    89 引用 • 150 回帖
  • 大数据

    大数据(big data)是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

    89 引用 • 113 回帖
  • Node.js

    Node.js 是一个基于 Chrome JavaScript 运行时建立的平台, 用于方便地搭建响应速度快、易于扩展的网络应用。Node.js 使用事件驱动, 非阻塞 I/O 模型而得以轻量和高效。

    139 引用 • 269 回帖