ProxyIpPool , 代理 IP 爬虫池

github:https://github.com/javagaorui5944

gitee:https://gitee.com/javagaorui5944/ProxyIpPool

ProxyIpPool 运行部署说明

src\main\resources\redis.properties 对 redis 进行配置

运行测试:com.myapp.timer.Timer main 函数

Maven 打包部署
target 目录下的 lib 目录与 ProxyIpPool.jar 包一起入到同一目录下,执行:

$ nohup java -jar ProxyIpPool.jar &

3 个定时器线程,第一个负责收集代理 ip,第二个个负责运行维护代理 ip,第三个负责存储到 redis,(redis 并做持久化服务),并于每天提供服务后重新放入池子第二天再进行维护。

qq 技术交流群:200255678

系统原理图

Clojure+Java 使用 deps.edn 混合构建

简述　　公司有一个项目我用 clojure 写了一个数据处理的 SDK，里面混合了 Java 和 Clojure 的代码，之前用习惯了 [链接]，不过慢慢的感觉 Leiningen 越来越慢了（不知道是不是错觉），这次打算使用 [链接] 管理项目。环境准备(包含开发工具相关的包) windows: 建议使用 [链接 ..

Java 模块化与接口组成（十六）

[图片] 模块化模块的基本使用模块的使用步骤创建模块在模块的 src 目录下新建一个名为 module-info.java 的描述文件，该文件专门定义模块名，访问权限，模块依赖等信息描述性文件中使用模块导出和模块依赖来进行配置使用模块中所有未导出的包都是模块私有的，不能在模块之外被访问模块导出格式：exp ..

Java 反射（十五）

[图片] 反射类加载器概述当程序要使用某个类时，如果该类还未被加载到内存中，则系统会通过类的加载，类的连接，类的初始化这三个步骤来对类进行初始化，如果不出现意外情况，JVM 将会连续完成这三个步骤，所以有时也把这三个步骤统称为类加载或者类初始化。类加载就是指将 class 文件读入内存，并为之创建一个 jav ..

Java Stream 流（十四）

[图片] Stream 流概述 Stream 流的使用生成流通过数据源（集合，数组等）生成流 list.stream() 中间操作一个流后面可以跟随零个或多个中间操作，其目的主要是打开流，做出某种程度的数据过滤/映射，然后返回一个新的流，交给下一个操作使用 filter() 终结操作一个流只能有一个终结操作， ..

Java 函数式接口（十三）

[图片] 函数式接口概述函数式接口：有且仅有一个抽象方法的接口 Java 中的函数式编程体现就是 Lambda 表达式，所以函数式接口就是可以适合于 Lambda 使用的接口只有确保接口中有且仅有一个抽象方法，Java 中的 Lambda 才能顺利地进行推导 @FunctionalInterface ：函数式接口 ..

Java 方法引用（十二）

[图片] 方法引用方法引用符 :: 该符号为引用运算符，而它所在的表达式被称为方法引用范例： // Inter为接口，InterDemo为测试类 public interface Inter{ void run(String s); } public class InterDemo{ public static v ..

Java Lambda 表达式（十一）

[图片] Lambda 表达式 Lambda 表达式的标准格式格式：(形式参数) -> {代码块} 形式参数：如果有多个参数，参数之间用逗号隔开；如果没有参数，则留空 -> ：由英文中划线和大于符号组成，固定写法。代表指向动作代码块：是具体要做的事情，即方法体内容 Lambda 表达式的使用前提有一个 ..

欢迎来到这里！

我们正在构建一个小众社区，大家在这里相互信任，以平等 • 自由 • 奔放的价值观进行分享交流。最终，希望大家能够找到与自己志同道合的伙伴，共同成长。

关于