二、DeepOps的设计模式小笔记-DAY1-Iterator迭代器

今天要来学习迭代器模式, 猛地一看真的没什么内容. 但是翻开书(设计模式)之后, 发现事情没有那么简单! 1 主要意图 迭代器模式主要:提供一种方法顺序访问一个聚合对象中的各个元素,而又不需要暴露该对象的内部表示。 2 组成 2.1 接口 Iterator (迭代器) : 定义访问和遍历元素的接口。 Aggregate (聚合) : 定义创建相应迭代器对象的接口。 2.2 实现 ConcreteIterator(具体迭代器):实现迭代器接口 ;对聚合遍历时跟踪当前位置。例如下图中的 BookShelfIterator 。 ConcreteAggregate(具体聚合):实现创建相应迭代器的接口 ;该操作返回ConcreteIterator的一个适当实例 。例如下图中的 BookShelf 。 …

View Post

一、DeepOps的设计模式小笔记-总述

程序员的基本功之一“ 设计模式 ”,感觉曾经学了很多遍还是一知半解,每次都是重新学习的感觉,为了避免这种低效的学习,决定一次性的把设计模式学习透彻。 1 收集资料 纸质书籍:图解设计模式、GOF的设计模式、Head First设计模式 –为什么叫Gof呢,我搜了一下百度是这么说的“ 《Design Patterns: Elements of Reusable Object-Oriented Software》(即后述《设计模式》一书),由 Erich Gamma、Richard Helm、Ralph Johnson 和 John Vlissides 合著(Addison-Wesley,1995)。这几位作者常被称为”四人组(Gang of Four)” ” 电子资料:极客时间的王争老师的专栏《设计模式之美》目前正在更新中未完结(页面最下方有专栏的链接,有兴趣可以看一下)。 根据目前的情况我市选择图解设计模式为主,设计模式和王争老师的课程为辅的进行交叉学习。 2 汇总资料内容 …

View Post

一、DeepOps的ETL小笔记-kettle/pentaho(pdi)简介

说到ETL 是英文Extract-Transform-Load的缩写 ,它是用来描述从数据源端抽取,对其进行转换,然后将数据加载到目标端的一些列过程。 很多系统之间都存在一定的批量数据的交互。然而一个好的ETL工具,在开发和使用维护上可以让我们事半功倍。 目前工作的原因用到的比较多的ETL工具就是Kettle(后期这个改名为pentaho data integration)。下载地址:https://community.hitachivantara.com/s/article/data-integration-kettle 目前最新版本pdi-ce-8.3.0.0-371(虽然页面上显示的是8.2 stable) kettle 是水壶的意思, 很形象的拟物命名方式,让人感受到,把原料放在水壶里,料理完之后,再将数据倒入目标系统。其他的一些工具也是pan、 kitchen 可视化工具是spoon。 spoon允许通过图形界面来设计ETL转换( transformation )和任务(job)。 pan :批量调用运行transformation。 kitchen 也是一个后台运行的程序 kitchen:批量调用运行job。 kitchen 也是一个后台运行的程序。一般情况使用定时任务启动kitchen去运行job kettle的文件类型分为两种kjb、ktr。 kjb:就是job,可以用来控制 transformation 的运行流程,可以顺序执行或者并发运行;或者脚本;或者设置变量;传输文件;运行shell等; ktr:就是transform,转换。具体的数据处理步骤,一般情况包含一个input和一个output。在input和output之间可以执行各式各样的转换操作。 kettle解压之后,配置好与kettle版本匹配的jre环境就可以运行。linux、windows、macos有的还需要根据不同的发行版本,安装一下依赖环境。具体可以参照“ …

View Post

一、DeepOps的Hadoop小笔记-初识Hadoop

1. Hadoop是干什么的 2. Hadoop主要组件及其生态圈 3. Hadoop的历史 1. Hadoop是干什么? 2. Hadoop主要组件及其生态圈 3. Hadoop的历史 一、DeepOps的Hadoop学习笔记-初识Hadoop 二、DeepOps的Hadoop学习笔记-HDFS 三、 DeepOps的Hadoop学习笔记-MapReduce 四、 DeepOps的Hadoop学习笔记-YARN 五、 DeepOps的Hadoop学习笔记-动手 参考资料: 1、Hadoop权威指南(第四版)

View Post

DeepOps的flutter小笔记-学习资料索引

学习flutter之前先了解点Dart:https://www.dartcn.com/guides/get-started 中文文档很不错 如果不想配置dart环境可以使用https://dartpad.cn/,里面有不少demo,还有flutter的小例子,在页面右上角切换 flutter实战 : https://book.flutterchina.club/ source code : https://github.com/wendux/flutter_in_action_source_code flutter startup : https://flutterchina.club/get-started/install/ 官方文档 : https://flutter.dev/docs 官方Tutorials : https://flutter.dev/docs/reference/tutorials A curated list of samples : https://github.com/flutter/samples/blob/master/INDEX.md Overview: the Dart …

View Post