极客时间已完结课程限时免费阅读

65 | 迭代器模式(上):相比直接遍历集合数据,使用迭代器有哪些优势?

65 | 迭代器模式(上):相比直接遍历集合数据,使用迭代器有哪些优势?-极客时间

65 | 迭代器模式(上):相比直接遍历集合数据,使用迭代器有哪些优势?

讲述:冯永吉

时长10:43大小9.81M

上一节课,我们学习了状态模式。状态模式是状态机的一种实现方法。它通过将事件触发的状态转移和动作执行,拆分到不同的状态类中,以此来避免状态机类中的分支判断逻辑,应对状态机类代码的复杂性。
今天,我们学习另外一种行为型设计模式,迭代器模式。它用来遍历集合对象。不过,很多编程语言都将迭代器作为一个基础的类库,直接提供出来了。在平时开发中,特别是业务开发,我们直接使用即可,很少会自己去实现一个迭代器。不过,知其然知其所以然,弄懂原理能帮助我们更好的使用这些工具类,所以,我觉得还是有必要学习一下这个模式。
我们知道,大部分编程语言都提供了多种遍历集合的方式,比如 for 循环、foreach 循环、迭代器等。所以,今天我们除了讲解迭代器的原理和实现之外,还会重点讲一下,相对于其他遍历方式,利用迭代器来遍历集合的优势。
话不多说,让我们正式开始今天的学习吧!

迭代器模式的原理和实现

迭代器模式(Iterator Design Pattern),也叫作游标模式(Cursor Design Pattern)。
在开篇中我们讲到,它用来遍历集合对象。这里说的“集合对象”也可以叫“容器”“聚合对象”,实际上就是包含一组对象的对象,比如数组、链表、树、图、跳表。迭代器模式将集合对象的遍历操作从集合类中拆分出来,放到迭代器类中,让两者的职责更加单一。
迭代器是用来遍历容器的,所以,一个完整的迭代器模式一般会涉及容器容器迭代器两部分内容。为了达到基于接口而非实现编程的目的,容器又包含容器接口、容器实现类,迭代器又包含迭代器接口、迭代器实现类。对于迭代器模式,我画了一张简单的类图,你可以看一看,先有个大致的印象。
接下来,我们通过一个例子来具体讲,如何实现一个迭代器。
开篇中我们有提到,大部分编程语言都提供了遍历容器的迭代器类,我们在平时开发中,直接拿来用即可,几乎不大可能从零编写一个迭代器。不过,这里为了讲解迭代器的实现原理,我们假设某个新的编程语言的基础类库中,还没有提供线性容器对应的迭代器,需要我们从零开始开发。现在,我们一块来看具体该如何去做。
我们知道,线性数据结构包括数组和链表,在大部分编程语言中都有对应的类来封装这两种数据结构,在开发中直接拿来用就可以了。假设在这种新的编程语言中,这两个数据结构分别对应 ArrayList 和 LinkedList 两个类。除此之外,我们从两个类中抽象出公共的接口,定义为 List 接口,以方便开发者基于接口而非实现编程,编写的代码能在两种数据存储结构之间灵活切换。
现在,我们针对 ArrayList 和 LinkedList 两个线性容器,设计实现对应的迭代器。按照之前给出的迭代器模式的类图,我们定义一个迭代器接口 Iterator,以及针对两种容器的具体的迭代器实现类 ArrayIterator 和 ListIterator。
我们先来看下 Iterator 接口的定义。具体的代码如下所示:
// 接口定义方式一
public interface Iterator<E> {
boolean hasNext();
void next();
E currentItem();
}
// 接口定义方式二
public interface Iterator<E> {
boolean hasNext();
E next();
}
Iterator 接口有两种定义方式。
在第一种定义中,next() 函数用来将游标后移一位元素,currentItem() 函数用来返回当前游标指向的元素。在第二种定义中,返回当前元素与后移一位这两个操作,要放到同一个函数 next() 中完成。
第一种定义方式更加灵活一些,比如我们可以多次调用 currentItem() 查询当前元素,而不移动游标。所以,在接下来的实现中,我们选择第一种接口定义方式。
现在,我们再来看下 ArrayIterator 的代码实现,具体如下所示。代码实现非常简单,不需要太多解释。你可以结合着我给出的 demo,自己理解一下。
public class ArrayIterator<E> implements Iterator<E> {
private int cursor;
private ArrayList<E> arrayList;
public ArrayIterator(ArrayList<E> arrayList) {
this.cursor = 0;
this.arrayList = arrayList;
}
@Override
public boolean hasNext() {
return cursor != arrayList.size(); //注意这里,cursor在指向最后一个元素的时候,hasNext()仍旧返回true。
}
@Override
public void next() {
cursor++;
}
@Override
public E currentItem() {
if (cursor >= arrayList.size()) {
throw new NoSuchElementException();
}
return arrayList.get(cursor);
}
}
public class Demo {
public static void main(String[] args) {
ArrayList<String> names = new ArrayList<>();
names.add("xzg");
names.add("wang");
names.add("zheng");
Iterator<String> iterator = new ArrayIterator(names);
while (iterator.hasNext()) {
System.out.println(iterator.currentItem());
iterator.next();
}
}
}
在上面的代码实现中,我们需要将待遍历的容器对象,通过构造函数传递给迭代器类。实际上,为了封装迭代器的创建细节,我们可以在容器中定义一个 iterator() 方法,来创建对应的迭代器。为了能实现基于接口而非实现编程,我们还需要将这个方法定义在 List 接口中。具体的代码实现和使用示例如下所示:
public interface List<E> {
Iterator iterator();
//...省略其他接口函数...
}
public class ArrayList<E> implements List<E> {
//...
public Iterator iterator() {
return new ArrayIterator(this);
}
//...省略其他代码
}
public class Demo {
public static void main(String[] args) {
List<String> names = new ArrayList<>();
names.add("xzg");
names.add("wang");
names.add("zheng");
Iterator<String> iterator = names.iterator();
while (iterator.hasNext()) {
System.out.println(iterator.currentItem());
iterator.next();
}
}
}
对于 LinkedIterator,它的代码结构跟 ArrayIterator 完全相同,我这里就不给出具体的代码实现了,你可以参照 ArrayIterator 自己去写一下。
结合刚刚的例子,我们来总结一下迭代器的设计思路。总结下来就三句话:迭代器中需要定义 hasNext()、currentItem()、next() 三个最基本的方法。待遍历的容器对象通过依赖注入传递到迭代器类中。容器通过 iterator() 方法来创建迭代器。
这里我画了一张类图,如下所示。实际上就是对上面那张类图的细化,你可以结合着一块看。

迭代器模式的优势

迭代器的原理和代码实现讲完了。接下来,我们来一块看一下,使用迭代器遍历集合的优势。
一般来讲,遍历集合数据有三种方法:for 循环、foreach 循环、iterator 迭代器。对于这三种方式,我拿 Java 语言来举例说明一下。具体的代码如下所示:
List<String> names = new ArrayList<>();
names.add("xzg");
names.add("wang");
names.add("zheng");
// 第一种遍历方式:for循环
for (int i = 0; i < names.size(); i++) {
System.out.print(names.get(i) + ",");
}
// 第二种遍历方式:foreach循环
for (String name : names) {
System.out.print(name + ",")
}
// 第三种遍历方式:迭代器遍历
Iterator<String> iterator = names.iterator();
while (iterator.hasNext()) {
System.out.print(iterator.next() + ",");//Java中的迭代器接口是第二种定义方式,next()既移动游标又返回数据
}
实际上,foreach 循环只是一个语法糖而已,底层是基于迭代器来实现的。也就是说,上面代码中的第二种遍历方式(foreach 循环代码)的底层实现,就是第三种遍历方式(迭代器遍历代码)。这两种遍历方式可以看作同一种遍历方式,也就是迭代器遍历方式。
从上面的代码来看,for 循环遍历方式比起迭代器遍历方式,代码看起来更加简洁。那我们为什么还要用迭代器来遍历容器呢?为什么还要给容器设计对应的迭代器呢?原因有以下三个。
首先,对于类似数组和链表这样的数据结构,遍历方式比较简单,直接使用 for 循环来遍历就足够了。但是,对于复杂的数据结构(比如树、图)来说,有各种复杂的遍历方式。比如,树有前中后序、按层遍历,图有深度优先、广度优先遍历等等。如果由客户端代码来实现这些遍历算法,势必增加开发成本,而且容易写错。如果将这部分遍历的逻辑写到容器类中,也会导致容器类代码的复杂性。
前面也多次提到,应对复杂性的方法就是拆分。我们可以将遍历操作拆分到迭代器类中。比如,针对图的遍历,我们就可以定义 DFSIterator、BFSIterator 两个迭代器类,让它们分别来实现深度优先遍历和广度优先遍历。
其次,将游标指向的当前位置等信息,存储在迭代器类中,每个迭代器独享游标信息。这样,我们就可以创建多个不同的迭代器,同时对同一个容器进行遍历而互不影响。
最后,容器和迭代器都提供了抽象的接口,方便我们在开发的时候,基于接口而非具体的实现编程。当需要切换新的遍历算法的时候,比如,从前往后遍历链表切换成从后往前遍历链表,客户端代码只需要将迭代器类从 LinkedIterator 切换为 ReversedLinkedIterator 即可,其他代码都不需要修改。除此之外,添加新的遍历算法,我们只需要扩展新的迭代器类,也更符合开闭原则。

重点回顾

好了,今天的内容到此就讲完了。我们一块来总结回顾一下,你需要重点掌握的内容。
迭代器模式,也叫游标模式。它用来遍历集合对象。这里说的“集合对象”,我们也可以叫“容器”“聚合对象”,实际上就是包含一组对象的对象,比如,数组、链表、树、图、跳表。
一个完整的迭代器模式,一般会涉及容器和容器迭代器两部分内容。为了达到基于接口而非实现编程的目的,容器又包含容器接口、容器实现类,迭代器又包含迭代器接口、迭代器实现类。容器中需要定义 iterator() 方法,用来创建迭代器。迭代器接口中需要定义 hasNext()、currentItem()、next() 三个最基本的方法。容器对象通过依赖注入传递到迭代器类中。
遍历集合一般有三种方式:for 循环、foreach 循环、迭代器遍历。后两种本质上属于一种,都可以看作迭代器遍历。相对于 for 循环遍历,利用迭代器来遍历有下面三个优势:
迭代器模式封装集合内部的复杂数据结构,开发者不需要了解如何遍历,直接使用容器提供的迭代器即可;
迭代器模式将集合对象的遍历操作从集合类中拆分出来,放到迭代器类中,让两者的职责更加单一;
迭代器模式让添加新的遍历算法更加容易,更符合开闭原则。除此之外,因为迭代器都实现自相同的接口,在开发中,基于接口而非实现编程,替换迭代器也变得更加容易。

课堂讨论

在 Java 中,如果在使用迭代器的同时删除容器中的元素,会导致迭代器报错,这是为什么呢?如何来解决这个问题呢?
除了编程语言中基础类库提供的针对集合对象的迭代器之外,实际上,迭代器还有其他的应用场景,比如 MySQL ResultSet 类提供的 first()、last()、previous() 等方法,也可以看作一种迭代器,你能分析一下它的代码实现吗?
欢迎留言和我分享你的想法。如果有收获,欢迎你把这篇文章分享给你的朋友。
分享给需要的人,Ta购买本课程,你将得29
生成海报并分享

赞 57

提建议

上一篇
64 | 状态模式:游戏、工作流引擎中常用的状态机是如何实现的?
下一篇
66 | 迭代器模式(中):遍历集合的同时,为什么不能增删集合元素?
 写留言

精选留言(49)

  • 守拙
    2020-04-01
    在 Java 中,如果在使用迭代器的同时删除容器中的元素,会导致迭代器报错,这是为什么呢?如何来解决这个问题呢? 通过阅读Java11 ArrayList#Iterator源码: iterator#remove()中, 调用外部类ArrayList#remove(), 通过下标移除元素. ArrayList内部维护modCount成员变量, 表示一次遍历中修改次数. Iterator通过remove()修改前, 会核对Iterator自己的exceptedModCount和ArrayList的modCount是否一致, 若不一致, 说明出现了并发问题, 会抛出异常. 若一致, 正常移除数据, 并更新modCount 结论: 1. 通过Iterator遍历集合时, 必须通过Iterator#remove()移除元素. ​ 2. 避免在并发情形修改集合, 或使用CopyOnWriteArrayList
    展开
    共 7 条评论
    79
  • DFighting
    2020-11-21
    本质是因为迭代器从容器类抽象出来以后,一个容器的数据会被多个迭代器访问,这种类似数据库的并问题了,迭代器抽象出来可以让多个线程同时访问容器数据,但这也会带来一个问题:数据一致性。Java是通过在迭代器和容器中都维护了一个修改计数,remove的时候需要比较两个计数,不一致就会抛出异常

    作者回复: 嗯嗯������

    43
  • 国奉
    2020-04-01
    漏掉状态模式实现电商的案例了
    39
  • pedro
    2020-04-01
    第一个问题,使用 for-each 或者 iterator 进行迭代删除 remove 时,容易导致 next() 检测的 modCount 不等于 expectedModCount 从而引发 ConcurrentModificationException。 在单线程下,推荐使用 next() 得到元素,然后直接调用 remove(),注意是无参的 remove; 多线程情况下还是使用并发容器吧😃
    共 2 条评论
    25
  • 2020-04-01
    课后题1: java中,容器中有int类型的变量ModCount来记录修改次数,每次新增或者删除容器内对象时都会给这个变量+1 在创建迭代器时会初始化一个变量expectedModCount(期待的操作次数) = ModCount,记录当前容器的增删操作次数,在使用迭代器时会不断检查expectedModCount是否等于ModCount(这个方式类似版本号机制,CAS解决ABA问题的方法),当他们不相等时就会抛异常 解决方法: 1.利用Arrays.copy方法,每次迭代前复制出一份副本,迭代这个副本(有可能会导致迭代的数据不一致) 2.如果是轮询的方式去执行,可以不用管这个异常,交给下一次轮询去处理 3.如果这个迭代操作最后产生的数据要返回给用户,也可以catch到这个异常时直接返回"数据正在处理中,请稍后再试" ps:如果这个场景有线程安全问题,建议用方法1,用副本来迭代 。 使用并发安全容器并不能解决所有的并发安全问题,因为线程安全可以分为绝对安全,相对安全,线程兼容和线程对立,绝对安全的成本太高,我们通常说的线程安全都是相对安全,即这个对象的单次操作时是线程安全的(举例:一次delete或者一次fori循环处理操作,分别是安全的,但是如果一条线程在做delete操作,另一条线程用fori循环处理,那么fori循环这条线程势必会出现异常),而我们常说的并发安全容器HashTable,ConcurrentHashMap都是相对安全 最后,没有最好的方案,只有最合适的方案,应该根据具体的场景选择合适的处理方式
    展开
    共 2 条评论
    21
  • Corner
    2020-04-01
    因为在迭代器中保存的游标和集合有一致性关系(大小,元素位置)。迭代器外部删除集合元素将导致其保存的游标位置与集合当前状态不一致。解决方法是由迭代器本身提供删除方法,这样可以感知到删除操作以便调整本身保存的游标。
    14
  • Ken张云忠
    2020-04-03
    1.在 Java 中,如果在使用迭代器的同时两次删除容器中的元素,会导致迭代器报错,这是为什么呢?如何来解决这个问题呢? java.util.AbstractList中名为modCount的filed用来记录这个集合被结构性修改的次数; 内部类迭代器java.util.ArrayList.Itr中会有个名为expectedModCount的field,用来记录当前集合被修改的次数,当删除元素时会modCount会加1,而expectedModCount却保持不变,当再继续遍历时会检查modCount与expectedModCount是否相等,如果不相等就会抛出异常,中止程序往下执行. 解决方式,当删除元素时将更新的modCount同步给expectedModCount. 2.除了编程语言中基础类库提供的针com.mysql.cj.jdbc.result.ResultSetImpl对集合对象的迭代器之外,实际上,迭代器还有其他的应用场景,比如 MySQL ResultSet 类提供的 first()、last()、previous() 等方法,也可以看作一种迭代器,你能分析一下它的代码实现吗? com.mysql.cj.jdbc.result.ResultSetFactory将数据集com.mysql.cj.protocol.ResultsetRows作为构造参数传递给迭代器com.mysql.cj.jdbc.result.ResultSetImpl, ResultSetImpl实现了接口java.sql.ResultSet中的first()、last()、previous() 等函数,当我们上层遍历集合时只需调用操作java.sql.ResultSet既可以了,而当我们想要更换成oracle的jdbc时只需替换实现的依赖包即可,上层应用代码无需任何改动,迭代器模式将数据集与遍历操作进行了解耦才使我们可以轻松替换底层jdbc实现,这也符合软件开发中倡导的开闭原则.
    展开
    8
  • 李小四
    2020-04-01
    设计模式_65: # 作业 1. 刚看了一下源码,Java容器会校验修改次数`modCount`,与预期不一致就会抛出异常,这个设计是合理的:因为在使用迭代器的同时删除元素,很可能会带来数据的错误,甚至导致程序的崩溃,及时地暴露错误是正确的做法。 如何解决:单线程中使用`iterator.remove()`方法删除,多线程中使用并发集合。 # 感想 最早使用迭代器,是因为for循环删除元素会导致错误,就像今天的问题1。 现在看来,迭代器更重要的作用是解耦,呼应前面的原则就是`开闭原则`、`单一职责原则`、`里氏替换原则`。。。
    展开
    7
  • 攻城拔寨
    2020-04-01
    第一个问题:迭代器中包含了集合的大小和位置信息。直接删除元素,迭代器感知不到,迭代器大小位置因为不正确,继续遍历下去出现问题(如 index 溢出)。 删除需要调用 iterator 本身的 remove 方法,而 foreach 并不能直接调用。所以只能通过原始的迭代器方法遍历。
    5
  • pedro
    2020-04-01
    第二个问题,ResultSet 内部通过维护一个类型为 ResultSetRows 的 rowData 变量来实现迭代,而 rowData 的迭代方法本质就是实现了标准库的 Iterator 接口。
    4
  • 在路上
    2021-09-23
    迭代器在大数据框架应用广泛,比如spark、mapreduce,主要使用其将迭代器的嵌套实现计算逻辑的封装,最终在框架运行时,实现了数据的迭代计算。
    2
  • 新世界
    2020-05-30
    大家都说了删除报错的现有实现,为什么这样实现?原因是:比如数组,删除以后数组要移动后续位置,如果外部删除了元素,iterator无法感知,通过游标获取的next就会获取到当前元素,会导致遍历错误,所以要通过iterator去删除,这样iterater能感知到做相应处理
    2
  • 岁月
    2020-04-08
    以前一直都不知道迭代器有啥用, 今天看完后感觉, 迭代器是为了拆分类的复杂度, 还是很有用的.
    2
  • Rayjun
    2020-04-01
    这是因为 Java 迭代器中实现了 fail-fast 的机制
    2
  • 成立-Charlie
    2020-04-01
    在使用迭代器遍历过程中,如果删除即其中的元素,因为集合中元素的数量发生了变化,会出错。我想到的解决方法是在遍历的过程中对集合进行加锁处理,但这样做会影响到效率。所以不确定是不是最好的办法。
    2
  • 小晏子
    2020-04-01
    以ArrayList为例,ArrayList.iterator()返回回来的Iterator<E>里面的hasNext()是不关心modification count的,参考链接:https://hg.openjdk.java.net/jdk8/jdk8/jdk/file/tip/src/share/classes/java/util/ArrayList.java#l830, 而next()会去检查modification count, 参考https://hg.openjdk.java.net/jdk8/jdk8/jdk/file/tip/src/share/classes/java/util/ArrayList.java#l835, 所以如果通过ArrayList.iterator()获取了一个新的iterator,然后删除了某个位置的元素,然后再调用iterator.hasNext()有可能会得到false,于是就退出了循环不会再继续执行,基于此考虑,JavaDoc定义了fast-fail原则,参考“https://hg.openjdk.java.net/jdk8/jdk8/jdk/file/tip/src/share/classes/java/util/ArrayList.java#l73”。
    展开
    1
  • 尔冬橙
    2022-08-18 来自湖南
    java 里迭代器用的是继承啊
  • ɴɪᴋᴇʀ
    2022-01-24
    问题1,那如果不是改变元素个数,而是改变数据的结构呢?比如树结构。
  • Z宇锤锤
    2021-12-02
    modCount是对容器的操作次数。迭代器维护的是modeCount和expectedMountCount.容器维护着自己的modCount.这就确保了在迭代器中操作,迭代器会维护两个count,次数相等。如果使用了迭代器的同时,对容器操作,容器只会维护自己的count,导致和迭代器中的count不相等,所以抛出异常。
  • 郑大钱
    2021-04-13
    树和图的遍历是我永远的痛,所以默认就把树和图的遍历忽略了。 而迭代器模式恰恰是高级工程师为我们这些初级工程师将痛苦的遍历封装起来的解决办法。