数学基础
- 线性代数
- 概率论与随机过程
- 数值计算
- 蒙特卡洛方法与 MCMC 采样
- 机器学习方法概论
统计学习
深度学习
- 深度学习简介
- 深度前馈网络
- 反向传播算法
- 正则化
- 深度学习中的最优化问题
- 卷积神经网络
- CNN:图像分类
- 循环神经网络 RNN
- Transformer
- 一、Transformer [2017]
- 二、Universal Transformer [2018]
- 三、Transformer-XL [2019]
- 四、GPT1 [2018]
- 五、GPT2 [2019]
- 六、GPT3 [2020]
- 七、OPT [2022]
- 八、BERT [2018]
- 九、XLNet [2019]
- 十、RoBERTa [2019]
- 十一、ERNIE 1.0 [2019]
- 十二、ERNIE 2.0 [2019]
- 十三、ERNIE 3.0 [2021]
- 十四、ERNIE-Huawei [2019]
- 十五、MT-DNN [2019]
- 十六、BART [2019]
- 十七、mBART [2020]
- 十八、SpanBERT [2019]
- 十九、ALBERT [2019]
- 二十、UniLM [2019]
- 二十一、MASS [2019]
- 二十二、MacBERT [2019]
- 二十三、Fine-Tuning Language Models from Human Preferences [2019]
- 二十四 Learning to summarize from human feedback [2020]
- 二十五、InstructGPT [2022]
- 二十六、T5 [2020]
- 二十七、mT5 [2020]
- 二十八、ExT5 [2021]
- 二十九、Muppet [2021]
- 三十、Self-Attention with Relative Position Representations [2018]
- 三十一、USE [2018]
- 三十二、Sentence-BERT [2019]
- 三十三、SimCSE [2021]
- 三十四、BERT-Flow [2020]
- 三十五、BERT-Whitening [2021]
- 三十六、Comparing the Geometry of BERT, ELMo, and GPT-2 Embeddings [2019]
- 三十七、CERT [2020]
- 三十八、DeCLUTR [2020]
- 三十九、CLEAR [2020]
- 四十、ConSERT [2021]
- 四十一、Sentence-T5 [2021]
- 四十二、ULMFiT [2018]
- 四十三、Scaling Laws for Neural Language Models [2020]
- 四十四、Chinchilla [2022]
- 四十七、GLM-130B [2022]
- 四十八、GPT-NeoX-20B [2022]
- 四十九、Bloom [2022]
- 五十、PaLM [2022] (粗读)
- 五十一、PaLM2 [2023](粗读)
- 五十二、Self-Instruct [2022]
- 句子向量
- 词向量
- 传统CTR 预估模型
- CTR 预估模型
- 一、DSSM [2013]
- 二、FNN [2016]
- 三、PNN [2016]
- 四、DeepCrossing [2016]
- 五、Wide 和 Deep [2016]
- 六、DCN [2017]
- 七、DeepFM [2017]
- 八、NFM [2017]
- 九、AFM [2017]
- 十、xDeepFM [2018]
- 十一、ESMM [2018]
- 十二、DIN [2017]
- 十三、DIEN [2019]
- 十四、DSIN [2019]
- 十五、DICM [2017]
- 十六、DeepMCP [2019]
- 十七、MIMN [2019]
- 十八、DMR [2020]
- 十九、MiNet [2020]
- 二十、DSTN [2019]
- 二十一、BST [2019]
- 二十二、SIM [2020]
- 二十三、ESM2 [2019]
- 二十四、MV-DNN [2015]
- 二十五、CAN [2020]
- 二十六、AutoInt [2018]
- 二十七、Fi-GNN [2019]
- 二十八、FwFM [2018]
- 二十九、FM2 [2021]
- 三十、FiBiNET [2019]
- 三十一、AutoFIS [2020]
- 三十三、AFN [2020]
- 三十四、FGCNN [2019]
- 三十五、AutoCross [2019]
- 三十六、InterHAt [2020]
- 三十七、xDeepInt [2023]
- 三十九、AutoDis [2021]
- 四十、MDE [2020]
- 四十一、NIS [2020]
- 四十二、AutoEmb [2020]
- 四十三、AutoDim [2021]
- 四十四、PEP [2021]
- 四十五、DeepLight [2021]
- 图的表达
- 一、DeepWalk [2014]
- 二、LINE [2015]
- 三、GraRep [2015]
- 四、TADW [2015]
- 五、DNGR [2016]
- 六、Node2Vec [2016]
- 七、WALKLETS [2016]
- 八、SDNE [2016]
- 九、CANE [2017]
- 十、EOE [2017]
- 十一、metapath2vec [2017]
- 十二、GraphGAN [2018]
- 十三、struc2vec [2017]
- 十四、GraphWave [2018]
- 十五、NetMF [2017]
- 十六、NetSMF [2019]
- 十七、PTE [2015]
- 十八、HNE [2015]
- 十九、AANE [2017]
- 二十、LANE [2017]
- 二十一、MVE [2017]
- 二十二、PMNE [2017]
- 二十三、ANRL [2018]
- 二十四、DANE [2018]
- 二十五、HERec [2018]
- 二十六、GATNE [2019]
- 二十七、MNE [2018]
- 二十八、MVN2VEC [2018]
- 二十九、SNE [2018]
- 三十、ProNE [2019]
- Graph Embedding 综述
- 图神经网络
- 一、GNN [2009]
- 二、Spectral Networks 和 Deep Locally Connected Networks [2013]
- 三、Fast Localized Spectral Filtering On Graph [2016]
- 四、GCN [2016]
- 五、神经图指纹 [2015]
- 六、GGS-NN [2016]
- 七、PATCHY-SAN [2016]
- 八、GraphSAGE [2017]
- 九、GAT [2017]
- 十、R-GCN [2017]
- 十一、 AGCN [2018]
- 十二、FastGCN [2018]
- 十三、PinSage [2018]
- 十四、GCMC [2017]
- 十五、JK-Net [2018]
- 十六、PPNP [2018]
- 十七、VRGCN [2017]
- 十八、ClusterGCN [2019]
- 十九、LDS-GNN [2019]
- 二十、DIAL-GNN [2019]
- 二十一、HAN [2019]
- 二十二、HetGNN [2019]
- 二十三、HGT [2020]
- 二十四、GPT-GNN [2020]
- 二十五、Geom-GCN [2020]
- 二十六、Graph Network [2018]
- 二十七、GIN [2019]
- 二十八、MPNN [2017]
- 二十九、UniMP [2020]
- 三十、Correct and Smooth [2020]
- 三十一、LGCN [2018]
- 三十二、DGCNN [2018]
- 三十三、AS-GCN
- 三十四、DGI [2018]
- 三十五、DIFFPOLL [2018]
- 三十六、DCNN [2016]
- 三十七、IN [2016]
- 图神经网络 2
- 图神经网络 3
- 推荐算法(传统方法)
- 一、Tapestry [1992]
- 二、GroupLens [1994]
- 三、ItemBased CF [2001]
- 四、Amazon I-2-I CF [2003]
- 五、Slope One Rating-Based CF [2005]
- 六、Bipartite Network Projection [2007]
- 七、Implicit Feedback CF [2008]
- 八、PMF [2008]
- 九、SVD++ [2008]
- 十、MMMF 扩展 [2008]
- 十一、OCCF [2008]
- 十二、BPR [2009]
- 十三、MF for RS [2009]
- 十四、 Netflix BellKor Solution [2009]
- 推荐算法(神经网络方法 1)
- 一、MIND [2019](用于召回)
- 二、DNN For YouTube [2016]
- 三、Recommending What Video to Watch Next [2019]
- 四、ESAM [2020]
- 五、Facebook Embedding Based Retrieval [2020](用于检索)
- 六、Airbnb Search Ranking [2018]
- 七、MOBIUS [2019](用于召回)
- 八、TDM [2018](用于检索)
- 九、DR [2020](用于检索)
- 十、JTM [2019](用于检索)
- 十一、Pinterest Recommender System [2017]
- 十二、DLRM [2019]
- 十三、Applying Deep Learning To Airbnb Search [2018]
- 十四、Improving Deep Learning For Airbnb Search [2020]
- 十五、HOP-Rec [2018]
- 十六、NCF [2017]
- 十七、NGCF [2019]
- 十八、LightGCN [2020]
- 十九、Sampling-Bias-Corrected Neural Modeling [2019](检索)
- 二十、EGES [2018](Matching 阶段)
- 二十一、SDM [2019](Matching 阶段)
- 二十二、COLD [2020 ] (Pre-Ranking 模型)
- 二十三、ComiRec [2020](https://www.wenjiangs.com/doc/0b4e1736-ac78)
- 二十四、EdgeRec [2020]
- 二十五、DPSR [2020](检索)
- 二十六、PDN [2021](mathcing)
- 二十七、时空周期兴趣学习网络ST-PIL [2021]
- 推荐算法之序列推荐
- 一、FPMC [2010]
- 二、GRU4Rec [2015]
- 三、HRM [2015]
- 四、DREAM [2016]
- 五、Improved GRU4Rec [2016]
- 六、NARM [2017]
- 七、HRNN [2017]
- 八、RRN [2017]
- 九、Caser [2018]
- 十、p-RNN [2016]
- 十一、GRU4Rec Top-k Gains [2018]
- 十二、SASRec [2018]
- 十三、RUM [2018]
- 十四、SHAN [2018]
- 十五、Phased LSTM [2016]
- 十六、Time-LSTM [2017]
- 十七、STAMP [2018]
- 十八、Latent Cross [2018]
- 十九、CSRM [2019]
- 二十、SR-GNN [2019]
- 二十一、GC-SAN [2019]
- 二十二、BERT4Rec [2019]
- 二十三、MCPRN [2019]
- 二十四、RepeatNet [2019]
- 二十五、LINet(2019)
- 二十六、NextItNet [2019]
- 二十七、GCE-GNN [2020]
- 二十八、LESSR [2020]
- 二十九、HyperRec [2020]
- 三十、DHCN [2021]
- 三十一、TiSASRec [2020]
- 推荐算法(综述)
- 多任务学习
- 系统架构
- 实践方法论
- 深度强化学习 1
- 自动代码生成
工具
- CRF
- lightgbm
- xgboost
- scikit-learn
- spark
- numpy
- matplotlib
- pandas
- huggingface_transformer
- 一、Tokenizer
- 二、Datasets
- 三、Model
- 四、Trainer
- 五、Evaluator
- 六、Pipeline
- 七、Accelerate
- 八、Autoclass
- 九、应用
- 十、Gradio
Scala
- 环境搭建
- 基础知识
- 函数
- 类
- 样例类和模式匹配
- 测试和注解
- 集合 collection(一)
- 集合collection(二)
- 集成 Java
- 并发
十四、其它可变集合
ArrayBuffer
数组缓冲:数组缓冲包含一个数组和一个大小。对数组缓冲的大部分操作和数组的速度一样,因为这些操作只是简单地访问和修改底层的数组。数组缓冲可以在尾部高效地添加数据,对数组缓冲追加数据需要的时间为平摊的 $ O(1) $ 时间。因此,数组缓冲对于那些通过向尾部追加新元素来构建大型集合的场景非常有用。
xxxxxxxxxx
val buf = collection.mutable.ArrayBuffer.empty[Int] buf += 1 buf += 10 buf.toArray // Array[Int](1,10)ListBuffer
列表缓冲:列表缓冲和数组缓冲很像,但是它内部使用的是链表而不是数组。如果你打算在构建完成之后,再将缓冲转换为链表,则可以考虑使用列表缓冲。xxxxxxxxxx
val buf = collection.mutable.ListBuffer.empty[Int] buf += 1 buf += 10 buf.toList // List[Int](1, 10)StringBuilder
:用于构建字符串。由于它非常常用,因此已经被引入到默认的命名空间中。只需要简单地使用new StringBuilder
就可以创建:xxxxxxxxxx
val buf = new StringBuilder buf += 'a' buf ++= "bcdefg" buf.toString // 转换为字符串链表
LinkedList
:链表是由用next
指针链接起来的节点组成的可变序列。在大多数语言中,
null
表示空链表,但是在scala
中行不通。因为即使是空的链表也需要支持所有的链表操作(其它集合也是类似的)。尤其是LinkedList.empty.isEmpty
应该返回true
,而不是抛出NullPointerException
异常。因此,空链表是特殊处理的:它们的next
字段指向节点本身。跟它的不可变版本一样,链表支持的最佳操作是顺序操作。不仅如此,在链表中插入元素或者其他链表非常容易。
双向链表
DoubleLinkedList
:和LinkedList
很相似,只不过双向链表除了next
指针之外,还有一个prev
指针指向当前节点的前一个节点。这个额外的链接使得移除元素的操作非常快。可变列表
MutableList
:可变列表由一个单向链表和一个指向该链表末端的空节点组成,这使得向链表尾部追加元素是 $ O(1) $ 复杂度的,因为它避免了遍历链表来找到末端的需要。目前
Scala
的mutable.LinearSeq
是采用MutableList
来实现的。队列
Queue
:scala
除了不可变队列之外还提供了可变队列。可以像使用不可变队列一样使用可变队列,不过不是用enqueue
而是用+=
或++=
操作符来追加元素。另外,对于可变队列而言,
dequeue
方法只会简单地移除头部的元素并返回。xxxxxxxxxx
val queue = new scala.collection.mutable.Queue[String] queue += "a" queue += List("b","c") queue.dequeue // 返回 "a",此时 queue 仅剩下元素 "b","c"数组序列
ArraySeq
:数组序列是固定大小的,内部使用Array[AnyRef]
来存放元素的可变序列。如果你想要数组的性能,但是又不想创建泛型的序列实例(你不知道元素类型,也没有一个可以在运行时提供类型信息的
ClassTag
),可以选用ArraySeq
。栈
Stack
:前面介绍了不可变的栈,可变的栈的工作机制和不可变版本一样,只是它的修改是原地的。xxxxxxxxxx
val stack = new scala.collection.mutable.Stack[Int] stack.push(1) stack.push(2) stack.top // 返回2, stack 元素还是 1,2 stack.pop // 返回2, stack 元素现在只有 1数组栈
ArrayStack
:它是可变栈的另一种实现,内部是一个Array
,在需要时重新改变大小。它提供了快速的下标索引,一般而言对于大多数操作而言都比普通的可变栈更快。哈希表
HashMap
(也叫哈希映射):哈希表底层用数组存放其元素,元素的存放位置取决于该元素的哈希码。向哈希表中添加元素只需要 $ O(1) $ 时间,只要数组中没有其他元素拥有相同的哈希码。因此,只要哈希表中的对象能够按照哈希码分布得足够均匀,哈希表的操作就非常快。正因为如此,
scala
中默认的可变Map
和可变Set
的实现都是基于哈希表的。xxxxxxxxxx
val map = collection.mutable.HashMap.empty[Int, String] map += ( 1 -> "a") map(1) // 返回 "a"对哈希表的遍历并不能保证按照某个特定的顺序,遍历只不过是简单地遍历底层的数组,底层数组的顺序是什么样就是什么样。如果你需要某种有保障的迭代顺序,则可以使用链式的
HashMap
或哈希HashSet
,而不是常规的HashMap
或HashSet
。链式的
HashMap
或HashSet
的区别在于:链式的版本额外包含了一个按照元素的添加顺序保存的元素链表。对这样的集合进行遍历,则总是按照元素添加的顺序来进行的。弱哈希映射
WeakHashMap
:WeakHashMap
是一种特殊的HashMap
,对于这种HashMap
,垃圾收集器并不会跟踪映射到其中的键的链接。这意味着:如果没有其他引用指向某个键,则该键和它关联值就会从映射中消失。WeakHashMap
对于类似缓存这类的任务而言十分有用。如果缓存的key -> value
是保存在常规的哈希映射当中,这个哈希映射就会无限增长,所有的键都不会被当做垃圾来处理。使用弱哈希映射可以避免这个问题:一旦某个键对象不再使用,则该项就会从弱哈希表中移除。
scala
中弱哈希表的实现是对底层Java
实现java.util.WeakHashMap
的包装。并发映射
ConcurrentHashMap
:并发映射可以被多个线程同时访问。除了常见的Map
操作外,它还提供了如下原子操作:m putIfAbsent (k, v)
:除非k
已经在m
中, 否则添加k -> v
到m
中。m remove(k, v)
:如果k
已经在m
中,则移除该项。m replace( k, old, new)
:如果k
原先在m
中且它对应的值为old
,则将k
对应的值修改为new
。m replace(k, v)
:如果k
原先在m
中,则将k
对应的值修改为v
。
并发映射是
Scala
标准类库 中的一个特质。目前它唯一的实现是Java
的java.util.concurrent.ConcurrentHashMap
,通过标准的Java/Scala
集合转换,可以自动转换为Scala
映射。可变位组
BitSet
:可变位组和不可变位组一样,只是它可以原地修改。可变位组在更新方面比不可变位组效率稍高,因为它们不需要将那些没有改变的Long
复制来复制去。xxxxxxxxxx
val bits = scala.collection.mutable.BitSet.empty bits += 1 bits += 3
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论