LuYF-Lemon-love の Blog
00314 NLP Course - WordPiece tokenization 00314 NLP Course - WordPiece tokenization
前言WordPiece是谷歌开发用于预训练BERT的标记化算法。自那以后，它在许多基于BERT的Transformer模型中得到了重新使用，例如DistilBERT、MobileBERT、Funnel Transformers和MPNET。
2025-03-22 大语言模型
深度学习 大语言模型 huggingface
00313 Python __del__ 函数 00313 Python __del__ 函数
前言Python __del__ 函数。 Operating System: Ubuntu 22.04.4 LTS 参考文档介绍在Python中，__del__ 是一个特殊方法，它是一个类的析构器。当一个对象被销毁或者垃圾回收时，__del
2025-03-19 Python
Python
00312 verilog的文件后缀 00312 verilog的文件后缀
前言Verilog的文件后缀。 操作系统：Windows 11 家庭中文版 参考文档介绍Verilog是一种硬件描述语言，用于电子系统的硬件行为描述、结构描述、设计实现和验证。Verilog代码文件的常见文件后缀有： .v：用于Veril
2025-03-12 Verilog
Verilog
00311 Python @wraps装饰器 00311 Python @wraps装饰器
前言Python @wraps装饰器。 Operating System: Ubuntu 22.04.4 LTS 参考文档介绍@wraps 是 Python 标准库 functools 模块中的一个装饰器。它通常用于定义装饰器时，以便保留被
2025-03-12 Python
Python
00310 Python asyncio事件循环优势与用法详解 00310 Python asyncio事件循环优势与用法详解
前言Python asyncio事件循环优势与用法详解。 Operating System: Ubuntu 22.04.4 LTS 参考文档介绍Python 的 asyncio 是异步编程的核心库，其核心是事件循环（Event Loop）。
2025-03-11 Python
Python
00309 Python str.format 00309 Python str.format
前言Python nonlocal关键字。 Operating System: Ubuntu 22.04.4 LTS 参考文档介绍在Python中，str.format() 方法是一种格式化字符串的强大方式。它允许你通过在字符串中使用花括号
2025-03-11 Python
Python
00308 Python nonlocal关键字 00308 Python nonlocal关键字
前言Python nonlocal关键字。 Operating System: Ubuntu 22.04.4 LTS 参考文档介绍在Python中，nonlocal关键字用于在嵌套函数中修改嵌套作用域（非全局作用域）中的变量。通常情况下，在
2025-03-11 Python
Python
00307 Python @final装饰器 00307 Python @final装饰器
前言Python @final装饰器。 Operating System: Ubuntu 22.04.4 LTS 参考文档介绍在 Python 中，@final 是一个装饰器，用于指示一个类或方法不能被继承或覆盖。这个装饰器在 Python
2025-03-11 Python
Python
00306 为PyTorch训练模型并集成DeepSpeed的Dockerfile示例 00306 为PyTorch训练模型并集成DeepSpeed的Dockerfile示例
前言为PyTorch训练模型并集成DeepSpeed的Dockerfile示例。 Operating System: Ubuntu 22.04.4 LTS 参考文档 pytorch/pytorch Dockerfile以下是为P
2025-03-10 计算机基础
docker
00305 Docker入门教程及常见操作指南 00305 Docker入门教程及常见操作指南
前言Docker入门教程及常见操作指南。 Operating System: Ubuntu 22.04.4 LTS 参考文档 Install Docker Engine Install Docker Engine on Ubuntu Do
2025-03-10 计算机基础
docker
00304 tiktoken 学习笔记 00304 tiktoken 学习笔记
前言tiktoken 是一个快速的 BPE 分词器，用于 OpenAI 的模型。 import tiktoken enc = tiktoken.get_encoding("o200k_base") assert enc.decode(enc
2025-03-09 大语言模型
深度学习 大语言模型
00303 microsoft markitdown 学习笔记 00303 microsoft markitdown 学习笔记
前言microsoft markitdown 学习笔记。 用于将文件和办公文档转换为Markdown的Python工具。 Operating System: Ubuntu 22.04.4 LTS 参考文档 microsoft/
2025-03-08 Python
Markdown Python
3 / 29