Posts on Sawyer Zheng's Blog

Langraph

Mon, 22 Sep 2025 00:00:00 +0000

参考

langgraph 的关键概念

states 状态

功能：一个 dict, 用来存储状态信息，历史聊天记录（messages）

特点：

不可变性

Agent

Tue, 02 Sep 2025 00:00:00 +0000

工具收集

promptfoo.dev: Secure & reliable LLMs | Promptfoo
- Prompt 安全工具

prompt 收集

claude code 逆向工程博客

参考：

Build a Coding Agent from Scratch: The Complete Python Tutorial - Sid Bharath

system_prompt

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20


SYSTEM_PROMPT = """You are a helpful coding agent that assists with programming tasks and file operations.

When responding to requests:
1. Analyze what the user needs
2. Use the minimum number of tools necessary to accomplish the task
3. After using tools, provide a concise summary of what was done

IMPORTANT: Once you've completed the requested task, STOP and provide your final response. Do not continue creating additional files or performing extra actions unless specifically asked.

Examples of good behavior:
- User: "Create a file that adds numbers" → Create ONE file, then summarize
- User: "Create files for add and subtract" → Create ONLY those two files, then summarize
- User: "Create math operation files" → Ask for clarification on which operations, or create a reasonable set and stop

After receiving tool results:
- If the task is complete, provide a final summary
- Only continue with more tools if the original request is not yet fulfilled
- Do not interpret successful tool execution as a request to do more

Be concise and efficient. Complete the requested task and stop."""

构建 Agent 的要点

历史对话管理

历史数据的持久化

保存历史
加载历史

最大对话历史长度

因为对话历史长度的限制，需要限定 max_history_count,

Wxwork 企业微信安装

Thu, 21 Aug 2025 00:00:00 +0000

教程

Ubuntu24.04 安装企业微信：
- ubuntu20及以上安装新版deepin微信、企业微信_deepin 企业微信-CSDN博客

Devcontainers

Mon, 04 Aug 2025 00:00:00 +0000

教程

nvim

教程

Running Neovim with Devcontainers | Coding with Coffee

config 映射

devcontainer up --mount "type=bind,source=$HOME/.config/nvim,target=/home/vscode/.config/nvim" --workspace-folder .

GraphRAG

Mon, 04 Aug 2025 00:00:00 +0000

教程

https://zhuanlan.zhihu.com/p/716999421

GraphRag 环节

创建 graph
- 提取 node
- 提取关系
- 关系（边）的存储同时存储关联的文本 chunk id
  - 作用：用来通过 node 查询时，获取 text 作文回答的上下文
查询
1. query
2. 意图分析 –> 图查询语句
3. 上下文
4. ==> llm 生成

Org Export Ox

Wed, 30 Jul 2025 00:00:00 +0000

ox-pandoc

latex 内嵌公式的支持

不推荐使用 $formula$ 格式，这种格式对中文支持不友好，会导致转换 mathjax 公式失败
推荐使用 $formula$ 格式

inline 图片支持

在 org 文件中添加设置：

1

#+PANDOC_OPTIONS: self-contained:t

全部 resources 数据 inline 支持

修改 ox-pandoc

Lazygit

Mon, 28 Jul 2025 00:00:00 +0000

CheatSheet

切换多个页面

h/l

切换 Tab 页

[ 或 ]

切换一个页面上的多个 Tab 页

一个 Tab 页上的多个 item

j/k

Http in Emacs and ELisp

Thu, 24 Jul 2025 00:00:00 +0000

使用 plz.el / plz-see 一步请求

1
2
3
4
5
6
7
8


(let* ((result (plz 'get "http://localhost:18399/is_alive"
 :as #'json-read
 :then (lambda (alist) (let* ((data (gethash "data" alist))
 (time (gethash "time" data)))
 (message "time: %s" time))
 ))
 )) result)
#<process plz-request-curl>

使用 request.el

1
2
3
4


❯ curl -X 'GET' \
 'http://172.16.10.67:18399/is_alive' \
 -H 'accept: application/json'
{"code":200,"msg":"ok","data":{"time":"2025-07-24T17:09:12.963398"}}%

1
2
3
4
5
6
7


ELISP> (let* ((resp-data (request-response-data (request "http://localhost:18399/is_alive"
 :type "GET"
 :parser 'json-read
 :sync t)))
 (data (gethash "data" resp-data)) (time (gethash "time" data))) time)

"2025-07-24T16:55:46.890293"

Neovide

Tue, 01 Jul 2025 00:00:00 +0000

how to use neovide with ssh

方法：

本地： ssh -L + nvim embeded server

ssh my-server -v -L 12341:localhost:12341 -- nvim --headless --listen localhost:12341

本地：启动neovide 连接 nvim server
```
neovide.exe --server=localhost:12341
```

windows bat file start-neovide.bat:

1
2
3
4
5
6
7
8
9


for /f %%i in ('python -c "import random;print(random.randrange(30000,64000))"') do set random_number=%%i

echo %random_number%
start /b ssh %1 -v -L %random_number%:localhost:%random_number% -- nvim --headless --listen localhost:%random_number%

:: sleep 1s to wait nvim headless server starting
timeout /t 1 /nobreak >nul 

neovide.exe --server=localhost:%random_number%

linux startneovide.sh

Rss

Fri, 13 Jun 2025 00:00:00 +0000

参考

RSSHub: https://docs.rsshub.app/guide/

MCP 协议 + 大模型 tools 调用

Thu, 12 Jun 2025 00:00:00 +0000

mcp server list

Smithery - Model Context Protocol Registry
- 一个集合了各种 mcp-server 的网站
MCP Market

client

参考：

GitHub - modelcontextprotocol/python-sdk: The official Python SDK for Model C…
quickstart-resources/mcp-client-python/client.py at main · modelcontextprotoc…
- 一个完整的 client 例子
中文博客

Paddlex

Fri, 23 May 2025 00:00:00 +0000

paddlex 内部的代码设计模式

使用Registry 注册模型信息

注册和查询工具：

1
2
3
4


get_registered_model_info = MODEL_INFO_REGISTRY.query
get_registered_suite_info = SUITE_INFO_REGISTRY.query
register_model_info = MODEL_INFO_REGISTRY.register_record
register_suite_info = SUITE_INFO_REGISTRY.register_record

suite_info 会注册 model_name 关联的 model class 、config class , runner class model_info 会注册所属的 suite_info, model_name, config_path, model 支持的 api 类型（train/eval/predict/export … ）

vllm

Fri, 09 May 2025 00:00:00 +0000

部署 embedding 模型

部署 bge-m3 模型

1

CUDA_VISIBLE_DEVICES=1 vllm serve /data/llm-model/bge/bge-m3/ --host 0.0.0.0 --port 15080 --served-model-name chat-embed

curl 调用：

1
2
3
4
5
6
7


curl http://172.16.10.88:15080/v1/embeddings \
 -H "Content-Type: application/json" \
 -H "Authorization: Bearer EMPTY" \
 -d '{
 "input": "Your text string goes here",
 "model": "chat-embed"
 }'

Syncthing

Mon, 21 Apr 2025 00:00:00 +0000

如何在两台 ssh tunnel 连接的机器上使用 syncthing

参考：

SSH Tunneling — Syncthing documentation

步骤：

建立 ssh tunnel

1

autossh -M 0 -N -L 127.0.0.1:22001:127.0.0.1:22000 -R 127.0.0.1:22001:127.0.0.1:22000 Remote-Server

-L local 22001 <– remote 22000
-R remote 22000 –> local 22001

在本地连接的 remote 上 选项 -> 高级 中，设定 remote 的连接地址： tcp://127.0.0.1:22001
在远程机器上设置连接的 local 上， 选项 -> 高级 中，设定 local 的连接地址： tcp://127.0.0.1:22001

Arm64 Aarch64

Sun, 16 Feb 2025 00:00:00 +0000

miniconda 安装

1
2
3


wget https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-aarch64.sh

sh Miniconda3-latest-Linux-aarch64.sh

Ascend NPU

Fri, 14 Feb 2025 00:00:00 +0000

如何查看版本号

CANN

1
2
3
4
5
6
7
8


❯ cat /usr/local/Ascend/ascend-toolkit/latest/arm64-linux/ascend_toolkit_install.info
package_name=Ascend-cann-toolkit
version=8.0.RC3
innerversion=V100R001C19SPC001B155
compatible_version=[V100R001C13,V100R001C19],[V100R001C30]
arch=aarch64
os=linux
path=/usr/local/Ascend/ascend-toolkit/8.0.RC3/aarch64-linux

npu-smi info使用

npu-smi info 类似 nvidia-smi 命令，打印 NPU 调用情况
需要使用 root / sudo 权限来使用
在docker 中需要添加 --privileged

Ollama

Tue, 11 Feb 2025 00:00:00 +0000

windows 设置

1
2
3
4
5


# 设置模型存储位置
sudo setx OLLAMA_MODELS "e:\data\.ollama\models" /M

# 设置服务地址，端口号
sudo setx OLLAMA_HOST "0.0.0.0:11434" /M

使用

启动服务
1

ollama serve

调用模型

1
2


ollama run deepseek-r1:1.5b
ollama run deepseek-r1:7b

模型列表
1

ollama list

SMAC

Tue, 31 Dec 2024 00:00:00 +0000

入口类

Facade
文档最完善的入口类： smac.facade.smac_ac_facade.SMAC4AC

程序入口

Facade.optimize() –> SMBO.run() (Facade.solver().run())
SMBO.run() 迭代循环
1. Intensifier.get_next_run() (SMBO.run()–> SMBO.intensifier.get_next_run()) –> AbstractRacer._next_challenger()
  - AbstractRacer 是 Intensifier 的基类
  - 选择下一个 challenger (候选配置config)
  - 方法：

SMAC

Tue, 31 Dec 2024 00:00:00 +0000

multi-objectives

runhistory 转换成单个cost 的工具

RunHistoryLogScaledEncoder 基类： AbstractRunHistoryEncoder

通过重载 _build_matrix() 方法实现

数据收集用来做模型训练的方法

ConfigSelector

通过 self._collect_data() 实现收集
通过 self._get_x_best() 实现选取最优点 (X,y) 单目标 cost 数据

多目标代理模型类

MultiObjectiveModel

SMAC

Tue, 31 Dec 2024 00:00:00 +0000

multi-objectives

runhistory 转换成单个cost 的工具

RunHistoryLogScaledEncoder 基类： AbstractRunHistoryEncoder

通过重载 _build_matrix() 方法实现

数据收集用来做模型训练的方法

ConfigSelector

通过 self._collect_data() 实现收集
通过 self._get_x_best() 实现选取最优点 (X,y) 单目标 cost 数据

多目标代理模型类

MultiObjectiveModel

Rime

Wed, 11 Dec 2024 00:00:00 +0000

librime 安装

ubuntu 20.04

build 依赖安装：

1
2


sudo apt install -y libboost-filesystem-dev libboost-regex-dev libboost-system-dev libboost-locale-dev libgoogle-glog-dev libgtest-dev libleveldb-dev libmarisa-dev libopencc-dev libyaml-│··········
cpp-dev

Tmux ---- A terminal multiplex tool

Tue, 10 Dec 2024 00:00:00 +0000

改变 prefix 按键的方发

参考：

til/tmux/change-the-default-prefix-key.md at master · jbranchaud/til · GitHub

修改文件 ~/.tmux.conf

1
2


unbind C-b
set -g prefix C-z

And then run :source-file ~/.tmux.conf.

Wps

Mon, 09 Dec 2024 00:00:00 +0000

arch linux 安装 Wps 中文版方法

参考：

WPS Office – Arch Wiki

安装方法

yay -S wps-office-cn --sudoloop --noconfirm wps-office-mui-zh-cn ttf-wps-fonts

不能使用中文输入法修复

fcitx

修改 /usr/bin/wps 命令内容，添加如下部分

1
2
3


export GTK_IM_MODULE=fcitx
export QT_IM_MODULE=fcitx5
export XMODIFIERS=@im=fcitx

ibus

例如： ibus + rime

uv python package manager

Sun, 01 Dec 2024 00:00:00 +0000

如何换源

全局配置

方法：修改 ~/.config/uv/uv.toml

腾讯源

1

index-url = "https://mirrors.cloud.tencent.com/pypi/simple" # 腾讯源

清华源

1

index-url = "https://pypi.tuna.tsinghua.edu.cn/simple"

华为源

1

index-url = "https://repo.huaweicloud.com/repository/pypi/simple"

项目内配置

配置文件 pyproject.toml

1
2
3
4
5
6
7
8
9


# 影响 uv add, uv sync, uv run
[[tool.uv.index]]
url = "https://test.pypi.org/simple"
default = true


# 影响 uv pip install ... (即 pip 本身被 uv 调用的情况)
[tool.uv.pip]
index-url = "https://test.pypi.org/simple"

初始化 uv init

uv init –python $(which python)

作用：决定使用的 python 版本，但是不会把 $(which python) 所在的环境当作默认环境

Emacs Build

Thu, 14 Nov 2024 00:00:00 +0000

build emacs 30

on arch linux

安装依赖

1

sudo pacman -S cairo giflib gnutls gtk3 harfbuzz jansson libgccjit libjpeg-turbo libotf libpng libsm libtiff libwebp libxcb libxi libxml2 libxpm sqlite tree-sitter xcb-util git libxi xorgproto webkitgtk-6.0 webkit2gtk #icu libavif

构建准备

1
2
3


cd emacs
git checkout emacs-30
./autogen.sh

configure

1

./configure --with-tree-sitter --with-native-compilation=aot --with-mailutils --with-pop --with-xml2 --with-xwidgets --with-x-toolkit=gtk3 # LDFLAGS="-Wl,-rpath,/usr/lib -Wl,-rpath-link,/usr/lib"

get error: webkit2gtk version 太高

Hydra

Wed, 13 Nov 2024 00:00:00 +0000

FAQ

如何通过 esc 键退出 hydra

使用 <escape> 按键配置

1
2
3
4
5
6
7
8
9


(defhydra hydra-root (:color blue)
 "
 _a_: some-action
 _b_: another-action
 "
 ("a" some-action)
 ("b" another-action)
 ("<escape>" nil "quit" :exit t)
 )

Xwidgets

Tue, 12 Nov 2024 00:00:00 +0000

windows + xlaunch

1
2


C:\Windows\System32\WindowsPowerShell\v1.0\powershell.exe -noprofile -windowstyle hidden -c "$env:DISPLAY = 'localhost:0' ; ssh -Y gpu 'GTK_THEME=Adwaita:dark WEBKIT_DISABLE_COMPOSITING_MODE=1 nemacs --with-profile clean29 --debug-init' |out-null"
GDK_BACKEND=x11 WEBKIT_DISABLE_COMPOSITING_MODE=1 ./src/emacs -q

screen Command

Mon, 11 Nov 2024 00:00:00 +0000

翻页

步骤：

使用 C-a <escape>,进入 copy mode
使用 <PageUp>/<PageDown> 按键来翻页

plz

Thu, 17 Oct 2024 00:00:00 +0000

使用例子

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24


(plz 'post "https://api.moonshot.cn/v1/chat/completions"
 :headers '(("Authorization" . "Bearer $API_KEY")
 ("Content-Type" . "application/json"))
 :body (json-encode `((:model . "moonshot-v1-8k")
 (:messages .
 (((:role . "system")
 (:content . "you are a helpful assitant"))
 ((:role . "user")
 (:content . "why 1 + 1 not equals 2?"))
 )))))



;; deepseek
(plz 'post "https://api.deepseek.com/v1/chat/completions"
 :headers '(("Authorization" . "Bearer sk-ff5eed1bfe3e4aa9b749cfc142cc7753")
 ("Content-Type" . "application/json"))
 :body (json-encode `((:model . "deepseek-chat")
 (:messages .
 (((:role . "system")
 (:content . "you are a helpful assitant"))
 ((:role . "user")
 (:content . "What the result of 1 + 1?"))
 )))))

json 制作方法

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30


# * 完整例子
(json-encode `((:model . "moonshot-v1-8k")
 (:messages .
 (((:role . "system")
 (:content . "you are a helpful assitant"))
 ((:role . "user")
 (:content . "why 1 + 1 not equals 2?"))
 ))))

# * 单个字段定义
(json-encode `((:role . "system")))
# {"role": "system"}

# * 多个字段定义
(json-encode `((:role . "system") (:id . 3)))
# {"role": "system", "id": 3}


# * 数组定义
(json-encode `(1 2 3))
# [1, 2, 3]

# * 数组字段定义
(json-encode `((:my_array . (1 2 3))))
# {"my_array": [1, 2, 3]}


# * 总结
# ** list --> 数组（python list）
# ** list of cons cell --> 字典

X2go

Sun, 29 Sep 2024 00:00:00 +0000

禁用 x2go 快捷键的方法

参考：

方法：

编辑 server 端的 keystrokes.cfg 文件
server 端用户目录下的 ~/.x2go/config/keystrokes.cfg 优先级更高
- 优先使用用户目录下的配置
server 端系统下的配置：
- /etc/nx/keystrokes.cfg
- /etc/x2go/keystrokes.cfg

禁用方法：

Matrix 矩阵

Mon, 02 Sep 2024 00:00:00 +0000

教程

d2l (dive into deep learning 中的数学基础) 中矩阵教程附录
- 22.1. Geometry and Linear Algebraic Operations — Dive into Deep Learning 1.0….
CSDN 博主
- 张量基础学习（一概念，求和指标，符号）_张量运算符号-CSDN博客

线性变换 linear transformations

$[1, 0]^T$

使用： $A \dot v$

Mineru

Thu, 29 Aug 2024 00:00:00 +0000

MinerU 中的概念和名称

magic_pdf.pipe

pipe_analysis –> self.model_list
- 这是布局分析 + mfd/mfr + ocr 识别的结果列表

禁用可视化输出方法

参考：

https://pdf-extract-kit.readthedocs.io/en/latest/algorithm/layout_detection.html#viewing-visualization-results

设置模型配置文件中的 visualize 为 False 例子：

1
2
3
4
5
6
7
8
9


inputs: assets/demo/formula_recognition
outputs: outputs/formula_recognition
tasks:
 formula_recognition:
 model: formula_recognition_unimernet
 model_config:
 cfg_path: pdf_extract_kit/configs/unimernet.yaml
 model_path: models/MFR/unimernet_tiny
 visualize: False

Org Roam

Thu, 15 Aug 2024 00:00:00 +0000

基本命令介绍

org-roam-node-find f
- 用来查找或者新建一个 node
org-roam-node-insert i
- 在当前 org-mode 文件的 buffer 中插入一个对应 node 的链接
- 如果想要链接的 node 不存在，会自动创建
org-roam-node-toggle l
- 链接查询，查看有哪些 node 引用了当前的 Node

Alembic

Mon, 12 Aug 2024 00:00:00 +0000

常用命令

初始化
```
alembic init
```
查看版本
```
alembic history
```

切换版本

升级 upgrade
```
alembic upgrade <commit-name>
```
降级 downgrade
```
alembic downgrade <commit-name>
```

查看现在的版本
```
alembic current
```
生成 sql: --sql 参数
```
alembic upgrade head --sql
```
注意：这样不会在数据库中直接执行迁移操作

流程示例

创建 almebic commit(version) 方法

编写自己的新版本 models 代码
创建版本

Tailscale

Tue, 06 Aug 2024 00:00:00 +0000

headscale 服务搭建

教程：

基于建立私有DERP节点与私有Headscale优化Tailscale组网的实践学习 - XueMian雪面

derper 中继服务

Tailscale 基础教程：部署私有 DERP 中继服务器 · 云原生实验室

Pix2text

Mon, 22 Jul 2024 00:00:00 +0000

table_ocr 表格识别和解析

代码阅读

源码 pix2text/table_ocr.py
- 模型下载方法：
  1
  
  download_cmd = f'huggingface-cli download --repo-type model --resume-download --local-dir-use-symlinks False breezedeus/pix2text-table-rec --local-dir {model_dir}'
  - 结构识别使用的是微软的表格识别模型 fork : breezedeus/pix2text-table-rec 基于 microsoft/table-transformer-structure-recognition-v1.1-all

Dongle 加密狗

Tue, 16 Jul 2024 00:00:00 +0000

加密狗厂家品牌

sentinel

资源

sentinel 加密狗

软件下载：
- https://supportportal.thalesgroup.com/csm?id=kb_article_view&sys_kb_id=c2241c1d1bb41890f12064606e4bcb3e&sysparm_article=KB0021845

LLM Train

Fri, 12 Jul 2024 00:00:00 +0000

参考

教程

如何从零开始训练大模型？（非常详细）零基础入门到精通，收藏这一篇就够了_大模型怎么训练-CSDN博客

训练工具

LLaMA-Factory: GitHub - hiyouga/LLaMA-Factory: A WebUI for Efficient Fine-Tuning of 100+ LLM…
- 多种模型的云训练、微调工具

FAQ

模型大小

模型实际大小计算方法
```
总大小 = 7B * 4 bytes = 28 GB
```
- 但是实际上 Qwen2-7B 大小 15GB

RAG 检索增强生成

Wed, 26 Jun 2024 00:00:00 +0000

资料收集

HippoRAG:
- GitHub - OSU-NLP-Group/HippoRAG: HippoRAG is a novel RAG framework inspired b…
- 仿造人类大脑海马体记忆机制，改造版 RAG
句子嵌入: 交叉编码和重排序 - HuggingFace - 博客园
- embedding Vs reranker 模型区别
RRF (Reciprocal Rank Fusion)
- Elasticsearch：倒数排序融合 - Reciprocal rank fusion (RRF)-CSDN博客

Distributed

Thu, 30 May 2024 00:00:00 +0000

教程

分布式架构和微服务架构-CSDN博客
实现分布式锁：Zookeeper vs Redis_redis 和zk分布式锁选型-CSDN博客
- 分布式锁
  - redis
  - zookeeper

特点

高可用
可扩展

Exception

Mon, 13 May 2024 00:00:00 +0000

异常信息保存方法 save exception

使用 sys.exc_info() -> tuple[Exception_type, Exception_object, Traceback_object]

异常处理工具：

获取： sys.exc_info()
- traceback 获取：
  - your_exception.__traceback__
转换成字符串和打印： traceback 模块
- 字符串：
  - 异常栈： traceback.format_tb(traceback_object)
  - 异常类： traceback.format_exception(exception_object)
  - 当前异常类： traceback.format_exc()
- 打印：
  - 异常栈： traceback.print_tb(traceback_object)
  - 异常类： traceback.print_exception(exception_object)
  - 当前异常类： traceback.print_exc()
最后一个异常获取：

Black

Sun, 28 Apr 2024 00:00:00 +0000

ignore format 禁用格式化

单行引用： fmt: skip
1

import my_long_module # fmt: skip
- 注意：这种格式是新功能，有些 black 版本可能还没支持
- 参考：psf/black#451 Exclude formatter from running on specific lines with inline co…

多行禁用： fmt: off , fmt: on

1
2
3
4


# fmt: off
import sys
sys.UnraisableHookArgs
# fmt: on

Nougat

Fri, 26 Apr 2024 00:00:00 +0000

把 nougat 改造成支持图片解析

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27


import app


def get_image_predict(img: Image):
 model_output = app.model.inference(img)

 predictions = []
 for j, output in enumerate(model_output["predictions"]):
 if model_output["repeats"][j] is not None:
 if model_output["repeats"][j] > 0:
 disclaimer = "\n\n+++ ==WARNING: Truncated because of repetitions==\n%s\n+++\n\n"
 else:
 disclaimer = (
 "\n\n+++ ==ERROR: No output for this page==\n%s\n+++\n\n"
 )
 rest = app.close_envs(model_output["repetitions"][j]).strip()
 if len(rest) > 0:
 disclaimer = disclaimer % rest
 else:
 disclaimer = ""
 else:
 disclaimer = ""

 predictions.append(app.markdown_compatible(output) + disclaimer)


 return "".join(predictions).strip()

Themes

Thu, 18 Apr 2024 00:00:00 +0000

icons themes

GitHub - btd1337/La-Sierra-Icon-Theme: An icon pack for elementary OS based i…
- macOS Sierra icons
GitHub - keeferrourke/la-capitaine-icon-theme: La Capitaine is an icon pack d…
- macOS la capitaine icons
https://github.com/vinceliuice/Qogir-icon-theme
- EndeavorOS 默认 icons
GitHub - yeyushengfan258/We10X-icon-theme: A colorful design icon theme for l…
- Win10 icons

cairo-dock themes

GitHub - btd1337/Cairo-Dock-macOS-Sierra-Style: A theme for Cairo-Dock based …

Mpd

Wed, 17 Apr 2024 00:00:00 +0000

参考

Beginner’s Guide to Setting Up and Using MPD - Community contributions - Ende…
- 教程

Openbox

Mon, 15 Apr 2024 00:00:00 +0000

lxde + openbox

配置文件： ~/.config/openbox/lxde-rc.xml 例子：

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39


<keyboard>
 <keybind key="W-Up">
 <action name="Togglemaximize"/>
 </keybind>
 <keybind key="W-Left">
 <action name="UnmaximizeFull"/>
 <action name="MoveResizeTo">
 <x>0</x>
 <y>0</y>
 <width>50%</width>
 <height>100%</height>
 </action>
 </keybind>

 <keybind key="W-Right">
 <action name="UnmaximizeFull"/>
 <action name="MoveResizeTo">
 <x>-0</x>
 <y>0</y>
 <width>50%</width>
 <height>100%</height>
 </action>
 </keybind>

 <keybind key="S-W-Right">
 <action name="MoveResizeTo">
 <!-- Move the window to the second monitor -->
 <monitor>2</monitor>
 </action>
 </keybind>

 <keybind key="S-W-Left">
 <action name="MoveResizeTo">
 <!-- Move the window to the second monitor -->
 <monitor>1</monitor>
 </action>
 </keybind>

</keyboard>

AI4Science

Tue, 09 Apr 2024 00:00:00 +0000

概念

AI for science

一种新的科学范式

参考

AI for Science：科学智能助推科研突破 | 上海纽约大学

语录

浙江大学计算机科学与技术学院百人计划研究员、博士生导师，王海帅

Bayesian Optimization

Tue, 19 Mar 2024 00:00:00 +0000

参考

数学之美——全概率公式贝叶斯公式
- 贝叶斯条件概率
贝叶斯优化方法和应用综述
Exploring Bayesian Optimization
- 许多英文资料和实现库

调参优化算法有哪些

算法金 | 最难的来了：超参数网格搜索、贝叶斯优化、遗传算法、模型特异化、Hyperopt、Optuna、多目标优化、异步并行优化 - 算法金「全网同名」…

Chinese Nlp

Thu, 07 Mar 2024 00:00:00 +0000

资源

资源列表
- GitHub - crownpku/Awesome-Chinese-NLP: A curated list of resources for Chines…

nlp 套装

HanLP
- GitHub - hankcs/HanLP: 中文分词词性标注命名实体识别依存句法分析成分句法分析语义依存分析语义角色标注指代消解风格转换…
- 有两套 api: restful 和 native

Svm 支持向量机

Wed, 06 Mar 2024 00:00:00 +0000

参考

概念

硬间隔
软间隔
什么是支持向量
分类和回归上的区别

Meow Edit

Fri, 01 Mar 2024 00:00:00 +0000

批量编辑

参考：

流程简要介绍：

选择区域（first selection）
grab
- 为 multiple cursor, second selection 做准备
激活多个 cursor
- 可用的操作
  1. b: 激活多个单词的 cursor
  2. x: 多行时，激活每行作为一个 cursor 使用
  3. f 和 - f : 通过搜索字符，创建 cursor
每个 cursor 的行为

Autogen

Wed, 28 Feb 2024 00:00:00 +0000

参考资料

autogen 使用非 openai 模型：
- Local LLMs and Autogen: An Uprising of Local-Powered Agents | by Baby Command…
- microsoft/autogen#46 Integrate opensource LLMs into autogen
  - 一个关于如何让 autogen 接入 local models 的 issue

设置 key 和参数等， llm_config

参考：

LLM Configuration | AutoGen

eg:

metagpt

Wed, 28 Feb 2024 00:00:00 +0000

参考

原理说明：
- AI Agent框架——MetaGPT技术详解-CSDN博客
官方教程
- 概念简述 | MetaGPT

Functional Programming in Python

Mon, 19 Feb 2024 00:00:00 +0000

工具

工具列表

itertools
其他内置函数
- any, all
- zip
- callable :: 判断是否可作为函数使用
more_itertools
funcy
- GitHub - Suor/funcy: A fancy and practical functional tools
- funcy-pipe · PyPI
pipe
- GitHub - JulienPalard/Pipe: A Python library to use infix notation in Python
- 使用 Pipe(your_fun) 装换成可以通过 | 调用的函数
whatever

CentOS

Mon, 05 Feb 2024 00:00:00 +0000

离线安装 docker 方法

参考：

步骤：

在有网络的机器上，安装 docker
安装 yum-utils
- 提供 yumdownloader 命令
打包 docker 安装包和依赖

Deep Learning

Sun, 04 Feb 2024 00:00:00 +0000

激活函数

参考：

Sigmoid and SoftMax Functions in 5 minutes | by Gabriel Furnieles | Towards D…

类型：

线性激活函数
- 易训练
- 不适合复杂任务
非线性激活函数
- sigmoid, tanh, ReLU
- 难训练
- 适合复杂任务

sigmoid, tanh, ReLU 比较

参考：

原来ReLU这么好用！一文带你深度了解ReLU激活函数！ - 知乎

易训练性：

Zipfile

Wed, 17 Jan 2024 00:00:00 +0000

参考

创建 zip 文件

demo

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11


import zipfile
from pathlib import Path

with zipfile.ZipFile('/mnt/e/Downloads/hello.zip', 'w') as zfile:
 # zfile.writestr('/path/to/zip/insidefile.txt', "content_str_or_bytes")
 zfile.writestr('folder/age.txt', "12") # 写入 str 类型
 zfile.writestr('raw', "好天气".encode()) # 写入 bytes 类型
 zfile.writestr('demo/qq.exe', Path('/mnt/e/Downloads/qq.exe').read_bytes())

 # 直接写入文件，不需要通过 open 读入内存再写入zip
 zipfile.write("/file/on/disk.txt", "path/in/zipfile/name.txt")

遍历 zip 文件

使用 ZipFile.infolist()

使用 ZipFile.namelist()

1
2
3
4


In [22]: with zipfile.ZipFile('/mnt/e/Downloads/hello.zip', 'r') as zread:
 ...: print(zread.filelist)
 ...:
[<ZipInfo filename='folder/age.txt' filemode='?rw-------' file_size=2>, <ZipInfo filename='raw' filemode='?rw-------' file_size=9>, <ZipInfo filename='demo/qq.exe' filemode='?rw-------' file_size=183394032>]

使用 ZipFile.filelist 属性

1
2
3
4


In [24]: with zipfile.ZipFile('/mnt/e/Downloads/hello.zip', 'r') as zread:
 ...: print(zread.namelist())
 ...:
['folder/age.txt', 'raw', 'demo/qq.exe']

使用 zipfile.Path 类 (类似 pathlib.Path)

1
2
3
4
5


In [25]: list(zipfile.Path('/mnt/e/Downloads/hello.zip', at='/').iterdir())
Out[25]:
[Path('/mnt/e/Downloads/hello.zip', 'raw'),
 Path('/mnt/e/Downloads/hello.zip', 'folder/'),
 Path('/mnt/e/Downloads/hello.zip', 'demo/')]

递归遍历：

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20


from pathlib import Path

import zipfile

def zipiter_recursive(filename: Path|str):
 if isinstance(filename, (Path, str)):
 zip_file = Path(filename)
 assert zip_file.suffix.lower() == ".zip"
 iter_path = zipfile.Path(zip_file)

 elif isinstance(filename, zipfile.Path):
 iter_path = filename
 else:
 raise TypeError(f'not a valid zip file {filename = }')

 for i in iter_path.iterdir():
 if i.is_dir():
 yield from zipiter_recursive(i)
 else:
 yield i

使用例子：

Wireguard

Fri, 12 Jan 2024 00:00:00 +0000

参考

WireGuard 的工作原理 - 一个小运维的博客
文档：
- GitHub - pirate/wireguard-docs: 📖 Unofficial WireGuard Documentation: Setup, …
webui 工具
- GitHub - wg-easy/wg-easy: The easiest way to run WireGuard VPN + Web-based Ad…
部署教程
- 中文 ubuntu 部署：基于Wireguard技术的虚拟个人网络搭建: 基于wireguard的内网穿透技术~

FAQ

wireguard + archlinux 安装方法

注意:

Frp

Wed, 03 Jan 2024 00:00:00 +0000

三方 frp 服务供应商

樱花 frp: SakuraFrp 4.0

http nat 穿透反向代理和 ssh nat 穿透代理例子

实现功能：

允许通过子域名（subDomainHost）访问内网 http 服务
通过 16000 端口代理内网 ssh 服务

frps.toml

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11


bindPort = 17000
vhostHTTPPort = 18080
vhostHTTPSPort = 10443
subDomainHost = "frp.mydomain.com" # 注意：需要创建一个 *.frp.mydomain.com 指向 frp server 所在机器的DNS记录

serverPort = 7000

# #鉴权使用的 token 值，需要和内网客户端端设置一样的值才能鉴权通过
[auth]
method = "token"
token = "mytoken1133"

frpc.toml

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30


serverAddr = "host-server.com"
serverPort = 17000
# 可选，是否使用 kcp 协议（底层使用UDP）
transport.protocol = "kcp"

[auth]
method = "token"
token = "mytoken1133"

# http 服务，域名映射
[[proxies]]
name = "web"
type = "http"
# 本地服务地址，localIP 设置可选（默认127.0.0.1）
localIP = "127.0.0.1"
localPort = 80
#customDomains = ["file.otherCustomDomain.site"]
subdomain = "file" # 相当于：file.mydomain.com:18080

# 登录验证，可选配置
httpUser = "the-user"
httpPassword = "the-password"


# ssh, tcp 端口映射
[[proxies]]
name = "wsl-ssh"
type = "tcp"
localPort = 22
RemotePort = 16000 # 相当于：ssh user@host-server.com -p 1600

`stcp 类型` ,安全的 tcp 穿透代理

作用：

Network Security

Wed, 03 Jan 2024 00:00:00 +0000

工具列表

漏洞利用工具 metasploit
- Metasploit 入门到高级【第一章】 - 知乎

Nvidia

Wed, 27 Dec 2023 00:00:00 +0000

教程

CUDA 教程

CUDA编程，

驱动下载

参考：

下载页面：Official Drivers | NVIDIA
linux 安装指南：NVIDIA Driver Installation Quickstart Guide :: NVIDIA Tesla Documentation
linux CUDA 安装教程：CUDA Installation Guide for Linux

下载结果：

Nvidia-<os-name>-<arch>-<version>.run 文件

注意：

可能存在，选择列表中没有给定的型号，但是有类似型号，详情页支持要搜索的型号的情况

Rust Examples Ex

Wed, 20 Dec 2023 00:00:00 +0000

format

 1
 2
 3
 4
 5
 6
 7
 8
 9
10


println!("hello");


println!("{:?}", 1.0/2.0);

let a: i32 = 3;
let b:u32 = 3;
let i: i32 = 2;

println!("{:?}, {}", a.pow(b), a.pow(i as u32));

hello

binary, hex

1

println!("ob{:b}, ox{:X}", 16, 15);

ob10000, oxF

Xrdp

Thu, 02 Nov 2023 00:00:00 +0000

连接失败出现蓝绿色空白屏

处理方法：

https://gist.github.com/valorad/7fd3e4a7fb4481f1eb77ded42a72537d
- arch linux + gnome + qtile 验证有效

wsl + arch linux

注意：
- 需要安装 xorg-server

依赖：

1
2


sudo pacman -S xorg-server
yay -S xrdp xorgxrdp

Wayland

Fri, 20 Oct 2023 00:00:00 +0000

应用

原生支持
- emacs-pgtk (emacs-wayland on arch linux)
- firefox
vscode
- code --ozone-platform=wayland

Xorg

Wed, 18 Oct 2023 00:00:00 +0000

参考

X window system(X11) | 柯幽

Xorg 简介

参考：

Xorg - ArchWiki

Xorg 是 X window system 的一种实现

Xephyr 设置第二个 x server

使用步骤：

使用 Xephyr 启动一个 x server
- Xephyr -screen 1600x900 :1
启动 gui 程序
- DISPLAY=:1 gvim

在 ssh x11 forward 时使用 Xephyr

ssh -X remote
在 remote 上启动 Xephyr
在 remote 上启动 gui 程序

Server

Tue, 10 Oct 2023 00:00:00 +0000

cgi, wsgi, uwsgi, asgi 辨析

参考：

https://baijiahao.baidu.com/s?id=1718367047580754624&wfr=spider&for=pc

概念

web 服务器
web 框架

pathos

Sat, 30 Sep 2023 00:00:00 +0000

教程

python并行计算（上）：pathos模块 - 知乎

Rzsz

Wed, 27 Sep 2023 00:00:00 +0000

rzsz 替换工具

trzsz

参考：

https://github.com/trzsz/trzsz-go

git attributes

Mon, 25 Sep 2023 00:00:00 +0000

关于 git attributes 的误解说明

gitattributes 的作用：

在提交 commit 时，把本地的换行符替换成和已有 commit 中一致
git clone 时，换成和本机兼容的换行符

gitattributes 没有的功能：

把已有 commit 中文件的换行符替换成新规定的换行符

pyproject file

Mon, 25 Sep 2023 00:00:00 +0000

模板

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19


[tool.pylsp-mypy]
enabled = true
live_mode = false
dmypy = true # enable dmypy
strict = true


[tool.pdm.dev-dependencies]
lsp = [
 "python-lsp-server>=1.8.0",
 "python-lsp-ruff>=1.5.1",
 "python-lsp-black>=1.3.0",
 "pylsp-mypy>=0.6.7",
 "pylsp-rope>=0.1.11",
]

[tool.ruff]
ignore = ["E501"] # ignore line length
line-length = 100

pylsp + pdm

pdm add -dG lsp python-lsp-server python-lsp-ruff python-lsp-black pylsp-mypy pylsp-rope

Returns

Tue, 19 Sep 2023 00:00:00 +0000

参考

文档：
- Features — returns 0.22.0 documentation
repo:

bind 和 map

bind 和 map_ (returns.pointfree)

bind
- 作用：把入参类型改成 Container 类型
- 参数：
  1. Containner[value] -> Contaner[value]
  2. Containner[value] -> value
- 让入参可以接收 Containner[value] 类型
  - 即，把原始函数 fn(value) -> value 转换成 new_fn(Container[value])-> value
map

pdm

Thu, 14 Sep 2023 00:00:00 +0000

代码存放路径和文件布局

参考：

src layout vs flat layout — Python Packaging User Guide
pdm-backend src layout: Build configurations - PDM-Backend

默认行为：

如果没有 src 文件夹， pdm 认为项目是 flat layout
即：
- pdm 支持 src layout
- pdm 支持 flat layout
  - 注意，不要生成 src 文件夹

venv 管理

使用 conda

创建

Debug

Tue, 12 Sep 2023 00:00:00 +0000

工具

dap protocol in vscode, emacs
icecream
- GitHub - gruns/icecream: 🍦 Never use print() to debug again.
- 一个 debug 版的 print 快捷美化替代工具
- eg: ic(my_fun('input_argument'))
Debugging configurations for Python apps in Visual Studio Code

参数：

name
- 解释：创建的 configuration 的名称
- 类型： str
type
- 对于 python 项目，设置成 python
request

Watchdog

Tue, 12 Sep 2023 00:00:00 +0000

参考

Ubuntu

Fri, 08 Sep 2023 00:00:00 +0000

中文软件安装

参考：

软件包列表
GitHub - zq1997/deepin-wine: 【deepin源移植】Debian/Ubuntu上最快的QQ/微信安装方式
- 支持 qq, 微信等最新版安装
  1 2 3
  
  wget -O- https://deepin-wine.i-m.dev/setup.sh | sh sudo apt-get install com.qq.weixin.deepin

Spellcheck

Fri, 01 Sep 2023 00:00:00 +0000

工具列表

python
- pyspellcheck
- textblob

工具比较

GitHub - diffitask/spell-checkers-comparison: Comparison of existing spell ch…

paddleocr

Wed, 30 Aug 2023 00:00:00 +0000

参数设定

参考：

参数列表

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11


from paddleocr import PaddleOCR


OCR_TOOL = PaddleOCR(
 use_angle_cls=True,
 lang="en",
 ocr_version="PP-OCRv3",
 det_db_score_mode="slow",
 # rec_algorithm='CRNN',
 e2e_pgnet_mode="slow",
)

使用流程和参数说明

主要参数和流程：
1. 探测 detection
2. 文本方向 direction classification
3. 设定语言 lang
4. 识别 recognition
一般 paddleOCR 识别字符涉及到的流程是

Train

Wed, 09 Aug 2023 00:00:00 +0000

关于拆分数据多机器

langchain

Tue, 08 Aug 2023 00:00:00 +0000

资源

搜索引擎工具

duckduckgo
- 免费
serpapi
- 100 次/月
travily
- 1000 次/月

列表

不同 agent 用途

Which Agent Type should I use? · langchain-ai/langchain · Discussion #12888 ·…
- React agent 如何选择
  1. AgentType.STRUCTURED_CHAT_ZERO_SHOT_REACT_DESCRIPTION
    - 适合 tool 有多个参数的情况

调用 Azure 上的 model

AzureChatModel

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15


import os

from langchain.chat_models import AzureChatOpenAI
from langchain.schema import HumanMessage

if __name__ == "__main__":
 os.environ["OPENAI_API_TYPE"] = "azure"
 os.environ["OPENAI_API_VERSION"] = "2023-03-15-preview"
 os.environ["OPENAI_API_BASE"] = "https://wei202305.openai.azure.com/"
 os.environ["OPENAI_API_KEY"] = "<your azure key>"

 model = AzureChatOpenAI(deployment_name="gpt-35-turbo-01")

 ret = model([HumanMessage(content="Translate this sentence from English to French. I love programming.")])
 # AIMessage(content="J'adore programmer.", additional_kwargs={}, example=False)

必填参数

deployment_name='gpt-35-turbo-01'
azure_endpoint="https://wei202305.openai.azure.com/"
api_version="2023-03-15-preview"
api_key="…"

标准调用例子：

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18


from langchain.schema import HumanMessage
from langchain.chat_models import AzureChatOpenAI

AzureChatOpenAI(
 azure_deployment='gpt-35-turbo-01',
 api_key='0b4dfdf1786a1f84e0f9aba1a1ce2eeadfdfd1',
 azure_endpoint='https://hello202323434.openai.azure.com',
 api_version='2023-03-15-preview').invoke([HumanMessage(content='your name?')])

Out[24]: AIMessage(content="I am an AI language model created by OpenAI called GPT-3. I don't have a personal name, but you can refer to me as ChatGPT.")

AzureChatOpenAI(
 azure_deployment='gpt-35-turbo-01',
 api_key='0b4b1786adfdfdf4e0f1ce2eea171',
 azure_endpoint='https://wedi202dfdf.openai.azure.com',
 api_version='2023-03-15-preview')([HumanMessage(content='your name?')])

Out[25]: AIMessage(content="I am an AI language model created by OpenAI and I don't have a personal name. You can call me OpenAI or ChatGPT. How can I assist you today?")

不使用 HumanMessage, 直接 invoke(str) 例子：

1
2
3
4
5


AzureChatOpenAI(
 azure_deployment='gpt-35-turbo-01',
 api_key='0b4b1786adfdfdf4e0f1ce2eea171',
 azure_endpoint='https://wedi202dfdf.openai.azure.com',
 api_version='2023-03-15-preview')('your name?')

AzureOpenAIEmbeddings

1
2
3
4


In [3]: from langchain.embeddings import AzureOpenAIEmbeddings

In [4]: AzureOpenAIEmbeddings(azure_deployment='text-embedding-ada-002', api_key='0b4b1786a1f84e0f9ab34er3dfdfce2eea171', azure_endpoint='https://hello334343.openai.azure.com/').embed_query('hell
 ...: o')

Chain 的调用

调用顺序：

Pytorch

Tue, 08 Aug 2023 00:00:00 +0000

安装

Start Locally | PyTorch

torchrun 训练

错误问题

突然中断 sighup 1

原因
- 使用 nohup + torchrun 后台运行导致
解决方法
- 参考： DDP Error: torch.distributed.elastic.agent.server.api:Received 1 death signal…
- 使用 tmux 或者 screen 命令把 torchrun 后台运行

torch.Tensor

Tensor.scatter_ 用法

参考：

transformers

Tue, 08 Aug 2023 00:00:00 +0000

参考

模型训练 GPU、多 GPU、 CPU、多 CPU 等

多机器并行训练方法

Transformers多机多卡的炼丹实践 - 知乎

速度慢分析

模型转换

转换成 huggingface transformers 格式

参考：

Rust

Thu, 03 Aug 2023 00:00:00 +0000

书籍

the book
learn by examples
nomicon(Rustnomicon)
- Introduction - The Rustonomicon
- 编写 Unsafe Rust 必须的知识
- 内容
  - 所有权 ownwership
  - 指针
  - 生命周期 lifetime

工具列表

substring 子字符串
- GitHub - unicode-rs/unicode-segmentation: Grapheme Cluster and Word boundarie…

数据类型

整型： u8, u16, u32, u64, i8, i16,…
浮点型：f32, f64
布尔：true, false
切片

Bert

Tue, 18 Jul 2023 00:00:00 +0000

参考

BERT详解：概念、原理与应用__StarryNight_的博客-CSDN博客
huggingface 解释 bert: BERT 101 - State Of The Art NLP Model Explained
huggingface 训练 model 流程
- How to train a new language model from scratch using Transformers and Tokenizers
  - 来源： python - Questions when training language models from scratch with Huggingfac…
GitHub - datawhalechina/learn-nlp-with-transformers: we want to create a repo…

Dark Theme

Thu, 06 Jul 2023 00:00:00 +0000

参考

Dark mode switching - ArchWiki

gtk 应用

1

export GTK_THEME=Adwaita:dark

wsl 设置无效

参考：

microsoft/wslg#37 {Help wanted} Default window decorations color

Read Notes

Mon, 03 Jul 2023 00:00:00 +0000

论文：GPT Self-Supervision for a Better Data Annotator

参考：

https://arxiv.org/abs/2306.04349

流程分析

one shot tuning
- 找到最优 template (template_input_i, template_summary_i)
- input data –> summary –> recover data
- feedback values ?
  - similar alignment
- instruction, template, support data {w, t, x}.
  - w: instruction
  - t: template
    - 样本
    - 样本 summary
  - x: input data
- $$s_i \leftarrow F(x_i| t_i, w_g, \theta)$$ 生成 summary 过程

RxPY Reactive Programming 响应式编程

Tue, 23 May 2023 00:00:00 +0000

参考

Rsync

Thu, 18 May 2023 00:00:00 +0000

参考

SCP user's migration guide to rsync - Fedora Magazine

为什么使用 rsync

scp 已经过时了

优势

可以压缩传输 -z
可以打包传输，保持更多文件信息 -a

复制文件夹的注意事项

带 `/` 和不带是有区别的

不带 /, 内容和文件夹名称，一起复制

Prompt Engineering

Thu, 27 Apr 2023 00:00:00 +0000

Prompt Engineering 提示工程

参考：

ChatGPT火爆，最全prompt工程指南登GitHub热榜，标星4.7k！ - 知乎
GitHub - dair-ai/Prompt-Engineering-Guide: Guides, papers, lecture, and resou…
官方教程
- DLAI - Learning Platform Beta
  - 由吴恩达和 openai 员工一起完成
  - 包含 jupyter notebook 演示

文档：

Prompt-Engineering-Lecture-Elvis.pdf

自动提示词工程工具

参考：

GitHub - stanfordnlp/dspy: DSPy: The framework for programming—not prompting—…

Octave

Mon, 24 Apr 2023 00:00:00 +0000

参考

octave cookbook: Cookbook - Octave
org-babel octave: Octave Code Blocks in Babel

向量

索引

从 1 开始计数，注意不是 0
使用 (), 而不是 []

eg:

1
2
3
4


t = linspace(0, 1, 3);
disp(t);

disp(t(1)); % 元素索引

 0 0.5000 1.0000
0

org babel

results – output
1

disp('yes');
```
yes
```
results – value

LLM

Fri, 14 Apr 2023 00:00:00 +0000

教程

LLMForEverybody | 每个人都能看懂的大模型知识分享，LLMs春/秋招大模型面试前必看，让你和面试官侃侃而谈

资源列表

Cosmos

Tue, 04 Apr 2023 00:00:00 +0000

参考

官方文档：Cosmos — Cosmos 0.0.1 documentation
repo: GitHub - UW-COSMOS/Cosmos: Knowledge base construction from raw scientific do…

docker images

docker-hub
- Docker – uwcosmos
手动创建
- Building the docker images — Cosmos 0.0.1 documentation
- Cosmos/build.sh at master · UW-COSMOS/Cosmos · GitHub

Grobid

Tue, 04 Apr 2023 00:00:00 +0000

解析 grobid tei xml

参考：

Parsing TEI XML documents with Python | Data, code and science

libwapiti.so 编译方法

1
2
3
4
5


git clone https://github.com/adsva/libwapiti
cd libwapiti
git clone https://github.com/Jekub/Wapiti
gcc -fPIC -c -std=c99 -W -Wall -O3 -I ./Wapiti/src -lm -lpthread ./Wapiti/src/*.c ./src/*.c
gcc -shared -Wl,--wrap,fatal,--wrap,pfatal,--wrap,warning,--wrap,info,-soname,libwapiti.so -o libwapiti.so -lc *.o

Codegeex

Fri, 17 Mar 2023 00:00:00 +0000

api 文档

api key

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19


"use strict";
Object.defineProperty(exports, "__esModule", { value: true });
exports.surveyUrlEN = exports.surveyUrlCN = exports.statApiHerf = exports.testSecret = exports.testKey = exports.testHref = exports.apiSecret = exports.apiKey = exports.apiHref = void 0;
// //tianqi api config
exports.apiHref = "https://tianqi.aminer.cn/api/v2";
exports.apiKey = "68cf004321e94b47a91c2e45a8109852";
exports.apiSecret = "e82b86a16f9d471ab215f653060310e3";
//wudao api config
// export const apiHref ='https://wudao.aminer.cn/os/api/api/v2';
// export const apiKey = 'f30ea902c3824ee88e221a32363c0823';
// export const apiSecret = '90664fc066434fac8983d309c758cd4d';
exports.testHref = 'https://wudao.aminer.cn/os/api/api/v2';
exports.testKey = 'f30ea902c3824ee88e221a32363c0823';
exports.testSecret = '90664fc066434fac8983d309c758cd4d';
//data statistics api
exports.statApiHerf = "https://maas.aminer.cn"; //process.env.NODE_ENV==='development'?'http://10.50.74.216:32621':'https://maas.aminer.cn';
exports.surveyUrlCN = "https://wj.qq.com/s2/11259178/fd49/";
exports.surveyUrlEN = "https://wj.qq.com/s2/11260705/6cd6/";
//# sourceMappingURL=localconfig.js.map

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37


{
 "message": "success",
 "result": {
 "app": "multilingual_code_generate",
 "created_at": "Fri, 17 Mar 2023 06:18:52 GMT",
 "input": {
 "lang": "Python",
 "n": 3,
 "stop": [],
 "text": "# language: Python\nfrom typing import List\n\ndef has_close_elements(numbers: List[float], threshold: float) -> bool:\n \"\"\" Check if in given list of numbers, are any two numbers closer to each other than\n given threshold.\n >>> has_close_elements([1.0, 2.0, 3.0], 0.5)\n False\n >>> has_close_elements([1.0, 2.8, 3.0, 4.0, 5.0, 2.0], 0.3)\n True\n \"\"\"\n"
 },
 "output": {
 "code": [
 " for i in range(len(numbers) - 1):\n"
 ],
 "code_dict": [
 {
 "context": "# language: Python\nfrom typing import List\n\ndef has_close_elements(numbers: List[float], threshold: float) -> bool:\n \"\"\" Check if in given list of numbers, are any two numbers closer to each other than\n given threshold.\n >>> has_close_elements([1.0, 2.0, 3.0], 0.5)\n False\n >>> has_close_elements([1.0, 2.8, 3.0, 4.0, 5.0, 2.0], 0.3)\n True\n \"\"\"\n",
 "cum_log_probs": -0.7978824377059937,
 "generated": " for i in range(len(numbers) - 1):\n"
 }
 ],
 "completion_token_num": 32,
 "errcode": 0,
 "prompt_token_num": 132
 },
 "process_time": 0.8907933235168457,
 "task_id": "6414064ce016d96e7c58780e",
 "updated_at": "Fri, 17 Mar 2023 06:18:52 GMT",
 "user": {
 "appId": "6fd2a2a76f0a4015af45ef30f8c1436f",
 "id": "631ed7b83676d9dea55bcecd",
 "name": "游客459664"
 }
 },
 "status": 0
}

git ignore file

Wed, 15 Mar 2023 00:00:00 +0000

python

 1
 2
 3
 4
 5
 6
 7
 8
 9
 10
 11
 12
 13
 14
 15
 16
 17
 18
 19
 20
 21
 22
 23
 24
 25
 26
 27
 28
 29
 30
 31
 32
 33
 34
 35
 36
 37
 38
 39
 40
 41
 42
 43
 44
 45
 46
 47
 48
 49
 50
 51
 52
 53
 54
 55
 56
 57
 58
 59
 60
 61
 62
 63
 64
 65
 66
 67
 68
 69
 70
 71
 72
 73
 74
 75
 76
 77
 78
 79
 80
 81
 82
 83
 84
 85
 86
 87
 88
 89
 90
 91
 92
 93
 94
 95
 96
 97
 98
 99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170


# Byte-compiled / optimized / DLL files
__pycache__/
,*.py[cod]
,*$py.class

# C extensions
,*.so

# Distribution / packaging
.Python
build/
develop-eggs/
dist/
downloads/
eggs/
.eggs/
lib/
lib64/
parts/
sdist/
var/
wheels/
share/python-wheels/
,*.egg-info/
.installed.cfg
,*.egg
MANIFEST

# PyInstaller
# Usually these files are written by a python script from a template
# before PyInstaller builds the exe, so as to inject date/other infos into it.
,*.manifest
,*.spec

# Installer logs
pip-log.txt
pip-delete-this-directory.txt

# Unit test / coverage reports
htmlcov/
.tox/
.nox/
.coverage
.coverage.*
.cache
nosetests.xml
coverage.xml
,*.cover
,*.py,cover
.hypothesis/
.pytest_cache/
cover/

# Translations
,*.mo
,*.pot

# Django stuff:
,*.log
local_settings.py
db.sqlite3
db.sqlite3-journal

# Flask stuff:
instance/
.webassets-cache

# Scrapy stuff:
.scrapy

# Sphinx documentation
docs/_build/

# PyBuilder
.pybuilder/
target/

# Jupyter Notebook
.ipynb_checkpoints

# IPython
profile_default/
ipython_config.py

# pyenv
# For a library or package, you might want to ignore these files since the code is
# intended to run in multiple environments; otherwise, check them in:
# .python-version

# pipenv
# According to pypa/pipenv#598, it is recommended to include Pipfile.lock in version control.
# However, in case of collaboration, if having platform-specific dependencies or dependencies
# having no cross-platform support, pipenv may install dependencies that don't work, or not
# install all needed dependencies.
#Pipfile.lock

# poetry
# Similar to Pipfile.lock, it is generally recommended to include poetry.lock in version control.
# This is especially recommended for binary packages to ensure reproducibility, and is more
# commonly ignored for libraries.
# https://python-poetry.org/docs/basic-usage/#commit-your-poetrylock-file-to-version-control
#poetry.lock

# pdm
# Similar to Pipfile.lock, it is generally recommended to include pdm.lock in version control.
#pdm.lock
# pdm stores project-wide configurations in .pdm.toml, but it is recommended to not include it
# in version control.
# https://pdm.fming.dev/#use-with-ide
.pdm.toml

# PEP 582; used by e.g. github.com/David-OConnor/pyflow and github.com/pdm-project/pdm
__pypackages__/

# Celery stuff
celerybeat-schedule
celerybeat.pid

# SageMath parsed files
,*.sage.py

# Environments
.env
.venv
env/
venv/
ENV/
env.bak/
venv.bak/

# Spyder project settings
.spyderproject
.spyproject

# Rope project settings
.ropeproject

# mkdocs documentation
/site

# mypy
.mypy_cache/
.dmypy.json
dmypy.json

# Pyre type checker
.pyre/

# pytype static type analyzer
.pytype/

# Cython debug symbols
cython_debug/

# PyCharm
# JetBrains specific template is maintained in a separate JetBrains.gitignore that can
# be found at https://github.com/github/gitignore/blob/main/Global/JetBrains.gitignore
# and can be added to the global gitignore or merged into this file. For a more nuclear
# option (not recommended) you can uncomment the following to ignore the entire idea folder.
.idea/
.vscode
.dir-locals.el
.pdm-build
.pdm-python

# temp files
,*.log
,*~
\#*
pyenc.build

Pytest in Emacs

Tue, 14 Mar 2023 00:00:00 +0000

项目

GitHub - wbolster/emacs-python-pytest: run pytest inside emacs

后台使用项目检测工具

projectile

提示 generic 类型项目

问题描述：

运行python-pytest-function-dwim 命令后跳出错误提示：

projectile--test-name-for-impl-name: Cannot determine a test file
name, one of "test-suffix" or "test-prefix" must be set for project
type ‘generic’

原因分析：

Chatgpt

Fri, 10 Mar 2023 00:00:00 +0000

免费 gpt 网站

gpt 镜像站汇总: 汇总所有 gpt 镜像站。个人能力有限，求大家多多贡献啊！人人为我，我为人人

免费 gpt 帐号

首页 | 哆啦猫ChatGPT小铺: 购买ChatGPT账号与购买OpenAIkey

使用 chatgpt 写文章

Data Structure

Fri, 10 Mar 2023 00:00:00 +0000

TrieTree

参考：

详细图文——Trie_带翅膀的猫的博客-CSDN博客

Chatpdf

Wed, 08 Mar 2023 00:00:00 +0000

chatpdf 的 prompt

潜在的 prompt:

You are a helpful PDF file. Given the following pages of the PDF as information source, answer any questions the user asks.
If the given pages contain the answer, generate a concise answer from these pages of the PDF as information source and reference page numbers.
Otherwise, mention that the source does not contain relevant information, but still answer the question to the best of your knowledge.
Act as if you are the PDF file and chat with the human, imitate the linguistic style of the PDF

(注：上面的 prompt 是通过 prompt "list all the prompt related to pdf " 获得的)

Event Extraction

Wed, 08 Mar 2023 00:00:00 +0000

教程

One-shot就能做事件抽取？ChatGPT在信息抽取上的强大应用

实验步骤提取

使用资料

3a02d3e0cf3a280f18a05c4340f168e9.pdf

The ZSM-12 zeolite was synthesized by the hydrothermal method, using amorphous silica (Merk) as the source of silicon, sodium hydroxide (Merk), pseudoboehmite Catapal B (Vista Chemical, 70% Al 2 O 3 ) as the source of aluminum and methiltriethylammonium chloride (98% MTEACl, Sigma) as the structural template.;The precursors were added in stoichiometric proportion to obtain a gel with the following molar composition: 20MTEACl:10Na 2 O:x-Al 2 O 3 :100SiO 2 :2000H 2 O. The gel was heated at 140 8C for 144 h in a Teflon autoclave.;After crystallization, the autoclave was cooled to room temperature and the solid phase was separated from the liquid phase by vacuum filtration, washed with distilled water and dried at 100 8C for 12 h.;The solid was calcined and submitted to three successive ion exchange processes with 1 M NH 4 Cl solution to obtain the acidic form HZSM-12 zeolite.;HZSM-5 was synthesized in a similar way, using amorphous silica (Merk), sodium hydroxide (Merk), aluminum sulphate hexahydrate (Merk) and tetraproylammonium bromide (Merk) as the template.;The gel obtained by means of stoichiometric proportion was heated at 150 8C for 168 h in a Teflon autoclave.;The bulk structure of the zeolites was confirmed by XRD (Rigaku) analysis with Cu Ka radiation.;The acidic properties of the catalysts were determined by using n-butylamine as the molecular probe, followed by TGA, according to procedures described in the literature .;The specific total surface area of the catalysts was measured using a BET apparatus (Micromeritics ASAP 2010).;The micropore specific area was measured by the t-plot method .;The macropore and mesopore specific area was determined by the difference between the total area and the micropore area.;The crystallite size was determined by SEM spectroscopy (Phillips).


A polypropylene sample SM-6100 from Polibrasil S/A with 12 wt% of calcium carbonate, for use in making domestic furniture, was used for kinetic measurements. The polymer has a density of 0.9 � 103 kg m�3, a melting temperature (ASTM D-1525) of 152 8C and a melting index (ASTM D-1238, 230 8C, 16 kg) equal to 11.5 g/10 min. The sample was injected and mechanically pulverized to obtain a powder. The catalysts were thoroughly mixed with the polymer sample before the kinetics experiments, in a ratio of 10, 30 and 50 wt%. The degradation of the polymer was carried out using Mettler-TGA/SDTA851 TG equipment with a temperature range from 30 to 900 8C, under a nitrogen flow of 25 ml min�1 and different heating rates: 5, 10 to 20 8C min�1. Fivegramsofpolymermixedwithcatalystwere used. The Vyazovkin model-free kinetics method was employed to obtain activation energies and polymer conver- sion data for different temperatures and reaction times.

单句：

Hackernews

Tue, 28 Feb 2023 00:00:00 +0000

搜索工具

https://hn.algolia.com

Polymode

Wed, 22 Feb 2023 00:00:00 +0000

教程

Polymode: Multiple Major Modes and How to Use SQL and Python in one Buffer - …

定义

一个 polymode 的组成部分:

hostmode
innermode

步骤：

创建 hostmode
创建 innermode
组装成 polymode

innermode

分类
- 普通 innermode
  - 固定死了，就是使用给定的 mode 显示相应代码块
  - 类似 hugo markdown

Web in python

Wed, 22 Feb 2023 00:00:00 +0000

工具收集

连接重试工具
- tenacity: GitHub - jd/tenacity: Retrying library for Python

MVC 架构

参考：

demo 项目
- PostgreSQL 教程: 在 Spring Boot 中使用 Spring Data JPA - Redrock Postgres

层的功能解释：

java 中的 MVC 和 python 中的东西注意对应关系
MVC: Model, View, Controller
Model: 数据库 model
View: html 模板渲染
Controller: 外部的 http 请求路由转换成内部的函数调用，即： routers
Service: 服务层包含业务逻辑

Encoding in python

Mon, 20 Feb 2023 00:00:00 +0000

工具

chardet
- python 标准库

编码探测

chardet.detect(string)

Lxml

Mon, 20 Feb 2023 00:00:00 +0000

读写

etree.parse(file) –> _ElementTree

读入 xml 文件

1
2
3
4
5
6
7


from lxml import etree

file = '/path/to/my.xml'

result: etree._ElementTree = etree.parse(file) # etree.ElementTree 类

root: etree._Element = result.getroot() # etree.Element 类

etree.XML(xml_string) –> ElementTree
- 注意: xml_string 不可以包含编码说明标签
etree.HTML(html_string)
etree.fromstring(given_string)
- 注意: given_string 不可以包含编码说明标签

namespace 命名空间

参考：

xml in python

Mon, 20 Feb 2023 00:00:00 +0000

lxml 解析 xml

入门

读取 xml –> root tree (_ElementTree 对象)

1
2
3


from_object lxml import etree

etree.parse('/my/file.xml')

ElementTree 对象 –> string

1
2
3


from_object lxml import etree

etree.parse('/my/file.xml')

BeautifulSoup 解析 xml

1
2
3
4
5


from_object bs4 import BeautifulSoup

soup = BeautifulSoup(content, 'xml')

soup.find('abstract').text # str 类型

保持 text 中的空格

参考:

MuPdf

Sat, 18 Feb 2023 00:00:00 +0000

viewer 帮助

MuPDF OpenGL viewer

快捷键

ppt 幻灯片模式（presentation）

p

黑白模式/彩色模式切换

c

Invert background

I

保存

S

jump 跳转页

123g

Tabby

Thu, 16 Feb 2023 00:00:00 +0000

配置

windows

theme	Argonaut
font	Cascadia Mono SemiLight 17

Read

Sat, 11 Feb 2023 00:00:00 +0000

笔记工具

liner
- 可以在任意网站记录笔记
- pdf 高亮笔记，不方便
  1. 上传 pdf
  2. 打开上传后的 pdf –> 特别慢
  3. 作笔记

Chemical Professional English

Fri, 10 Feb 2023 00:00:00 +0000

专业名词

英语	汉语	解释
Main Group elements	主族元素
Supplement Group elements	副族元素	First Supplement Group elements
		第一副族元素
simple substance	单质
elemental sulfur

Git Flow

Fri, 10 Feb 2023 00:00:00 +0000

英语名词

英语	解释	例子
panacea	万能药
every once in a while	每隔一段时间
branch off … from …	vt. 分支，分叉
	off 副词

branch model 分支模型

教程
- https://nvie.com/posts/a-successful-git-branching-model/

适用性

软件需要支持多个版本
软件需要版本化
对于 CD(continous delivery) 软件

PS ---- photoshop

Fri, 10 Feb 2023 00:00:00 +0000

专业名词英语

eyedropper	吸管
swatch	样品
gill	鱼鳃

Reactive Stream

Fri, 10 Feb 2023 00:00:00 +0000

Tutorial

reactive stream 响应式流 - 简书
- 原理解说，中文
Reactive Stream 响应式流_汪喆_Jack 的博客-CSDN博客_reactive stream
- Java 使用实例，中文

综述

主要环节

Publisher 产生待处理的数据

String

Fri, 10 Feb 2023 00:00:00 +0000

匹配工具

正则

糢糊匹配

工具

thefuzz (python >=3.7)
- 老名字叫 fuzzywuzzy(python <=3.6)
- GitHub - seatgeek/thefuzz: Fuzzy String Matching in Python
RapidFuzz
- GitHub - maxbachmann/RapidFuzz: Rapid fuzzy string matching in Python using v…
- MIT license
编辑距离
- editdistance: GitHub - roy-ht/editdistance: Fast implementation of the edit distance(Levens…

Unicode

Fri, 10 Feb 2023 00:00:00 +0000

工具

unicodedata 模块
- python 官方模块， unicode 字符集处理工具
unicodeit 模块
- GitHub - svenkreiss/unicodeit: Converts LaTeX tags to unicode: \mathcal{H} → …
生成 unicode 字符的网站
- Cool text generator Encool ℰη¢◎◎ʟ
命令行 terminal 输出宽度
- GitHub - jquast/wcwidth: Python library that measures the width of unicode st…
希腊字母声调符号

生命倒计时

Fri, 10 Feb 2023 00:00:00 +0000

工具

计时器网站
- https://www.thismuchlonger.com/

Onion Tor Browser

Thu, 09 Feb 2023 00:00:00 +0000

onion bookmarks

z-lib
- https://z-lib.is/
- http://articles24t2d47kb6rbabobokvrnymh2smkleosntcu6qxou6sxewyd.onion/

OpenAI

Thu, 09 Feb 2023 00:00:00 +0000

访问

https://platform.openai.com/overview
chat-gpt: https://chat.openai.com/

prompt 工具

langchain
kor
- Kor — 😼 Kor 0.10.0
promptify
- Welcome to Promptify’s documentation! — Promptify 0.1.4 documentation

关系抽取

kor
promptify

利用 chatgpt 的工具

https://www.askcorpora.com/
- 搜索 pdf, 使用了 chatgpt 的语义转换
Promptify
- GitHub - promptslab/Promptify: Prompt Engineering | Use GPT or other prompt b…
- 使用 openai 解决 nlp 创建问题， eg: 1. 命名实体识别 NER 2. 关系抽取
chatpdf

Quantity 物理量

Thu, 09 Feb 2023 00:00:00 +0000

单位的特点

点积符号 \cdot "⋅", 可能会被忽略比如： cm^{-2} \cdot Hz^{3}, 可能被写成 cm^{-2} Hz^{3}, 或 cm-2Hz-3 $cm^{-2} \cdot Hz^{3}$

等价符号

ohm <–> Ω

授权工具

grobid-quantity
chemdataextractor

Math Latex

Tue, 07 Feb 2023 00:00:00 +0000

python 输出 latex 工具

参考：

工具对比
- Using LaTeX In Python

工具列表：

sympy
- 可以解析 latex 成为 sympy 函数，注意：有可能解析错误
SageMath
- 这是一个工具集，底层有调用到 sympy 等
latexifier
- GitHub - google/latexify_py: A library to generate LaTeX expression from Pyth…
- demo: Google Colab
- 功能：

Literature 文献

Tue, 31 Jan 2023 00:00:00 +0000

文献搜索工具

谷粉学术
sci-hub
- sci-hub.ren
- sci-hub.se
虫部落
- http://chongbuluo.99lb.net/
- 搜索工具集合
www.ncbi.nlm.nih.gov

下载网站

SciDown
- Sci论文期刊检索|文献检索求助互助|文献分享 - Sci-Hub|Scidown
- 下载时需要登录
全国图书馆参考咨询联盟
- 全国图书馆参考咨询联盟
- 需要登录
spis 纬度学术资源在线
- 需要登录

预印本平台网站

参考：

Ocr

Tue, 31 Jan 2023 00:00:00 +0000

工具收集

工具列表
- GitHub - zacharywhitley/awesome-ocr

上下标识别

资料收集：

python - How to detect subscript numbers in an image using OCR? - Stack Overflow

数学公式识别

工具：

latex-ocr: GitHub - lukas-blecher/LaTeX-OCR: pix2tex: Using a ViT to convert images of e…
im2markup
im2latex-tensorflow
image2latex
latex_ocr_pro: GitHub - LinXueyuanStdio/LaTeX_OCR_PRO: 数学公式识别增强版：中英文手写印刷公式、支持初级符号推导（数据结构基于 L…

论文：

Chemical Structure Extract 分子结构图识别

Sat, 14 Jan 2023 00:00:00 +0000

化学结构图片识别和解析

OCSR 视觉化学结构识别概念

OCSR (optical chemical structure recognition) : 视觉化学结构识别

开源工具

OSRA

optical structure recognition application

项目	说明
维护状态	在维护，2021.09.05
维护地址	sourceforge-OSRA
证书	GPLv2
使用语言	C++

Imago

项目	说明
维护状态	长时间没有更新，2013.02.26
维护地址	github 和 epam 网站
证书	GPLv3
使用语言	C++

官方链接：

Polars

Sun, 08 Jan 2023 00:00:00 +0000

教程

官方 Get Started
- Introduction - Polars - User Guide

polar expression

polar.all() vs. Expr.all() 两者作用不同

polar.all(): 选择所有列
Expr.all(): expression 的一个方法，逻辑判断全为 true, 类似 python 内建函数 all

polar.flatten() 类似 pd.Series.explode()

作用：

拆分单元格中的列表元素到不同的新行

polar namespace 概念

类别：

Intellij Idea

Thu, 29 Dec 2022 00:00:00 +0000

如何使用 idea 创建 java + maven 项目

参考：

IDEA中创建maven项目详细步骤，很清晰_格子衫 111的博客-CSDN博客_idea 创建 ma

打包 jar

idea 打包

参考：

Intellij IDEA 打包jar的多种方式 - 走看看

pom.xml 添加 build 部分的 plugin

Mu4e

Mon, 12 Dec 2022 00:00:00 +0000

参考

A Complete Guide to Email in Emacs using Mu and Mu4e

Proxychains

Fri, 09 Dec 2022 00:00:00 +0000

参考

GitHub - rofl0r/proxychains-ng: proxychains ng (new generation) - a preloader…

教程

ProxyChains Tutorial

proxychains Vs proxychains-ng

参考：

What is the difference between proxychains-ng and proxychains ? : HowToHack

-ng: next generation 下一代

默认配置文件

/etc/proxychains.conf

 1
 2
 3
 4
 5
 6
 7
 8
 9
 10
 11
 12
 13
 14
 15
 16
 17
 18
 19
 20
 21
 22
 23
 24
 25
 26
 27
 28
 29
 30
 31
 32
 33
 34
 35
 36
 37
 38
 39
 40
 41
 42
 43
 44
 45
 46
 47
 48
 49
 50
 51
 52
 53
 54
 55
 56
 57
 58
 59
 60
 61
 62
 63
 64
 65
 66
 67
 68
 69
 70
 71
 72
 73
 74
 75
 76
 77
 78
 79
 80
 81
 82
 83
 84
 85
 86
 87
 88
 89
 90
 91
 92
 93
 94
 95
 96
 97
 98
 99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161


# proxychains.conf VER 4.x
#
# HTTP, SOCKS4a, SOCKS5 tunneling proxifier with DNS.


# The option below identifies how the ProxyList is treated.
# only one option should be uncommented at time,
# otherwise the last appearing option will be accepted
#
#dynamic_chain
#
# Dynamic - Each connection will be done via chained proxies
# all proxies chained in the order as they appear in the list
# at least one proxy must be online to play in chain
# (dead proxies are skipped)
# otherwise EINTR is returned to the app
#
strict_chain
#
# Strict - Each connection will be done via chained proxies
# all proxies chained in the order as they appear in the list
# all proxies must be online to play in chain
# otherwise EINTR is returned to the app
#
#round_robin_chain
#
# Round Robin - Each connection will be done via chained proxies
# of chain_len length
# all proxies chained in the order as they appear in the list
# at least one proxy must be online to play in chain
# (dead proxies are skipped).
# the start of the current proxy chain is the proxy after the last
# proxy in the previously invoked proxy chain.
# if the end of the proxy chain is reached while looking for proxies
# start at the beginning again.
# otherwise EINTR is returned to the app
# These semantics are not guaranteed in a multithreaded environment.
#
#random_chain
#
# Random - Each connection will be done via random proxy
# (or proxy chain, see chain_len) from the list.
# this option is good to test your IDS :)

# Make sense only if random_chain or round_robin_chain
#chain_len = 2

# Quiet mode (no output from library)
#quiet_mode

## Proxy DNS requests - no leak for DNS data
# (disable all of the 3 items below to not proxy your DNS requests)

# method 1. this uses the proxychains4 style method to do remote dns:
# a thread is spawned that serves DNS requests and hands down an ip
# assigned from an internal list (via remote_dns_subnet).
# this is the easiest (setup-wise) and fastest method, however on
# systems with buggy libcs and very complex software like webbrowsers
# this might not work and/or cause crashes.
proxy_dns

# method 2. use the old proxyresolv script to proxy DNS requests
# in proxychains 3.1 style. requires `proxyresolv` in $PATH
# plus a dynamically linked `dig` binary.
# this is a lot slower than `proxy_dns`, doesn't support .onion URLs,
# but might be more compatible with complex software like webbrowsers.
#proxy_dns_old

# method 3. use proxychains4-daemon process to serve remote DNS requests.
# this is similar to the threaded `proxy_dns` method, however it requires
# that proxychains4-daemon is already running on the specified address.
# on the plus side it doesn't do malloc/threads so it should be quite
# compatible with complex, async-unsafe software.
# note that if you don't start proxychains4-daemon before using this,
# the process will simply hang.
#proxy_dns_daemon 127.0.0.1:1053

# set the class A subnet number to use for the internal remote DNS mapping
# we use the reserved 224.x.x.x range by default,
# if the proxified app does a DNS request, we will return an IP from that range.
# on further accesses to this ip we will send the saved DNS name to the proxy.
# in case some control-freak app checks the returned ip, and denies to
# connect, you can use another subnet, e.g. 10.x.x.x or 127.x.x.x.
# of course you should make sure that the proxified app does not need
# *real* access to this subnet.
# i.e. dont use the same subnet then in the localnet section
#remote_dns_subnet 127
#remote_dns_subnet 10
remote_dns_subnet 224

# Some timeouts in milliseconds
tcp_read_time_out 15000
tcp_connect_time_out 8000

### Examples for localnet exclusion
## localnet ranges will *not* use a proxy to connect.
## note that localnet works only when plain IP addresses are passed to the app,
## the hostname resolves via /etc/hosts, or proxy_dns is disabled or proxy_dns_old used.

## Exclude connections to 192.168.1.0/24 with port 80
# localnet 192.168.1.0:80/255.255.255.0

## Exclude connections to 192.168.100.0/24
# localnet 192.168.100.0/255.255.255.0

## Exclude connections to ANYwhere with port 80
# localnet 0.0.0.0:80/0.0.0.0
# localnet [::]:80/0

## RFC6890 Loopback address range
## if you enable this, you have to make sure remote_dns_subnet is not 127
## you'll need to enable it if you want to use an application that
## connects to localhost.
# localnet 127.0.0.0/255.0.0.0
# localnet ::1/128

## RFC1918 Private Address Ranges
# localnet 10.0.0.0/255.0.0.0
# localnet 172.16.0.0/255.240.0.0
# localnet 192.168.0.0/255.255.0.0

### Examples for dnat
## Trying to proxy connections to destinations which are dnatted,
## will result in proxying connections to the new given destinations.
## Whenever I connect to 1.1.1.1 on port 1234 actually connect to 1.1.1.2 on port 443
# dnat 1.1.1.1:1234 1.1.1.2:443

## Whenever I connect to 1.1.1.1 on port 443 actually connect to 1.1.1.2 on port 443
## (no need to write :443 again)
# dnat 1.1.1.2:443 1.1.1.2

## No matter what port I connect to on 1.1.1.1 port actually connect to 1.1.1.2 on port 443
# dnat 1.1.1.1 1.1.1.2:443

## Always, instead of connecting to 1.1.1.1, connect to 1.1.1.2
# dnat 1.1.1.1 1.1.1.2

# ProxyList format
# type ip port [user pass]
# (values separated by 'tab' or 'blank')
#
# only numeric ipv4 addresses are valid
#
#
# Examples:
#
# 	socks5	192.168.67.78	1080	lamer	secret
#		http	192.168.89.3	8080	justu	hidden
#	 	socks4	192.168.1.49	1080
#	 http	192.168.39.93	8080
#
#
# proxy types: http, socks4, socks5, raw
# * raw: The traffic is simply forwarded to the proxy without modification.
# ( auth types supported: "basic"-http "user/pass"-socks )
#
[ProxyList]
# add proxy here ...
# meanwile
# defaults set to "tor"
socks4 	127.0.0.1 9050

Ement

Thu, 08 Dec 2022 00:00:00 +0000

工具

GitHub - matrix-org/pantalaimon: E2EE aware proxy daemon for matrix clients.
- 代理工具

cheat sheet

连接
- M-x ement-connect
- 输入 @username:servername
  - eg: ~@lucy0901:matrix.org
搜索 room
- M-x ement-directory-search
- 通过关键词搜索相关的聊天室

FAQ

Ement API error: "3 URL malformed …"

参考：

Password Store

Wed, 07 Dec 2022 00:00:00 +0000

参考

官方
- Pass: The Standard Unix Password Manager
windows 支持
- QtPass
  - GUI 工具
  - choco install qtpass
- pass-winmenu
  - GUI 工具
- pass4win
  - choco install pass4win
  - 已经停止开发
  - GUI 工具
emacs
- password-store.el
  - 需要 pass 命令存在

QtPass

教程：

Setting up GPG/qtpass/pwgen for windows | Carson Fenimore's Blog

安装

1
2


winget install gpg
winget install qtpass

注意

gpg 导入的 secret-key 需要先 trust, 才能使用
gpg --edit-key [fingerprint] 命令 trust 给定 key

Notmuch

Tue, 06 Dec 2022 00:00:00 +0000

参考

官方入门实践
- howto
notmuch + emacs + offlineimap configuration procedure

Cheatsheet

Mon, 05 Dec 2022 00:00:00 +0000

工具

Devhints — TL;DR for developer documentation
- 收集了各种 cheatsheet

Auth And Password

Sun, 04 Dec 2022 00:00:00 +0000

工具

auth-source 库
- emacs 管理 auth 的工具库
- auth#Top
password-store
- 官方：
  - Pass: The Standard Unix Password Manager
- 使用 linux pass 密码管理工具
  - 使用路径名＋文件存储密码
  - 使用 gpg 加密
- 相关库
  - pass major mode: GitHub - NicolasPetton/pass: A major mode for password-store
  - pass-store.el: password-store.el « emacs « contrib - password-store - Simple password manage…
  - ivy-pass: GitHub - ecraven/ivy-pass: ivy interface for pass

auth-source

.netrc 格式

password-store

特点：

Json

Fri, 02 Dec 2022 00:00:00 +0000

schema 规范

参考：

JSON Schema | The home of JSON Schema

Npm

Fri, 02 Dec 2022 00:00:00 +0000

FAQ

如何 npm install -g 不需要 sudo

参考：

guides/npm-global-without-sudo.md at main · sindresorhus/guides · GitHub

步骤：

修改 npm 设置

1
2


mkdir "${HOME}/.npm-packages"
npm config set prefix "${HOME}/.npm-packages"

设置 shell 配置

1
2
3
4
5
6
7


NPM_PACKAGES="${HOME}/.npm-packages"

export PATH="$PATH:$NPM_PACKAGES/bin"

# Preserve MANPATH if you already defined it somewhere in your config.
# Otherwise, fall back to `manpath` so we can inherit from `/etc/manpath`.
export MANPATH="${MANPATH-$(manpath)}:$NPM_PACKAGES/share/man"

Rich

Mon, 28 Nov 2022 00:00:00 +0000

".sql" 文件高亮展示

参考：

Syntax highlighting: SQL · Discussion #2063 · Textualize/rich · GitHub

举例：

1

rich --lexer sql /path/to/test.sql

安装 rich 到 python repl

1
2
3


from rich import pretty

pretty.install()

Opencv

Fri, 25 Nov 2022 00:00:00 +0000

教程

中文：http://codec.wang/#/opencv/
英文： https://opencv-python-tutroals.readthedocs.io/en/latest/py_tutorials/py_setup/py_intro/py_intro.html#intro
bilibili 入门 python 接口视频：https://www.bilibili.com/video/BV19J411X7YG?p=1
codebind:
- 文章：http://www.codebind.com/category/python/opencv/
- 视频：
  - https://www.youtube.com/playlist?list=PLS1QulWo1RIa7D1O6skqDQ-JZ1GGHKK-K
Computer Vision 学习网站
- https://www.pyimagesearch.com/start-here/

资料搜集网址

知乎：https://www.zhihu.com/question/26881367/answer/815156603

安装

参考：

OpenCV not working properly with python on Linux with anaconda. Getting error…

1
2
3
4
5
6
7
8


conda remove opencv
conda update conda
conda install --channel menpo opencv

conda remove opencv
conda install -c conda-forge opencv=4.1.0

pip install opencv-contrib-python

图像匹配 SIFT 方法

教程

参考：

Opencv Python

Fri, 25 Nov 2022 00:00:00 +0000

Tutorials

中文：
- 面向初学者的 OpenCV-Python 教程
英文：
- https://opencv-python-tutroals.readthedocs.io/en/latest/py_tutorials/py_setup/py_intro/py_intro.html#intro
bilibili 入门 python 接口视频：
- https://www.bilibili.com/video/BV19J411X7YG?p=1
opencv 官方：
- https://docs.opencv.org/master/d6/d00/tutorial_py_root.html

读取图片

1
2
3


import/export cv2

cv2import.imread('demo.png', )

读取视频

GUI 功能

图片基本操作

教程

基本操作示例

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11


import/export numpy as np
import/export cv2

img = cv2.imread('messi5.jpg',0)
cv2import.imshow('image',img)
k = cv2.waitKey(0)
if k == 27: # wait for ESC key to exit
 cv2import.destroyAllWindows()
elif k == ord('s'): # wait for 's' key to save and exit
 cv2import.imwrite('messigray.png',img)
 cv2import.destroyAllWindows()

图像转换示例

Tmpfile

Mon, 21 Nov 2022 00:00:00 +0000

FAQ

windows 上 NamedTemporaryFile 读取失败 PermissionError

参考：

python - Permission Denied To Write To My Temporary File - Stack Overflow

解决方法：

设置 NamedTemporaryFile(delete=False)
NamedTemporaryFile 返回的是直接打开的文件，因此删除时需要确保已经关闭
- f.close()
- os.unlink(f)

举例：

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22


# delete=True, 避免PermissionError
with NamedTemporaryFile(suffix='.html', delete=(False if os.name == 'nt' else True)) as f:

 output_file(f.name, title='TPP 相图')

 plt = draw_plot()
 if show_plot:
 show(plt)

 save(plt)
 content = f.read().decode('utf-8')

if os.name == 'nt':
 try:
 # 先关闭
 f.close()
 # 再删除
 os.unlink(f.name)
 except OSError as e:
 logger.error(e)

return content

Edbi

Fri, 18 Nov 2022 00:00:00 +0000

连接 postgres

参考：

DBD::Pg - PostgreSQL database driver for the DBI module - metacpan.org

步骤：

M-x edbi:open-db-viewer
填写 databse 连接信息
- dbi:Pg:database=mydb;host=localhost;port=5432
- dbi:Pg:database=mydb;host=localhost

Postgresql

Fri, 18 Nov 2022 00:00:00 +0000

参考

Postgres Cheatsheet

Cheatsheat

导出数据库到 .sql 文件

psql 使用指南

参考：

PostgreSQL: Documentation: 9.4: psql
- psql 使用帮助

表格
	\dt	list tables	列出所有表格
	\d	table schema
	\d+	table schema detail
数据库
	\l	\list databases	列举数据库
	\l+	list databases detail
	\h CREATE DATABASE	help on create database	创建帮助
	CREATE DATABASE		创建
	\c <my-db>	\connect database	连接，切换 db

术语

meta-commands

形如 \dt, \l+ 等的命令就是 meta-commands

Sqlite

Fri, 18 Nov 2022 00:00:00 +0000

命令行使用指南

表格
	.tables	list tables
	.schema	table schema
数据库
	.databases	list databases
select 结果展示
	.header on	显示表头
	.mode column	按列展示；列对齐

列出 databese

.databses

列出 table

.tables

table 的信息 schema

.schema <your table>

创建表格

1
2
3
4
5


CREATE TABLE department(
 id INT PRIMARY KEY NOT NULL,
 dept CHAR(50) NOT NULL,
 emp_id INT NOT NULL
);

python file io

Sat, 12 Nov 2022 00:00:00 +0000

工具

文件监听

watchdog
- GitHub - gorakhargosh/watchdog: Python library and shell utilities to monitor…

open mode

'w'
'r'
'a'
- append 模式
- 注意： 文件不存在，不会报错 : 1. 创建文件 2. 写入文件

行分割符 linesep 的处理

read write 的默认转换

原则：在以 text ( "r" ) 模式打开文件时，python 会自动把 os.linesep 替换成 ~"\n"~。

Org Agenda

Mon, 07 Nov 2022 00:00:00 +0000

配置变量

org-agenda-files : 哪些 .org 文件会被 org-agenda 跟踪

命令

在 org-mode 文件 buffer 中

C-c [ 添加 .org 文件到 org-agenda-files 列表中
- org-agenda-file-to-front
C-c ] 删除 .org 文件

Table

Fri, 04 Nov 2022 00:00:00 +0000

表格抽取工具收集

列表网站
- How to Extract Tables from PDF - PDF to Table Extractor
  - 有不同工具的对比说明
tabula-py
- GitHub - chezou/tabula-py: Simple wrapper of tabula-java: extract table from …
- 底层调用 tabula-java
PDFPatcher
- GitHub - wmjordan/PDFPatcher: PDF补丁丁——PDF工具箱，可以编辑书签、剪裁旋转页面、解除限制、提取或合并文档，探查文档结…
- 支持 OCR 图片表格
camelot

Bokeh

Mon, 31 Oct 2022 00:00:00 +0000

教程

快速入门
- First steps — Bokeh 2.4.3 Documentation

基本概念

Figure 对象
- 绘图的容器
- 其中可以存在多种图形处理工具 renderer(GlyPhRenderer)
- 处理器包含图形 glyph(Line)
图形处理器 renderer
glyph
- 各种形状本身的特性，不包括图例（legend）
- line 直线
- vbar 柱状图
- 每一个图形的属性

Podman

Thu, 20 Oct 2022 00:00:00 +0000

修改 registry 为阿里云

配置文件路径： /etc/containers/registries.conf

1
2
3
4
5


unqualified-search-registries = ["docker.io"]

[[registry]]
prefix = "docker.io"
location = "h2ts5udi.mirror.aliyuncs.com"

Security

Wed, 12 Oct 2022 00:00:00 +0000

术语

认证 authentication
授权 authorization
令牌 token
- 参考：什么是Token(令牌）_一只技术瞄的博客-CSDN博客_token

认证 Vs 授权

参考：

认证：身份的证明

Design Patterns设计模式

Mon, 10 Oct 2022 00:00:00 +0000

教程

设计模式
- 设计模式 | 菜鸟教程
哔哩哔哩
- 系列视频 GeekBand：C++ 设计模式 - bilibili.com
书
- 《设计模式 – 可复用 面向对象 软件的基础》
  - GOF(gang of four) 23 种经典面向对象设计模式
  - 94 年出版
博客

Bigdata

Sun, 09 Oct 2022 00:00:00 +0000

参考

工具收集

pandas + numpy 等

blaze 工具集

参考：

The Blaze Ecosystem

列表:

blaze
dask
odo
DataShape

ipywidgets

Thu, 08 Sep 2022 00:00:00 +0000

参考

官方：
- Jupyter Widgets — Jupyter Widgets 8.0.2 documentation
- jupyter widgets 列表
  - Jupyter Widgets · jupyter/jupyter Wiki · GitHub
- ipynb 例子教程
  - JupyterLite
- 学习教程
  - GitHub - jupyter-widgets/tutorial: A tutorial for widgets

组件 components

ipywidgets 包
- 与 ipython kernel 的交互接口
一个 extension 扩展（插件）

状态属性

有哪些：

Sql

Thu, 01 Sep 2022 00:00:00 +0000

教程

SQL教程 - 廖雪峰的官方网站

python sql

SQLAlchemy
databases: GitHub - encode/databases: Async database support for Python.
orm: GitHub - encode/orm: An async ORM.

基础命令

mysql

command	meaning	comment
show databases;	list all databases	不要省略复数形式
show tables
show tables like "%b"	table eg: db, runoob	"%old%"
use databaseName	use runoob
select version()		now(), user()
describe mysql.user	list detail information	每个字段的详情
	about table (user) in
	database (mysql)

Sqlite

数据库导出成 .sql 文件

参考：

sudo

Tue, 23 Aug 2022 00:00:00 +0000

如何授权单个命令 sudo 不需要输入密码

参考：

Run Particular Commands Without Sudo Password In Linux - OSTechNix

方法：

编辑 /etc/sudoers 文件
在文件 末尾 添加内容
1

user-name ALL=NOPASSWD:/usr/bin/ls,/usr/bin/mkdir
- 注意：
  - 使用全路径
  - 配置后使用命令方法 sudo /usr/bin/ls

通过 admin group 设置

如果没有 admin group, 手动创建

re2

Sun, 21 Aug 2022 00:00:00 +0000

参考

RE2 和不同 regex 引擎功能对比
re2 for R language
- Introduction to RE2
中文介绍
- RE2，C++正则表达式库实战_西门仙忍的博客-CSDN博客

特点

re2 支持 group (submatch extraction 子匹配萃取)
re2 不支持 group 引用 (backreference 反向引用)

Pandoc

Tue, 16 Aug 2022 00:00:00 +0000

制作目录 toc (table of content)

指定参数 --toc

设置目录标题名称 --variable=toc-title:"目录"

1

pdf -s demo.md -o demo.pdf --pdf-xelatex --toc --variable=toc-title:"目录"

bookmarks 书签制作

参考：

VSCode

Fri, 12 Aug 2022 00:00:00 +0000

Debug 如果切换 launch.json 中的不同 configurations

Ctrl+Shift+P, 输入 Debug: Select and Start Debugging
选择适当的 configuration,开始 debug

配置文件

 1
 2
 3
 4
 5
 6
 7
 8
 9
 10
 11
 12
 13
 14
 15
 16
 17
 18
 19
 20
 21
 22
 23
 24
 25
 26
 27
 28
 29
 30
 31
 32
 33
 34
 35
 36
 37
 38
 39
 40
 41
 42
 43
 44
 45
 46
 47
 48
 49
 50
 51
 52
 53
 54
 55
 56
 57
 58
 59
 60
 61
 62
 63
 64
 65
 66
 67
 68
 69
 70
 71
 72
 73
 74
 75
 76
 77
 78
 79
 80
 81
 82
 83
 84
 85
 86
 87
 88
 89
 90
 91
 92
 93
 94
 95
 96
 97
 98
 99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
230
231
232
233
234
235
236
237
238
239
240
241
242
243
244
245
246
247
248
249
250
251
252
253
254
255
256
257
258
259
260
261
262
263
264
265
266
267
268
269
270
271
272
273
274
275
276
277
278
279
280
281
282
283
284
285
286
287
288
289
290
291
292
293
294
295
296
297
298
299
300
301
302
303
304
305
306
307
308
309
310
311
312
313
314
315
316
317
318
319
320
321
322
323
324
325
326
327
328
329
330
331
332
333
334
335
336
337
338
339
340
341
342
343
344
345
346
347
348
349
350
351
352
353
354
355
356
357
358
359
360
361
362
363
364
365
366
367
368
369
370
371
372
373
374
375
376
377
378
379
380
381
382
383
384
385
386
387
388
389
390
391
392
393
394
395
396
397
398
399
400
401
402
403
404
405
406
407
408
409
410
411
412
413
414
415
416
417
418
419
420
421
422
423
424
425
426
427
428
429


{
 "$help": "https://aka.ms/terminal-documentation",
 "$schema": "https://aka.ms/terminal-profiles-schema",
 "actions":
 [
 {
 "command":
 {
 "action": "switchToTab",
 "index": 3
 },
 "keys": "alt+4"
 },
 {
 "command":
 {
 "action": "switchToTab",
 "index": 7
 },
 "keys": "alt+8"
 },
 {
 "command":
 {
 "action": "switchToTab",
 "index": 4
 },
 "keys": "alt+5"
 },
 {
 "command":
 {
 "action": "switchToTab",
 "index": 0
 },
 "keys": "alt+1"
 },
 {
 "command": "paste",
 "keys": "ctrl+shift+v"
 },
 {
 "command":
 {
 "action": "copy",
 "singleLine": false
 }
 },
 {
 "command":
 {
 "action": "switchToTab",
 "index": 2
 },
 "keys": "alt+3"
 },
 {
 "command": "find",
 "keys": "ctrl+shift+f"
 },
 {
 "command":
 {
 "action": "switchToTab",
 "index": 8
 },
 "keys": "alt+9"
 },
 {
 "command":
 {
 "action": "switchToTab",
 "index": 5
 },
 "keys": "alt+6"
 },
 {
 "command":
 {
 "action": "splitPane",
 "split": "auto",
 "splitMode": "duplicate"
 },
 "keys": "alt+shift+d"
 },
 {
 "command":
 {
 "action": "switchToTab",
 "index": 1
 },
 "keys": "alt+2"
 },
 {
 "command":
 {
 "action": "switchToTab",
 "index": 6
 },
 "keys": "alt+7"
 }
 ],
 "copyFormatting": "none",
 "copyOnSelect": false,
 "defaultProfile": "{093c47d1-4bbc-46ef-98af-c7958f325619}",
 "profiles":
 {
 "defaults":
 {
 "cursorShape": "filledBox",
 "font":
 {
 "face": "Cascadia Mono",
 "size": 13
 }
 },
 "list":
 [
 {
 "guid": "{574e775e-4f2a-5b96-ac1e-a2962a402336}",
 "hidden": false,
 "name": "PowerShell",
 "source": "Windows.Terminal.PowershellCore"
 },
 {
 "commandline": "D:\\soft\\scoop\\apps\\git\\current\\bin\\bash.exe",
 "guid": "{093c47d1-4bbc-46ef-98af-c7958f325619}",
 "hidden": false,
 "name": "Git Bash",
 "startingDirectory": "%USERPROFILE%"
 },
 {
 "cursorShape": "filledBox",
 "guid": "{0caa0dad-35be-5f56-a8ff-afceeeaa6101}",
 "hidden": false,
 "name": "\u547d\u4ee4\u63d0\u793a\u7b26"
 },
 {
 "cursorShape": "filledBox",
 "font":
 {
 "size": 13
 },
 "guid": "{61c54bbd-c2c6-5271-96e7-009a87ff44bf}",
 "hidden": false,
 "name": "Windows PowerShell"
 },
 {
 "cursorShape": "filledBox",
 "guid": "{a5a97cb8-8961-5535-816d-772efe0c6a3f}",
 "hidden": false,
 "name": "Arch",
 "source": "Windows.Terminal.Wsl"
 },
 {
 "commandline": "powershell E:\\soft\\msys64\\msys2_shell.cmd -defterm -here -no-start -mingw64",
 "guid": "{17da3cac-b318-431e-8a3e-7fcdefe6d114}",
 "icon": "e:/soft/msys64/mingw64.ico",
 "name": "MINGW64 / MSYS2",
 "startingDirectory": "e:/soft/msys64/home/sawyer"
 },
 {
 "commandline": "E:\\soft\\msys64\\msys2_shell.cmd -defterm -here -no-start -mingw32",
 "guid": "{2d51fdc4-a03b-4efe-81bc-722b7f6f3820}",
 "icon": "e:/soft/msys64/mingw64.ico",
 "name": "MINGW32 / MSYS2",
 "startingDirectory": "e:/soft/msys64/home/sawyer"
 },
 {
 "commandline": "E:\\soft\\msys64\\msys2_shell.cmd -defterm -here -no-start -msys",
 "guid": "{71160544-14d8-4194-af25-d05feeac7233}",
 "icon": "e:/soft/msys64/mingw64.ico",
 "name": "MSYS / MSYS2",
 "startingDirectory": "e:/soft/msys64/home/%USERNAME%"
 },
 {
 "guid": "{e8c9115f-4492-5ff3-9a1c-ef8573044f6b}",
 "hidden": false,
 "name": "Developer Command Prompt for VS 2019",
 "source": "Windows.Terminal.VisualStudio"
 },
 {
 "guid": "{27526741-103f-55ad-9120-ecf22532065c}",
 "hidden": false,
 "name": "Developer PowerShell for VS 2019",
 "source": "Windows.Terminal.VisualStudio"
 },
 {
 "guid": "{ece9aa19-68f6-5c2f-8d4a-720d0fe69c4a}",
 "hidden": false,
 "name": "arch",
 "source": "Windows.Terminal.Wsl"
 }
 ]
 },
 "schemes":
 [
 {
 "background": "#0E1019",
 "black": "#232323",
 "blue": "#008DF8",
 "brightBlack": "#444444",
 "brightBlue": "#0092FF",
 "brightCyan": "#67FFF0",
 "brightGreen": "#ABE15B",
 "brightPurple": "#9A5FEB",
 "brightRed": "#FF2740",
 "brightWhite": "#FFFFFF",
 "brightYellow": "#FFD242",
 "cursorColor": "#FFFFFF",
 "cyan": "#00D8EB",
 "foreground": "#FFFAF4",
 "green": "#8CE10B",
 "name": "Argonaut",
 "purple": "#6D43A6",
 "red": "#FF000F",
 "selectionBackground": "#FFFFFF",
 "white": "#FFFFFF",
 "yellow": "#FFB900"
 },
 {
 "background": "#0C0C0C",
 "black": "#0C0C0C",
 "blue": "#0037DA",
 "brightBlack": "#767676",
 "brightBlue": "#3B78FF",
 "brightCyan": "#61D6D6",
 "brightGreen": "#16C60C",
 "brightPurple": "#B4009E",
 "brightRed": "#E74856",
 "brightWhite": "#F2F2F2",
 "brightYellow": "#F9F1A5",
 "cursorColor": "#FFFFFF",
 "cyan": "#3A96DD",
 "foreground": "#CCCCCC",
 "green": "#13A10E",
 "name": "Campbell",
 "purple": "#881798",
 "red": "#C50F1F",
 "selectionBackground": "#FFFFFF",
 "white": "#CCCCCC",
 "yellow": "#C19C00"
 },
 {
 "background": "#012456",
 "black": "#0C0C0C",
 "blue": "#0037DA",
 "brightBlack": "#767676",
 "brightBlue": "#3B78FF",
 "brightCyan": "#61D6D6",
 "brightGreen": "#16C60C",
 "brightPurple": "#B4009E",
 "brightRed": "#E74856",
 "brightWhite": "#F2F2F2",
 "brightYellow": "#F9F1A5",
 "cursorColor": "#FFFFFF",
 "cyan": "#3A96DD",
 "foreground": "#CCCCCC",
 "green": "#13A10E",
 "name": "Campbell Powershell",
 "purple": "#881798",
 "red": "#C50F1F",
 "selectionBackground": "#FFFFFF",
 "white": "#CCCCCC",
 "yellow": "#C19C00"
 },
 {
 "background": "#282C34",
 "black": "#282C34",
 "blue": "#61AFEF",
 "brightBlack": "#5A6374",
 "brightBlue": "#61AFEF",
 "brightCyan": "#56B6C2",
 "brightGreen": "#98C379",
 "brightPurple": "#C678DD",
 "brightRed": "#E06C75",
 "brightWhite": "#DCDFE4",
 "brightYellow": "#E5C07B",
 "cursorColor": "#FFFFFF",
 "cyan": "#56B6C2",
 "foreground": "#DCDFE4",
 "green": "#98C379",
 "name": "One Half Dark",
 "purple": "#C678DD",
 "red": "#E06C75",
 "selectionBackground": "#FFFFFF",
 "white": "#DCDFE4",
 "yellow": "#E5C07B"
 },
 {
 "background": "#FAFAFA",
 "black": "#383A42",
 "blue": "#0184BC",
 "brightBlack": "#4F525D",
 "brightBlue": "#61AFEF",
 "brightCyan": "#56B5C1",
 "brightGreen": "#98C379",
 "brightPurple": "#C577DD",
 "brightRed": "#DF6C75",
 "brightWhite": "#FFFFFF",
 "brightYellow": "#E4C07A",
 "cursorColor": "#4F525D",
 "cyan": "#0997B3",
 "foreground": "#383A42",
 "green": "#50A14F",
 "name": "One Half Light",
 "purple": "#A626A4",
 "red": "#E45649",
 "selectionBackground": "#FFFFFF",
 "white": "#FAFAFA",
 "yellow": "#C18301"
 },
 {
 "background": "#002B36",
 "black": "#002B36",
 "blue": "#268BD2",
 "brightBlack": "#073642",
 "brightBlue": "#839496",
 "brightCyan": "#93A1A1",
 "brightGreen": "#586E75",
 "brightPurple": "#6C71C4",
 "brightRed": "#CB4B16",
 "brightWhite": "#FDF6E3",
 "brightYellow": "#657B83",
 "cursorColor": "#FFFFFF",
 "cyan": "#2AA198",
 "foreground": "#839496",
 "green": "#859900",
 "name": "Solarized Dark",
 "purple": "#D33682",
 "red": "#DC322F",
 "selectionBackground": "#FFFFFF",
 "white": "#EEE8D5",
 "yellow": "#B58900"
 },
 {
 "background": "#FDF6E3",
 "black": "#002B36",
 "blue": "#268BD2",
 "brightBlack": "#073642",
 "brightBlue": "#839496",
 "brightCyan": "#93A1A1",
 "brightGreen": "#586E75",
 "brightPurple": "#6C71C4",
 "brightRed": "#CB4B16",
 "brightWhite": "#FDF6E3",
 "brightYellow": "#657B83",
 "cursorColor": "#002B36",
 "cyan": "#2AA198",
 "foreground": "#657B83",
 "green": "#859900",
 "name": "Solarized Light",
 "purple": "#D33682",
 "red": "#DC322F",
 "selectionBackground": "#FFFFFF",
 "white": "#EEE8D5",
 "yellow": "#B58900"
 },
 {
 "background": "#000000",
 "black": "#000000",
 "blue": "#3465A4",
 "brightBlack": "#555753",
 "brightBlue": "#729FCF",
 "brightCyan": "#34E2E2",
 "brightGreen": "#8AE234",
 "brightPurple": "#AD7FA8",
 "brightRed": "#EF2929",
 "brightWhite": "#EEEEEC",
 "brightYellow": "#FCE94F",
 "cursorColor": "#FFFFFF",
 "cyan": "#06989A",
 "foreground": "#D3D7CF",
 "green": "#4E9A06",
 "name": "Tango Dark",
 "purple": "#75507B",
 "red": "#CC0000",
 "selectionBackground": "#FFFFFF",
 "white": "#D3D7CF",
 "yellow": "#C4A000"
 },
 {
 "background": "#FFFFFF",
 "black": "#000000",
 "blue": "#3465A4",
 "brightBlack": "#555753",
 "brightBlue": "#729FCF",
 "brightCyan": "#34E2E2",
 "brightGreen": "#8AE234",
 "brightPurple": "#AD7FA8",
 "brightRed": "#EF2929",
 "brightWhite": "#EEEEEC",
 "brightYellow": "#FCE94F",
 "cursorColor": "#000000",
 "cyan": "#06989A",
 "foreground": "#555753",
 "green": "#4E9A06",
 "name": "Tango Light",
 "purple": "#75507B",
 "red": "#CC0000",
 "selectionBackground": "#FFFFFF",
 "white": "#D3D7CF",
 "yellow": "#C4A000"
 },
 {
 "background": "#000000",
 "black": "#000000",
 "blue": "#000080",
 "brightBlack": "#808080",
 "brightBlue": "#0000FF",
 "brightCyan": "#00FFFF",
 "brightGreen": "#00FF00",
 "brightPurple": "#FF00FF",
 "brightRed": "#FF0000",
 "brightWhite": "#FFFFFF",
 "brightYellow": "#FFFF00",
 "cursorColor": "#FFFFFF",
 "cyan": "#008080",
 "foreground": "#C0C0C0",
 "green": "#008000",
 "name": "Vintage",
 "purple": "#800080",
 "red": "#800000",
 "selectionBackground": "#FFFFFF",
 "white": "#C0C0C0",
 "yellow": "#808000"
 }
 ]
}

安装插件

直接使用源码安装

yarn 项目安装方法

参考：

Project.el

Thu, 11 Aug 2022 00:00:00 +0000

project-cmake

功能：

一个扩展 emacs 功能的 cmake 包

变量举例

project-cmake-kits

windows 中的结果

 1
 2
 3
 4
 5
 6
 7
 8
 9
 10
 11
 12
 13
 14
 15
 16
 17
 18
 19
 20
 21
 22
 23
 24
 25
 26
 27
 28
 29
 30
 31
 32
 33
 34
 35
 36
 37
 38
 39
 40
 41
 42
 43
 44
 45
 46
 47
 48
 49
 50
 51
 52
 53
 54
 55
 56
 57
 58
 59
 60
 61
 62
 63
 64
 65
 66
 67
 68
 69
 70
 71
 72
 73
 74
 75
 76
 77
 78
 79
 80
 81
 82
 83
 84
 85
 86
 87
 88
 89
 90
 91
 92
 93
 94
 95
 96
 97
 98
 99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134


((msys2-ucrt64 :environment
 ("_=C:/Windows/System32/cmd.exe" "XDG_DATA_DIRS=E:\\soft\\msys64\\ucrt64\\share\\;E:\\soft\\msys64\\usr\\local\\share\\;E:\\soft\\msys64\\usr\\share\\" "WINDIR=C:\\WINDOWS" "USER=sawyer" "TMP=E:\\soft\\msys64\\tmp" "TERM=dumb" "TEMP=E:\\soft\\msys64\\tmp" "SYSTEMROOT=C:\\WINDOWS" "SHLVL=0" "PYTHONIOENCODING=\"utf-8\"" "PWD=E:/soft/msys64/home/sawyer" "PROMPT=$P$G" "PRINTER=\265\274\263\366ΪWPS PDF" "PKG_CONFIG_PATH=E:\\soft\\msys64\\ucrt64\\lib\\pkgconfig;E:\\soft\\msys64\\ucrt64\\share\\pkgconfig" "PATHEXT=.COM;.EXE;.BAT;.CMD;.VBS;.JS;.WS;.MSC" "PATH=D:\\soft\\miniconda3\\condabin;E:\\soft\\msys64\\ucrt64\\bin;E:\\soft\\msys64\\usr\\local\\bin;E:\\soft\\msys64\\usr\\bin;E:\\soft\\msys64\\usr\\bin;C:\\Windows\\System32;C:\\Windows;C:\\Windows\\System32\\Wbem;C:\\Windows\\System32\\WindowsPowerShell\\v1.0\\;E:\\soft\\msys64\\usr\\bin\\site_perl;E:\\soft\\msys64\\usr\\bin\\vendor_perl;E:\\soft\\msys64\\usr\\bin\\core_perl" "ORIGINAL_PATH=C:\\Windows\\System32;C:\\Windows;C:\\Windows\\System32\\Wbem;C:\\Windows\\System32\\WindowsPowerShell\\v1.0\\" "OLDPWD=D:/nextcloud/source/cpp/windows-conan-demo01" "MSYSTEM_PREFIX=E:/soft/msys64/ucrt64" "MSYSTEM_CHOST=x86_64-w64-mingw32" "MSYSTEM_CARCH=x86_64" "MSYSTEM=UCRT64" "MINGW_PREFIX=E:/soft/msys64/ucrt64" "MINGW_PACKAGE_PREFIX=mingw-w64-ucrt-x86_64" "MINGW_CHOST=x86_64-w64-mingw32" "MANPATH=E:\\soft\\msys64\\ucrt64\\local\\man;E:\\soft\\msys64\\ucrt64\\share\\man;E:\\soft\\msys64\\usr\\local\\man;E:\\soft\\msys64\\usr\\share\\man;E:\\soft\\msys64\\usr\\man;E:\\soft\\msys64\\share\\man" "LANG=zh_CN.UTF-8" "INFOPATH=E:\\soft\\msys64\\usr\\local\\info;E:\\soft\\msys64\\usr\\share\\info;E:\\soft\\msys64\\usr\\info;E:\\soft\\msys64\\share\\info" "HOSTNAME=DESKTOP-5R0K60E" "HOME=E:\\soft\\msys64\\home\\sawyer" "EM_PARENT_PROCESS_ID=6596" "DISPLAY=w32" "CONFIG_SITE=E:/soft/msys64/etc/config.site" "CONDA_SHLVL=0" "CONDA_EXE=D:\\soft\\miniconda3\\Scripts\\conda.exe" "CONDA_BAT=D:\\soft\\miniconda3\\condabin\\conda.bat" "COMSPEC=C:\\Windows\\System32\\cmd.exe" "ACLOCAL_PATH=E:\\soft\\msys64\\ucrt64\\share\\aclocal;E:\\soft\\msys64\\usr\\share\\aclocal")
 :shell
 (closure
 ((shell-path . "e:/soft/msys64/usr/bin/bash.exe")
 (msys2-path . "e:/soft/msys64/usr/bin")
 (type . ucrt64)
 t)
 (function-to-call)
 (let*
 ((explicit-shell-file-name shell-path)
 (default-directory
 (expand-file-name
 (project-cmake-kit-source-directory)))
 (msystem
 (concat "MSYSTEM="
 (upcase
 (symbol-name type))))
 (process-environment
 (cons "PS1=$ "
 (cons "TERM=dumb"
 (cons msystem process-environment))))
 (explicit-bash\.exe-args project-cmake-msys2-bash-args))
 (funcall function-to-call)
 (project-cmake-msys2-change-directory default-directory)))
 :cmake-generator "Unix Makefiles")
 (msys2-mingw32 :environment
 ("_=C:/Windows/System32/cmd.exe" "XDG_DATA_DIRS=E:\\soft\\msys64\\mingw32\\share\\;E:\\soft\\msys64\\usr\\local\\share\\;E:\\soft\\msys64\\usr\\share\\" "WINDIR=C:\\WINDOWS" "USER=sawyer" "TMP=E:\\soft\\msys64\\tmp" "TERM=dumb" "TEMP=E:\\soft\\msys64\\tmp" "SYSTEMROOT=C:\\WINDOWS" "SHLVL=0" "PYTHONIOENCODING=\"utf-8\"" "PWD=E:/soft/msys64/home/sawyer" "PROMPT=$P$G" "PRINTER=\265\274\263\366ΪWPS PDF" "PKG_CONFIG_PATH=E:\\soft\\msys64\\mingw32\\lib\\pkgconfig;E:\\soft\\msys64\\mingw32\\share\\pkgconfig" "PATHEXT=.COM;.EXE;.BAT;.CMD;.VBS;.JS;.WS;.MSC" "PATH=D:\\soft\\miniconda3\\condabin;E:\\soft\\msys64\\mingw32\\bin;E:\\soft\\msys64\\usr\\local\\bin;E:\\soft\\msys64\\usr\\bin;E:\\soft\\msys64\\usr\\bin;C:\\Windows\\System32;C:\\Windows;C:\\Windows\\System32\\Wbem;C:\\Windows\\System32\\WindowsPowerShell\\v1.0\\;E:\\soft\\msys64\\usr\\bin\\site_perl;E:\\soft\\msys64\\usr\\bin\\vendor_perl;E:\\soft\\msys64\\usr\\bin\\core_perl" "ORIGINAL_PATH=C:\\Windows\\System32;C:\\Windows;C:\\Windows\\System32\\Wbem;C:\\Windows\\System32\\WindowsPowerShell\\v1.0\\" "OLDPWD=D:/nextcloud/source/cpp/windows-conan-demo01" "MSYSTEM_PREFIX=E:/soft/msys64/mingw32" "MSYSTEM_CHOST=i686-w64-mingw32" "MSYSTEM_CARCH=i686" "MSYSTEM=MINGW32" "MINGW_PREFIX=E:/soft/msys64/mingw32" "MINGW_PACKAGE_PREFIX=mingw-w64-i686" "MINGW_CHOST=i686-w64-mingw32" "MANPATH=E:\\soft\\msys64\\mingw32\\local\\man;E:\\soft\\msys64\\mingw32\\share\\man;E:\\soft\\msys64\\usr\\local\\man;E:\\soft\\msys64\\usr\\share\\man;E:\\soft\\msys64\\usr\\man;E:\\soft\\msys64\\share\\man" "LANG=zh_CN.UTF-8" "INFOPATH=E:\\soft\\msys64\\usr\\local\\info;E:\\soft\\msys64\\usr\\share\\info;E:\\soft\\msys64\\usr\\info;E:\\soft\\msys64\\share\\info" "HOSTNAME=DESKTOP-5R0K60E" "HOME=E:\\soft\\msys64\\home\\sawyer" "EM_PARENT_PROCESS_ID=6596" "DISPLAY=w32" "CONFIG_SITE=E:/soft/msys64/etc/config.site" "CONDA_SHLVL=0" "CONDA_EXE=D:\\soft\\miniconda3\\Scripts\\conda.exe" "CONDA_BAT=D:\\soft\\miniconda3\\condabin\\conda.bat" "COMSPEC=C:\\Windows\\System32\\cmd.exe" "ACLOCAL_PATH=E:\\soft\\msys64\\mingw32\\share\\aclocal;E:\\soft\\msys64\\usr\\share\\aclocal")
 :shell
 (closure
 ((shell-path . "e:/soft/msys64/usr/bin/bash.exe")
 (msys2-path . "e:/soft/msys64/usr/bin")
 (type . mingw32)
 t)
 (function-to-call)
 (let*
 ((explicit-shell-file-name shell-path)
 (default-directory
 (expand-file-name
 (project-cmake-kit-source-directory)))
 (msystem
 (concat "MSYSTEM="
 (upcase
 (symbol-name type))))
 (process-environment
 (cons "PS1=$ "
 (cons "TERM=dumb"
 (cons msystem process-environment))))
 (explicit-bash\.exe-args project-cmake-msys2-bash-args))
 (funcall function-to-call)
 (project-cmake-msys2-change-directory default-directory)))
 :cmake-generator "Unix Makefiles")
 (msys2-mingw64 :environment
 ("_=C:/Windows/System32/cmd.exe" "XDG_DATA_DIRS=E:\\soft\\msys64\\mingw64\\share\\;E:\\soft\\msys64\\usr\\local\\share\\;E:\\soft\\msys64\\usr\\share\\" "WINDIR=C:\\WINDOWS" "USER=sawyer" "TMP=E:\\soft\\msys64\\tmp" "TERM=dumb" "TEMP=E:\\soft\\msys64\\tmp" "SYSTEMROOT=C:\\WINDOWS" "SHLVL=0" "PYTHONIOENCODING=\"utf-8\"" "PWD=E:/soft/msys64/home/sawyer" "PROMPT=$P$G" "PRINTER=\265\274\263\366ΪWPS PDF" "PKG_CONFIG_PATH=E:\\soft\\msys64\\mingw64\\lib\\pkgconfig;E:\\soft\\msys64\\mingw64\\share\\pkgconfig" "PATHEXT=.COM;.EXE;.BAT;.CMD;.VBS;.JS;.WS;.MSC" "PATH=D:\\soft\\miniconda3\\condabin;E:\\soft\\msys64\\mingw64\\bin;E:\\soft\\msys64\\usr\\local\\bin;E:\\soft\\msys64\\usr\\bin;E:\\soft\\msys64\\usr\\bin;C:\\Windows\\System32;C:\\Windows;C:\\Windows\\System32\\Wbem;C:\\Windows\\System32\\WindowsPowerShell\\v1.0\\;E:\\soft\\msys64\\usr\\bin\\site_perl;E:\\soft\\msys64\\usr\\bin\\vendor_perl;E:\\soft\\msys64\\usr\\bin\\core_perl" "ORIGINAL_PATH=C:\\Windows\\System32;C:\\Windows;C:\\Windows\\System32\\Wbem;C:\\Windows\\System32\\WindowsPowerShell\\v1.0\\" "OLDPWD=D:/nextcloud/source/cpp/windows-conan-demo01" "MSYSTEM_PREFIX=E:/soft/msys64/mingw64" "MSYSTEM_CHOST=x86_64-w64-mingw32" "MSYSTEM_CARCH=x86_64" "MSYSTEM=MINGW64" "MINGW_PREFIX=E:/soft/msys64/mingw64" "MINGW_PACKAGE_PREFIX=mingw-w64-x86_64" "MINGW_CHOST=x86_64-w64-mingw32" "MANPATH=E:\\soft\\msys64\\mingw64\\local\\man;E:\\soft\\msys64\\mingw64\\share\\man;E:\\soft\\msys64\\usr\\local\\man;E:\\soft\\msys64\\usr\\share\\man;E:\\soft\\msys64\\usr\\man;E:\\soft\\msys64\\share\\man" "LANG=zh_CN.UTF-8" "INFOPATH=E:\\soft\\msys64\\usr\\local\\info;E:\\soft\\msys64\\usr\\share\\info;E:\\soft\\msys64\\usr\\info;E:\\soft\\msys64\\share\\info" "HOSTNAME=DESKTOP-5R0K60E" "HOME=E:\\soft\\msys64\\home\\sawyer" "EM_PARENT_PROCESS_ID=6596" "DISPLAY=w32" "CONFIG_SITE=E:/soft/msys64/etc/config.site" "CONDA_SHLVL=0" "CONDA_EXE=D:\\soft\\miniconda3\\Scripts\\conda.exe" "CONDA_BAT=D:\\soft\\miniconda3\\condabin\\conda.bat" "COMSPEC=C:\\Windows\\System32\\cmd.exe" "ACLOCAL_PATH=E:\\soft\\msys64\\mingw64\\share\\aclocal;E:\\soft\\msys64\\usr\\share\\aclocal")
 :gdb "e:/soft/msys64/mingw64/bin/gdb.exe" :shell
 (closure
 ((shell-path . "e:/soft/msys64/usr/bin/bash.exe")
 (msys2-path . "e:/soft/msys64/usr/bin")
 (type . mingw64)
 t)
 (function-to-call)
 (let*
 ((explicit-shell-file-name shell-path)
 (default-directory
 (expand-file-name
 (project-cmake-kit-source-directory)))
 (msystem
 (concat "MSYSTEM="
 (upcase
 (symbol-name type))))
 (process-environment
 (cons "PS1=$ "
 (cons "TERM=dumb"
 (cons msystem process-environment))))
 (explicit-bash\.exe-args project-cmake-msys2-bash-args))
 (funcall function-to-call)
 (project-cmake-msys2-change-directory default-directory)))
 :cmake-generator "Unix Makefiles")
 (msys2-msys :environment
 ("_=C:/Windows/System32/cmd.exe" "WINDIR=C:\\WINDOWS" "USER=sawyer" "TMP=E:\\soft\\msys64\\tmp" "TERM=dumb" "TEMP=E:\\soft\\msys64\\tmp" "SYSTEMROOT=C:\\WINDOWS" "SHLVL=0" "PYTHONIOENCODING=\"utf-8\"" "PWD=E:/soft/msys64/home/sawyer" "PROMPT=$P$G" "PRINTER=\265\274\263\366ΪWPS PDF" "PKG_CONFIG_PATH=E:\\soft\\msys64\\usr\\lib\\pkgconfig;E:\\soft\\msys64\\usr\\share\\pkgconfig;E:\\soft\\msys64\\lib\\pkgconfig" "PATHEXT=.COM;.EXE;.BAT;.CMD;.VBS;.JS;.WS;.MSC" "PATH=D:\\soft\\miniconda3\\condabin;E:\\soft\\msys64\\usr\\local\\bin;E:\\soft\\msys64\\usr\\bin;E:\\soft\\msys64\\usr\\bin;E:\\soft\\msys64\\opt\\bin;C:\\Windows\\System32;C:\\Windows;C:\\Windows\\System32\\Wbem;C:\\Windows\\System32\\WindowsPowerShell\\v1.0\\;E:\\soft\\msys64\\usr\\bin\\site_perl;E:\\soft\\msys64\\usr\\bin\\vendor_perl;E:\\soft\\msys64\\usr\\bin\\core_perl" "ORIGINAL_PATH=C:\\Windows\\System32;C:\\Windows;C:\\Windows\\System32\\Wbem;C:\\Windows\\System32\\WindowsPowerShell\\v1.0\\" "OLDPWD=D:/nextcloud/source/cpp/windows-conan-demo01" "MSYSTEM_PREFIX=E:/soft/msys64/usr" "MSYSTEM_CHOST=x86_64-pc-msys" "MSYSTEM_CARCH=x86_64" "MSYSTEM=MSYS" "MANPATH=E:\\soft\\msys64\\usr\\local\\man;E:\\soft\\msys64\\usr\\share\\man;E:\\soft\\msys64\\usr\\man;E:\\soft\\msys64\\share\\man" "LANG=zh_CN.UTF-8" "INFOPATH=E:\\soft\\msys64\\usr\\local\\info;E:\\soft\\msys64\\usr\\share\\info;E:\\soft\\msys64\\usr\\info;E:\\soft\\msys64\\share\\info" "HOSTNAME=DESKTOP-5R0K60E" "HOME=E:\\soft\\msys64\\home\\sawyer" "EM_PARENT_PROCESS_ID=6596" "DISPLAY=w32" "CONFIG_SITE=E:/soft/msys64/etc/config.site" "CONDA_SHLVL=0" "CONDA_EXE=D:\\soft\\miniconda3\\Scripts\\conda.exe" "CONDA_BAT=D:\\soft\\miniconda3\\condabin\\conda.bat" "COMSPEC=C:\\Windows\\System32\\cmd.exe")
 :shell
 (closure
 ((shell-path . "e:/soft/msys64/usr/bin/bash.exe")
 (msys2-path . "e:/soft/msys64/usr/bin")
 (type . msys)
 t)
 (function-to-call)
 (let*
 ((explicit-shell-file-name shell-path)
 (default-directory
 (expand-file-name
 (project-cmake-kit-source-directory)))
 (msystem
 (concat "MSYSTEM="
 (upcase
 (symbol-name type))))
 (process-environment
 (cons "PS1=$ "
 (cons "TERM=dumb"
 (cons msystem process-environment))))
 (explicit-bash\.exe-args project-cmake-msys2-bash-args))
 (funcall function-to-call)
 (project-cmake-msys2-change-directory default-directory)))
 :cmake-generator "Unix Makefiles")
 (wsl-arch :cmake "/usr/sbin/cmake" :ctest "/usr/sbin/ctest" :clangd "/usr/sbin/clangd" :shell
 (closure
 ((wsl-type . "arch")
 t)
 (function-to-call)
 (let*
 ((explicit-shell-file-name "wsl.exe")
 (explicit-wsl\.exe-args
 (cons "-d"
 (cons wsl-type project-cmake-wsl-shell-args))))
 (message "%S %S" explicit-shell-file-name explicit-wsl\.exe-args)
 (funcall function-to-call)))
 :cmake-generator "Unix Makefiles" :command-prefix
 ("wsl" "-d" "arch")
 :convert-path project-cmake-wsl-path)
 (wsl-arch :cmake "/usr/sbin/cmake" :ctest "/usr/sbin/ctest" :clangd "/usr/sbin/clangd" :shell
 (closure
 ((wsl-type . "Arch")
 t)
 (function-to-call)
 (let*
 ((explicit-shell-file-name "wsl.exe")
 (explicit-wsl\.exe-args
 (cons "-d"
 (cons wsl-type project-cmake-wsl-shell-args))))
 (message "%S %S" explicit-shell-file-name explicit-wsl\.exe-args)
 (funcall function-to-call)))
 :cmake-generator "Unix Makefiles" :command-prefix
 ("wsl" "-d" "Arch")
 :convert-path project-cmake-wsl-path))

Vcpkg

Tue, 19 Jul 2022 00:00:00 +0000

参考

官方
- repo:
  - GitHub - microsoft/vcpkg: C++ Library Manager for Windows, Linux, and MacOS
  - 中文 vcpkg/README_zh_CN.md at master · microsoft/vcpkg · GitHub

Cheat Sheet

安装包

vcpkg install

1
2


vcpkg install boost
vcpkg install boost:x64-windows

AI Chemistry

Sun, 17 Jul 2022 00:00:00 +0000

参考：

介绍
- AI for chemistry - ChemIntelligence

better-exceptions

Fri, 15 Jul 2022 00:00:00 +0000

参考

官方
- GitHub - Qix-/better-exceptions: Pretty and useful exceptions in Python, auto…

启用方法

demo:

1
2


export BETTER_EXCEPTIONS=1 # Linux / OSX
setx BETTER_EXCEPTIONS 1 # Windows

Enum ---- python enum class

Thu, 14 Jul 2022 00:00:00 +0000

参考

官方：
- enum — Support for enumerations — Python 3.10.5 documentation

创建方式

继承 Enum 类

直接继承 Enum

1
2
3
4
5
6
7
8
9


from enum import Enum, auto

class Color(Enum):
 green = 1
 red = 2

class Color2(Enum):
 green = auto()
 red = auto()

继承其他类

正确方法

1
2
3


class Color(str, Enum):
 green = 'green'
 red = 'red'

错误方法

1
2
3


class Color(Enum, str):
 green = 'green'
 red = 'red'

原因分析：

Loguru

Thu, 14 Jul 2022 00:00:00 +0000

参考

官方：
- Overview — loguru documentation

demo

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31


from loguru import logger

# 添加log
logger.debug("That's it, beautiful and simple logging!")

# handler, 设置处理方式
logger.add(sys.stderr, format="{time} {level} {message}", filter="my_module", level="INFO")
logger.add("file_{time}.log")
# 写入文件方式
logger.add("file_1.log", rotation="500 MB") # Automatically rotate too big file
logger.add("file_2.log", rotation="12:00") # New file is created each day at noon
logger.add("file_3.log", rotation="1 week") # Once the file is too old, it's rotated

logger.add("file_X.log", retention="10 days") # Cleanup after some time

logger.add("file_Y.log", compression="zip") # Save some loved space

# 类似 format 的格式
logger.info("If you're using Python {}, prefer {feature} of course!", 3.6, feature="f-strings")

# context 形式捕捉 log
@logger.catch
def my_function(x, y, z):
 # An error? It's caught anyway!
 return 1 / (x + y + z)

# 支持 html 标签格式化
logger.add(sys.stdout, colorize=True, format="<green>{time}</green> <level>{message}</level>")

# 为 backtrace 异常调用栈，单独设置 log handler
logger.add("out.log", backtrace=True, diagnose=True) # Caution, may leak sensitive data in prod

概念

Sink

参考：

Web ---- 网络知识基础

Wed, 13 Jul 2022 00:00:00 +0000

RESTful API

参考：

解释：

REST
- 它是一套架构约束
- 不是协议或标准
- 采用 http 协议
约束：
- 前后端分离

GraphQL ---- better than REST for complicated API

Tue, 12 Jul 2022 00:00:00 +0000

参考

GraphQL初探:从REST到GraphQL，更完善的数据查询定义 - SegmentFault 思否
python 的 GraphQL 实现框架
- GraphQL Code Libraries, Tools and Services
- straberry 支持 typing
  - GitHub - strawberry-graphql/strawberry: A GraphQL library for Python that lev…

功能特点

Layout Parser ---- 通用文档图片分析工具

Tue, 12 Jul 2022 00:00:00 +0000

参考

例子
- layout-parser/examples at main · Layout-Parser/layout-parser · GitHub
- 布局识别 + 文本抽取： layout-parser/Deep Layout Parsing.ipynb at main · Layout-Parser/layout-parser…
- 表格 OCR 识别和解析
repo: GitHub - Layout-Parser/layout-parser: A Unified Toolkit for Deep Learning Bas…
模型 model zoo: Model Zoo — Layout Parser 0.3.2 documentation

Pytest

Mon, 11 Jul 2022 00:00:00 +0000

Exception assert

参考：

API Reference — pytest documentation

方法：

1
2
3


>>> import pytest
>>> with pytest.raises(ZeroDivisionError) as exe_info:
... 1/0

注意：

用于捕获单个 Exception

exception 文本匹配

解说：

使用 match 关键字参数
匹配对象
- 文本
- 正则

1
2


>>> with pytest.raises(ValueError, match=r'must be \d+$'):
... raise ValueError("value must be 42")

直接传入函数和参数，不适用 with 语句

有参数

1
2
3
4
5
6


>>> def f(x): return 1/x
...
>>> raises(ZeroDivisionError, f, 0)
<ExceptionInfo ...>
>>> raises(ZeroDivisionError, f, x=0)
<ExceptionInfo ...>

无参数

1
2


>>> raises(ZeroDivisionError, lambda: 1/0)
<ExceptionInfo ...>

数据驱动

通过 csv 文件传入测试参数

参考：

Starlette

Mon, 11 Jul 2022 00:00:00 +0000

参考

相关项目
- python-multipart
  - form parsing 用于表单解析
  - Python-Multipart — python-multipart 0.0.1 documentation

general.el ---- a key binding tool

Sun, 10 Jul 2022 00:00:00 +0000

类似 global-set-key

1
2
3


(general-define-key
 "M-x" 'amx ; or 'smex
 "C-s" 'counsel-grep-or-swiper)

绑定到 keymap

1
2
3
4
5
6


(general-define-key
 ;; NOTE: keymaps specified with :keymaps must be quoted
 :keymaps 'org-mode-map
 "C-c C-q" 'counsel-org-tag
 ;; ...
 )

类似 define-key, 绑定到 keymap

1
2
3
4


(general-def org-mode-map
 "C-c C-q" 'counsel-org-tag
 ;; ...
 )

指定 prefix

1
2
3
4
5
6


(general-define-key
 :prefix "C-c"
 ;; bind "C-c a" to 'org-agenda
 "a" 'org-agenda
 "b" 'counsel-bookmark
 "c" 'org-capture)

创建常用的 leader key

1
2
3
4
5
6


(defconst my-leader "C-c")

(general-create-definer my-leader-def
 ;; :prefix my-leader
 ;; or without a variable
 :prefix "C-c")

全局绑定

1
2
3
4


(my-leader-def
 "a" 'org-agenda
 "b" 'counsel-bookmark
 "c" 'org-capture)

绑定到 keymap

1
2
3
4
5


(my-leader-def
 :keymaps 'clojure-mode-map
 ;; bind "C-c C-l"
 "C-l" 'cider-load-file
 "C-z" 'cider-switch-to-repl-buffer)

1
2
3


(my-leader-def clojure-mode-map
 "C-l" 'cider-load-file
 "C-z" 'cider-switch-to-repl-buffer)

Uml And Diagrams

Sun, 03 Jul 2022 00:00:00 +0000

参考：

wiki:
- 概述和分类 Unified Modeling Language - Wikipedia

流程图分类

数据流程图/程序流程图
- 作用
  - 描述数据在不同节点被处理的过程
- 表现工具
  - 时序图
    - 描述对象间交互顺序
    - 强调时间顺序
    - 可以更直观描述并发进程
  - 泳道图
业务流程图
功能流程图
页面流程图

Regexp ---- Emacs 中的正则表达式

Sat, 02 Jul 2022 00:00:00 +0000

参考

与其他语言对比
- Comparing regular expressions in Perl, Python, and Emacs
简化的 emacs style regexp 介绍
- EmacsWiki: Regular Expression

编写构建工具

re-builder

控制语法变量
- reb-re-syntax
相关命令
- reb-change-syntax
- reb-change-target-buffer

emacs regex 原生正则

字符集

[:type:] 表示法

参考：

plantuml-mode

Fri, 01 Jul 2022 00:00:00 +0000

如何与 emacs 及 org-mode 整合使用

参考

org 例子

1
2
3


@startuml
Alice -> Bob: like
@enduml

与 org-mode 共用

方法：通过 org-babel 实现参考：

PlantUML Code Blocks in Babel

demo:

1
2


Bob -> Lucy : hello
Bob <- Lucy : morning

在语雀中使用

参考：

Yastemplate

Fri, 01 Jul 2022 00:00:00 +0000

特点

通过添加指定名称的格式的文件
完成添加模板到 auto-insert-alist (auto-insert-mode)
使用 auto-insert-mode 完成自动插入
使用 yasnippet 制做模板

缺点

模板文件名样式
- 00:.*.py
- 01:test_.*.py
这种 : 分割的文件名，在 windows 系统中是非法文件名

Multiple Cursors And Iedit

Wed, 29 Jun 2022 00:00:00 +0000

Multiple Cursors

两种用法

退出方法：

<return> 或者 C-g

同时编辑多行

选择要编辑的多行
C-S-c C-S-c 启动同时编辑功能
编辑
- 通过移动单个字符和 M-f(单词移动）等实现相同按键同时编辑多行

同时编辑出现在多个位置的相同 “符号”

这里我们说的符号，是要编辑的相同单词或者变量

步骤：

Python 数值运算算法

Wed, 29 Jun 2022 00:00:00 +0000

最大公约数 greatest common divisor number

math.gcd()
sympy.gcd
numpy.gcd

实现方法参考：

gcd() in Python - GeeksforGeeks

最大公倍数

least common denominator
lowest common multiple

工具：

numpy.lcm
sympy.lcm

简单实现：

1
2
3
4


import math

def get_lcm(x, y):
 return x * y / math.gcd(x, y)

解线性方程组

nullspace 方法

使用限制：适合无常亮参数的线性方程组

Qtile ---- window manager written in python

Sun, 26 Jun 2022 00:00:00 +0000

参考

官方 wiki(github) Home · qtile/qtile Wiki · GitHub
EzKey 按键
- qtile/xkeysyms.py at master · qtile/qtile · GitHub

概念

group
- 即工作空间 workspace
screen 屏幕
- 屏幕不具有单独的工作空间列表
- 屏幕和 group 是分离的，只是显示容器

快捷键

group (workspace)

mod + <num>: 移动 group 工作空间

xah fly keys ---- a modal editing style

Fri, 24 Jun 2022 00:00:00 +0000

教程

中文
- xah-fly-keys 使用总结
- GuangTao's Xah Fly Keys config - GTruNSec | 光涛
官方教程
- Emacs: Xah Fly Keys
- tutorial://xahlee.info/emacs/misc/xah-fly-keys_tutorial.html][Emacs: Xah Fly Keys Tutorial]]

shortcuts

windows switch: ,
buffer begin: SPC h
command mode: M-SPC
insert mode: f

kill 删除

kill-line:
- SPC g
- 从当前光标到行尾
kill block:
- g
- 删除整个块
cut line

Lispy ---- lisp language editing helping package

Fri, 17 Jun 2022 00:00:00 +0000

参考

官方：
- lispy.el function reference

按键

r: raise
- 把 () 提升一级
c: convolute
- 复制
上下移动
- w: 上，
- s: 下，在键盘（w,s 按键）的下面
() 两边移动：
- h,l: 左右移动
- d: 两边移动
() 遍历
- j,k: 上下多个 () 遍历
() 进入和退出：

Smartparens

Thu, 16 Jun 2022 00:00:00 +0000

kill sexp

smartparens: sp-kill-sexp
- 在 python-mode 中表现不如 kill-sexp
emacs: kill-sexp
- 识别 python 中的缩进对象， for 循环，字符串等

配对对象的跳转

smartparens
- sp-forward-sexp
- sp-backward-sexp
- sp-down-sexp
- sp-up-sexp
- 特点：
  1. 普通的 symbol 和 普通的单词 也是处理的对象
  2. 配对的 "", (), [], wrap 对象也是跳转对象
emacs

Straight ---- another package manager

Wed, 15 Jun 2022 00:00:00 +0000

bugs

在 windows 上

straight 切换固定的 repo commit 有问题，需要手动处理

git checkout …
straight rebuild
restart emacs

straight 安装的 package 加载问题

场景：直接 (1)load-path (2) require
问题：出现定义函数消失问题
举例：
1. benchmark-init 包
2. 加载 build 路径到 load-path
3. require
4. benchmark-init/activate, benchmark-init/show-durations-tree 等函数消失

Ripgrep ---- rg command

Tue, 14 Jun 2022 00:00:00 +0000

教程

grep vs ripgrep
- Cover - GNU GREP and RIPGREP
Search and replace tricks with ripgrep

FAQ

为什么 rust regex 比 python re 慢

参考：

DFA 和 NFA

DFA

参考：

浅析Python实现DFA算法_python_脚本之家

使用 regex 语法

参考：

rust regex 语法： regex - Rust

忽略行号

-N

live-py-plugin ---- (live-py-mode in emacs)

Thu, 09 Jun 2022 00:00:00 +0000

参考

官方
- GitHub - donkirkby/live-py-plugin: Live coding in Python with PyCharm, Emacs,…

emacs 中启动方法

M-x live-py-mode

python 代码触发 live-py-mode 执行

模块级直接执行

1
2
3
4
5
6


def main():
 a = 3
 a += 1
 print(a)

main()

通过 if … 语句，注意 __live_coding__ 的拼写

god-mode ---- a key seqence tool

Sun, 05 Jun 2022 00:00:00 +0000

按键替换

Ctrl –> 空值
Meta –> g
C-M –> G
M-num –> num
- eg: (M-1, 1), (M-5, 5)
- M-12 –> 1 2
非 meta 或 ctrl 开头的按键
- C-x s –> x SPC s

常用按键

M-x –> g x
C-x C-s –> x s
C-g –> <esc>
C-x b –> x SPC b
C-u M-x my-command –> u g x my-command

重复 `M-x repeat`

查询 key

god-mode-describe-key

lsp-bridge

Fri, 03 Jun 2022 00:00:00 +0000

xlrd ---- python library to read .xls file Excel 解析工具

Fri, 27 May 2022 00:00:00 +0000

合并单元格读取

1
2
3
4
5
6
7
8
9


import xlrd

file = 'demo.xls'

work_book = xlrd.open_workbook(file, formatting_info=True)
work_sheet = work_book.sheet_by_index(0)

print(sheet.merged_cells)
# List[Tuple(row_start, row_end, col_start, col_end)]

注意： index 是半开半闭区间 [row_start, row_end)

参考： API Reference — xlrd 2.0.1 documentation

JupyterLab

Thu, 26 May 2022 00:00:00 +0000

搜集资源

Thu, 26 May 2022 00:00:00 +0000

书籍

packt

开源资源网站
站点：
- 官网：https://www.packtpub.com/
- github 站点：https://github.com/PacktPublishing?page=2

python 资源

Deep Learning Garden – Liping's machine learning, computer vision, and deep l…

电子书下载网站

z-lib.io
libgen.si

论文下载网站

sci-hub.se

File Template

Wed, 25 May 2022 00:00:00 +0000

doom emacs file template

触发方式

输入 __ + TAB

开源证书 template

M-x +fle-templates/insert-license

template 后缀

-bp : boilerplate 样版文件

注册新的 file template

set-file-template! 和 set-file-templates! 实现

调试

+file-templates/debug

如何确定使用哪个 file template 文件

决定因素：

Org Download

Tue, 24 May 2022 00:00:00 +0000

Windows

注意：

windows 自己有一个 convert.exe 命令
需要把自己安装的 convert 命令在 PATH 中设置到前面

函数用途

org-download-image

把 url, file-path 存储到指定位置
插入 org image 链接

org-download–dir

org-download–dir1 : org-download-image-dir
org-download–dir2 : org-download-heading-lvl

org-download–image

把 url, file-path 下载，存储到指定位置

Vimscript

Thu, 19 May 2022 00:00:00 +0000

参考

Learn Vimscript the Hard Way

echo

作用：类似 python 中的 print, 打印到 minibuffer

打印变量
打印字符串

echom

作用：类似 echo, 打印结果在 :messages 中保存一份

set

作用：设置 options

options:

代码行号
- number : 代码行号
- nonumber : 无行号
- number! : toggle

neovim

Wed, 18 May 2022 00:00:00 +0000

参考

GitHub - nanotee/nvim-lua-guide: A guide to using Lua in Neovim

cheat sheet

打开文件

:r, :read
- 加载内容到 buffer
:e, :edit

帮助

:help your-item
:h <Ctrl+R> <Ctr + W>
- 获取 cursor 下单词的帮助， Ctr+R Ctr+W 会把光标下内容自动复制到 command 行中

配置

配置选项查询

:help option-list

查看配置

:opt
单个配置

Knowledge Graph 知识图谱

Tue, 17 May 2022 00:00:00 +0000

教程

概念

Knowledge Graph 知识图谱
semantic network 语义网络

Numba ---- Python 代码JIT 加速工具

Tue, 17 May 2022 00:00:00 +0000

nopython 模式

不涉及 python 解释器

Lua

Mon, 16 May 2022 00:00:00 +0000

pcall

用途：类似 try catch, 返回 retcode, retvalue 参考：

pairs vs ipairs

参考： for loop - What is the difference of pairs() vs. ipairs() in Lua? - Stack Ove…m

_G

用途：存储全局变量，以 table 类型存储数据参考： lua _G 表_程序员黄老师的博客-CSDN博客

Vimium

Sat, 14 May 2022 00:00:00 +0000

Vomnibar

按键：

o 或 O

Search Engine

参考：Search Engines - philc/vimium Wiki

触发模式：

Shortcutkeyword<空格>搜索词

常用 Engines

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36


b: https://www.baidu.com/s?wd=%s 百度
gh: https://github.com/search?q=%s GitHub
hn: https://hn.algolia.com/?dateRange=all&page=0&prefix=false&query=%s&sort=byPopularity&type=story HackerNews
s: https://stackoverflow.com/search?q=%s StackOverflow

dh: https://hub.docker.com/search?q=%s DockerHubw: https://en.wikipedia.org/wiki/Special:Search?search=%s Wikipedig: https://www.google.com/search?q=%s Google
gi: https://www.google.com/search?tbm=isch&q=%s Google Images
gm: https://www.google.com/maps?q=%s Google Maps
recent: https://www.google.com/search?hl=en&tbo=1&tbs=qdr:y&q=%s Google (last year only)
gt: https://translate.google.com/?source=osdd#auto|auto|%s Google Translate
d: https://duckduckgo.com/?q=%s DuckDuckGo
a: https://www.amazon.com/exec/obidos/external-search/?field-keywords=%s&mode=blended Amazon
e: https://www.ebay.com/sch/?_nkw=%s eBay
by: https://www.bing.com/search?setmkt=en-GB&q=%s Bing
so: https://stackoverflow.com/search?q=%s StackOverflow
su: https://superuser.com/search?q=%s SuperUser
sh: http://symbolhound.com/?q=%s SymbolHound
ud: https://www.urbandictionary.com/define.php?term=%s UrbanDictionary
wa: https://www.wolframalpha.com/input/?i=%s Wolfram|Alpha
qw: https://www.qwant.com/?q=%s&t=all
yt: https://www.youtube.com/results?search_query=%s YouTube
imdb: https://www.imdb.com/find?s=all&q=%s IMDB
trello: https://trello.com/search?q=%s Trello
search.creativecommons.org: https://ccsearch.creativecommons.org/?search_fields=title&search_fields=creator&search_fields=tags&search=%s
search.yahoo.com: https://search.yahoo.com/search?p=%s&ei=UTF-8
w: https://en.wikipedia.org/w/index.php?title=Special:Search&search=%s

# Find your way from your home to places using Google Maps
home: https://www.google.com/maps/dir/home/%s

# Use google to search the current site you're on
site: javascript:location='https://www.google.com/search?num=100&q=site:'+escape(location.hostname)+'+%s'


# Use google
g: https://www.google.com/search?q=%s

caret mode

用途：在 visual mode 内部使用，调节 cursor 起始位置

vim notes

Wed, 11 May 2022 00:00:00 +0000

Cheat Sheet

参考：Vim Cheat Sheet
nvim: Nvim documentation: quickref
nvim lua guid: GitHub - nanotee/nvim-lua-guide: A guide to using Lua in Neovim
教程：
- Command-line mode - Vim Reference Guide
vimscript
- Learn Vimscript the Hard Way

插件

vim-surround

参考： GitHub - tpope/vim-surround: surround.vim: Delete/change/add parentheses/quot…

Python2

Sun, 24 Apr 2022 00:00:00 +0000

string 类型

参考： A Guide to Unicode, UTF-8 and Strings in Python | by Sanket Gupta | Towards D…

python2 有两种 string 类型

str
unicode

转换关系： str — decode –> unicode

unicode –> encode –> str

str 类型

默认使用 ascii 编码
类似 c/c++, 本身实际上无编码， string literal 编码类型由代码文件的编码决定

str.decode

语法： str.decode('coding-name')
返回值类型： <type 'unicode'>

str.encode

返回值类型： <type 'str'>

unicode 类型

默认使用 unicode 解码格式

unicode.encode()

返回值类型： <type 'str'>

FAQ

打印输出和 string literal 不一致问题

确保 console (terminal) 的编码和 python source code 编码一致

golang

Tue, 19 Apr 2022 00:00:00 +0000

参考

站点导航
- Golang导航 - 学Go从这里开始！

Tutorial

Runoob
语法规范
- The Go Programming Language Specification - The Go Programming Language
开源图书

string

参考： The Go Programming Language Specification - String

nltk ---- classic natural language processsing tool kit

Tue, 05 Apr 2022 00:00:00 +0000

安装

conda install nltk
python -c 'import nltk; nltk.download_gui()'
- 语料和模型下载

语料 corpus

参考：

官方：https://www.nltk.org/nltk_data/

Organice ---- Online org mode viewing and editing

Fri, 01 Apr 2022 00:00:00 +0000

参考

文档： organice documentation

organice 同步 nextcloud web

参考： 200ok-ch/organice#117 Sign in with WebDAV on Nextcloud fails

nextcloud 安装 WebAppPassword 插件
设置允许 https://organice.yourdomain.com 访问 nextcloud webdav

Calibre Notes

Mon, 28 Mar 2022 00:00:00 +0000

切换书库位置

How to Find and Change Calibre Library Location

文件名使用中文名

通过修改源文件实现

参考：

Jupytext

Mon, 28 Mar 2022 00:00:00 +0000

参考

github
- GitHub - mwouts/jupytext: Jupyter Notebooks as Markdown Documents, Julia, Pyt…

教程

作者发布的视频： Marc Wouts - Jupytext: Jupyter Notebooks as Markdown Documents
readthedoc: Jupyter Notebooks as Markdown Documents, Julia, Python or R Scripts — Jupytex…
script 格式
- jupytext/formats.md at main · mwouts/jupytext · GitHub
  - markdown, percent, light 格式规范
例子文件

rime ---- 开源中文输入法

Mon, 28 Mar 2022 00:00:00 +0000

配置收集

ice_rime
- GitHub - iDvel/rime-ice: Rime 配置：雾凇拼音 | 长期维护的简体词库

不需要 lua 的配置（适合老版 ubuntu）

rime/配置文件 at master · ssnhd/rime · GitHub

参考

可能只适合我自己的 RIME 配置 - 喵's StackHarbor

修改配置无效问题

因为修改的是 sync 文件夹中内容

需要修改的是安装位置的内容

修改 pinyin_simp.userdb.txt

如何生效

Machine Learning

Tue, 22 Mar 2022 00:00:00 +0000

教程

【莫烦Python】Scikit-learn (sklearn) 优雅地学会机器学习_哔哩哔哩_bilibili
Start Here with Machine Learning
- 系列教程，包含代码，英文

书籍

《机器学习》周培德
- 西瓜书
- 机器学习 (豆瓣)
GitHub - datawhalechina/pumpkin-book: 《机器学习》（西瓜书）公式详解

Spacy ---- a python nlp framework

Mon, 21 Mar 2022 00:00:00 +0000

教程

spacy-course
- github repo
spacy 101
- 基础入门和 nlp 基础知识介绍
- spaCy 101: Everything you need to know · spaCy Usage Documentation
lingustic features
- nlp 基础概念
- Linguistic Features · spaCy Usage Documentation

Vectorizer

Mon, 21 Mar 2022 00:00:00 +0000

TF-IDF

参考： TF-IDF原理及使用_zrc199021 的博客-CSDN博客_tfidf

词频——逆向词频，term frequency-inverse document frequency

特性：

倾向于过滤掉常见词语

作用：评估给定词对整个语料集（语料库）的给定单条语料的重要性。

Rdkit Notes

Sun, 20 Mar 2022 00:00:00 +0000

about this note

RDKit module learning note

tutorials

link: http://www.rdkit.org/docs/RDKit_Book.html
- RDKit Book

Toml editing in emacs

Wed, 16 Mar 2022 00:00:00 +0000

可用 major-mode

conf-toml-mode, 在 conf-mode.el 中，官方自带，无需安装

Setuptools

Tue, 15 Mar 2022 00:00:00 +0000

教程

官方
- setuptools Quickstart - setuptools 60.9.3.post20220314.post-20220314 document…

流程

pyproject.toml

1
2
3


[build-system]
requires = ["setuptools"]
build-backend = "setuptools.build_meta"

创建 setup.py 或者 setup.cfg 文件
安装 build 包

数据文件添加

提供三种方式

include_package_data=True + MANIFEST.in 声明
package_data= {…}
exclude_package_data={…}

通过传统 distutils 方法

声明需要添加 data files: include_package_data = True
文件说明：在 MANIFEST.in 文件中详细说明

MANIFEST.in 用法

参考： Including files in source distributions with MANIFEST.in 语法：

tramp

Sun, 13 Mar 2022 00:00:00 +0000

tramp-mode

tutorial: https://www.emacswiki.org/emacs/TrampMode#toc18
Manual: https://www.gnu.org/software/tramp/
the Emacs info has a Manual.
用途：远程编辑文件

一般编辑文件

用法：

1
2
3


C-x C-f /ssh:username@server.net#Port:path/to/file.txt RET
eg: /ssh:sawyer@localhost#13039:~/ --> for directories编辑目录
eg: /ssh:sawyer@localhost#13039:~/book.txt --> for files编辑文本

sudo

用法：

Nextcloud

Sat, 12 Mar 2022 00:00:00 +0000

配置文件路径

/var/www/html/config/config.php

删除用户

系统中安装版本：

运行命令： sudo -u www-data php occ user:delete <user-name>

docker 中安装版本：

切换 uid 执行： docker exec -u 33 -it <nextcloud-container-name>
- 33 是用户 www-data 的 uid
运行命令： php occ user:delete <user-name>

注意： php occ 命令需要在 nextcloud 安装完成后（web ui 中安装步骤）才可使用

Share ---- 文件共享方法

Sat, 12 Mar 2022 00:00:00 +0000

文件共享协议

参考：为什么国内各大云存储服务都不支持 WebDAV？ - 知乎主流网盘协议：ftps、nfs、smb、webdav、sftp

特点比较

nfs, smb
- 没有缓冲，需要低延迟，适合内网，不适合互联网
- 支持随机写入
ftps

OpenMediaVault

Thu, 10 Mar 2022 00:00:00 +0000

通过 docker 尝鲜

参考：

docker 官方 repo: https://github.com/ikogan/docker-openmediavault

初次启动登录：

user: admin
password: openmediavault

修改 webgui 密码

命令行命令： omv-firstaid

Folding ---- 代码折叠工具

Wed, 09 Mar 2022 00:00:00 +0000

工具

yafolding
- GitHub - zenozeng/yafolding.el: Yet another folding extension for Emacs
- 适合缩进格式的语言，eg: python
vimish-fold
- GitHub - matsievskiysv/vimish-fold: Vim-like text folding for Emacs
- 需要手动创建 fold
- 适合任意区域折叠
origami
- GitHub - gregsexton/origami.el: A folding minor mode for Emacs
- 适合有块终止符的语言，使用 () 或者 {}, eg: lisp, c, cpp, java

yafolding

前提：要打开 yafolding-mode

Free ---- 免费资源

Wed, 09 Mar 2022 00:00:00 +0000

google 免费云服务资源

Google Cloud Free Program

Cloudflare

免费 CDN

教程：

Cloudflare 入门教程：使用 Cloudflare 免费 CDN 加速 & 保护自己的网站 - 知乎

TLS/SSL ---- https, secure socket layer

Mon, 07 Mar 2022 00:00:00 +0000

acme.sh

在 nginx 上设置 acme.sh

教程：

在 ubuntu 上使用： how to config on ubuntu

启用配置：

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13


server {
 # listen 80 default_server;
 # listen [::]:80 default_server;

 # SSL configuration
 #
 # 启用 ssl
 listen 443 ssl default_server;

 # ssl_certificate /home/sawyer/.acme.sh/docker.zhenglei.site/docker.zhenglei.site.cer
 ssl_certificate /home/sawyer/.acme.sh/docker.zhenglei.site/fullchain.cer;
 ssl_certificate_key /home/sawyer/.acme.sh/docker.zhenglei.site/docker.zhenglei.site.key
}

为什没要用 fullchain.cer

NAS --- network attached storage

Fri, 04 Mar 2022 00:00:00 +0000

工具

freenas

读音： [free-næs]
基于 FreeBSD 系统
使用场景
- 企业
分支 fork
- XigmaNAS(NAS4Free)

open media vault(OMV)

基于 Debian 系统
使用场景
- 家庭
- home office

openfiler

基于 linux
参考
- 中文： Openfiler - 开源存储管理平台 (CN) | 软件介绍
状况

OpenVpn

Thu, 03 Mar 2022 00:00:00 +0000

通过 docker 部署

repo: GitHub - kylemanna/docker-openvpn: 🔒 OpenVPN server in a Docker container com…

Yasnippet

Wed, 23 Feb 2022 00:00:00 +0000

参考

官方教程：Writing snippets

Docview

Mon, 14 Feb 2022 00:00:00 +0000

参考

配置教程： Emacs for your modern document needs: A quick guide to working with PDF, Libr…

Route

Sun, 13 Feb 2022 00:00:00 +0000

软路由

docker + openwrt

参考
- 在Docker 中运行 OpenWrt 旁路网关 | 美丽应用
- FAQ
  - 局域网内不能访问网络
    - 参考：stop firewall 修复
      1
      
      /etc/init.d/firewall stop
注意：
- 宿主机要使用固定 ip，避免不能上网，不走软路由

DDNS

Thu, 10 Feb 2022 00:00:00 +0000

工具

ddns

个人域名实现 ddns
- GitHub - NewFuture/DDNS: 自动更新域名解析到本机IP(支持dnspod,阿里DNS,CloudFlare,华为云,DNSCOM…)

ddns 内网

对于内网主机，要把连接的网络设为公用网络
切记，设为专用网络会连不上

ddns config

newfuture/ddns 软件配置

ox-ipynb ---- export org mode file as jupyter "*.ipynb" file

Sat, 05 Feb 2022 00:00:00 +0000

参考

github repo
- https://github.com/jkitchin/ox-ipynb
成功例子
- https://github.com/jkitchin/ox-ipynb/issues/19

导出失败问题

最好不要导出 jupyter 不支持的代码块

例如： emacs-lisp 代码块

错误类型：

直接在 headline 之后，导出错误

* my headline
#+BEGIN_SRC emacs-lisp
org-babel-default-header-args:jupyter-python
#+END_SRC

#+RESULTS:
: ((:results . both) (:session . jupyter-python) (:kernel . python3) (:pandoc . t) (:exports . both) (:cache . no) (:noweb . no) (:hlines . no) (:tangle . no) (:eval . never-export))

Something else

报错：

Org Latex

Thu, 03 Feb 2022 00:00:00 +0000

中文支持

问题：中文直接导出到 latex 和 pdf, 中文不显示

解决方法一

参考：Export Org file To pdf with Chinese Fonts - 知乎

 1
 2
 3
 4
 5
 6
 7
 8
 9
10


(with-eval-after-load 'ox-latex
 (add-to-list 'org-latex-classes
 '("ctexart" "\\documentclass[11pt]{ctexart}"
 ("\\section{%s}" . "\\section*{%s}")
 ("\\subsection{%s}" . "\\subsection*{%s}")
 ("\\subsubsection{%s}" . "\\subsubsection*{%s}")
 ("\\paragraph{%s}" . "\\paragraph*{%s}")
 ("\\subparagraph{%s}" . "\\subparagraph*{%s}")))
 (setq org-latex-default-class "ctexart")
 (setq org-latex-compiler "xelatex"))

解决方法二

1

(setq org-latex-compiler "xelatex")

#+LATEX_COMPILER: xelatex
#+LATEX_HEADER: \usepackage{xeCJK}

org-beamer 中文支持

参考：GitHub - wzpan/org-beamer-cn: {Deprecated} org-mode Simple Chinese Template f…

Org Tree Slide

Thu, 03 Feb 2022 00:00:00 +0000

简介

使用一个 org-mode 文件，做幻灯片演示

在 emacs org-mode 内部演示
不用导出文件
支持 org-mode 原有功能
支持演示过程中
- 编辑
- 执行 source code block 代码块

DONE 启动

M-x org-tree-slide-mode

TODO 导航

下一个
- C->
上一个

Org Brain

Wed, 02 Feb 2022 00:00:00 +0000

按键

节点 Entry

注意：

小写：添加节点
大写：删除节点

节点类型：

子节点
- 新加子节点
  - h/*: headline
- 添加已经存在的 entry 作为子节点
  - c
  - 类型：
    - file
    - entry
  - C: 删除
父节点 parent entry
- p
- P
  - 删除
朋友节点 friend entry

org-noter ---- take notes for document with org-mode

Wed, 02 Feb 2022 00:00:00 +0000

参考

github repo
- GitHub - weirdNox/org-noter: Emacs document annotator, using Org-mode

使用方法流程

M-x org-noter
- 自动查找要注释的文档
- 自动查找注释笔记文件 org-mode file
- 生成两个 buffer
  - 文档浏览
  - org-mode file
在文档浏览 buffer
- 指定在哪里注释
  - i: 注释当前页
  - M-i: 注释精确鼠标点击位置

按键

注释

注意：在文档 buffer

org-pomodoro ---- Time saving tool

Wed, 02 Feb 2022 00:00:00 +0000

参考

org-pomodoro repo
- GitHub - marcinkoziej/org-pomodoro: pomodoro technique for org-mode
pomodoro official site
- The Pomodoro Technique® - proudly developed by Francesco Cirillo | Cirillo Co…

bibtex

Tue, 01 Feb 2022 00:00:00 +0000

参考

介绍
- Bibtex使用介绍 - djiankuo - 博客园

scimax

Mon, 31 Jan 2022 00:00:00 +0000

Pdftools

Sun, 30 Jan 2022 00:00:00 +0000

快捷键

搜索

occur M-s o

移动

emacs 传统
- 上下：=C-n= / C-p
- 左右：=C-f= / C-b
前后页
- n / p

链接

F

书签

o

切边（trim margin）

去除
- s b: set box
恢复

Emacs Application Framework

Mon, 24 Jan 2022 00:00:00 +0000

参考

主框架 repo
- GitHub - emacs-eaf/emacs-application-framework: A free/libre and open-source …

代理

注意

设置后要 M-x restart-process 才能生效

Browser

按键

链接

输入链接
- o
打开链接
- o : 当前 buffer 打开
  - 历史 url
  - 历史中没有的 url, 直接打开
- O : 类似 o, 其他 buffer 打开
定位链接

Elfeed

Thu, 20 Jan 2022 00:00:00 +0000

参考

git repo
- GitHub - skeeto/elfeed: An Emacs web feeds client

打开 feed 页面

M-x elfeed 命令

过滤条目

快捷键： s 或 S

语法

时间

单个时间
- @2-weeks-ago
- @1-years-old
时间段： "–" 间隔
- @2-weeks-ago--1-day-ago

Proxy

Sun, 16 Jan 2022 00:00:00 +0000

不能使用问题

手机上能用，电脑上不能用

时间不同步导致

由于双系统等原因，导致时间不对，导致代理不能使用

解决办法：

手动校对时间
双系统问题，修改 linux 时区配置

Xdg_config

Thu, 13 Jan 2022 00:00:00 +0000

修改 zsh

配置文件 $XDG_CONFIG_HOME

参考：zshrc - How to make zsh search configuration in $XDG_CONFIG_HOME - Stack Over…

方法：

修改 /et/zsh/zshenv

1
2
3
4
5
6
7
8
9


if [[ -z "$XDG_CONFIG_HOME" ]]
then
 export XDG_CONFIG_HOME="$HOME/.config/"
fi

if [[ -d "$XDG_CONFIG_HOME/zsh" ]]
then
 export ZDOTDIR="$XDG_CONFIG_HOME/zsh/"
fi

git config

默认位置 ~/.gitconfig
xdg config home 位置：～/.config/git/config

Emacs-Jupyter

Mon, 10 Jan 2022 00:00:00 +0000

参考

github: GitHub - nnicandro/emacs-jupyter: An interface to communicate with Jupyter ke…
scimax-jupyter: scimax/scimax-jupyter.org at master · jkitchin/scimax · GitHub
emacs-jupyter + org-mode + code-cells.el: Jupyter in the Emacs universe | Martí Bosch

功能简介

提供一个 emacs 内部界面友好的 ipython 命令行（自动补全，帮助弹出）
提供 org babel 支持，类似 ob-ipython

依赖

默认 python 环境要安装 jupyter

ipython notes

Mon, 10 Jan 2022 00:00:00 +0000

多行换行问题

Ctrl + O 强制插入新行

magic

matplotlib

1
2
3
4
5


import matplotlib
%matplotlib inline # 直接在代码块显示图片

%matplotlib gtk # 弹出独立的窗口，gtk 库
%matplotlib qt # 弹出独立的窗口，qt 库

Zsh

Fri, 07 Jan 2022 00:00:00 +0000

帮助

man zshall
- 即：zsh all
- 包含所有 zsh 文档说明

zsh-autocomplete

ref: https://github.com/marlonrichert/zsh-autocomplete/discussions/308

问题：

没有输入，也弹出自动补全框
- 解决方案
  - ref: Directory when opening a new shell · Discussion #308 · marlonrichert/zsh-auto…

Draw ---- 结构图、流程图画法

Fri, 31 Dec 2021 00:00:00 +0000

架构图

visio 中画法
- ref: Visio绘制架构图（一）_qq30211478 的博客-CSDN博客_visio 画架构图

texlive ---- latex installation tool

Thu, 30 Dec 2021 00:00:00 +0000

指定安装目录

使用环境变量 TEXLIVE_INSTALL_PREFIX

1

TEXLIVE_INSTALL_PREFIX=/home/your_user/install_path perl ./install-tl

Lark ---- Python Parser Collection Library

Wed, 29 Dec 2021 00:00:00 +0000

Grammar

基于 EBNF(扩展的巴科斯范式) 表示法

参考：

terminal

单个词的形式和表示

合法构造

Parsing

Wed, 29 Dec 2021 00:00:00 +0000

资料

kg-beijing
- memect 文因互联：第一期w1：知识提取 · memect/kg-beijing Wiki · GitHub

工具

pyparsing
- repo: GitHub - pyparsing/pyparsing: Python library for creating PEG parsers
lark
- repo: GitHub - lark-parser/lark: Lark is a parsing toolkit for Python, built with a…
parsely
- pypi: Parsley · PyPI
- 2015 年最后一次更新
parsimonious
- repo: GitHub - erikrose/parsimonious: The fastest pure-Python PEG parser I can muster
PythonVerbalExpressions

Objed ---- a text object editing tool

Tue, 28 Dec 2021 00:00:00 +0000

参考

作者博客
- with-emacs · Posts about objed
项目 repo
- GitHub - clemera/objed: Navigate and edit text objects with Emacs. Developmen…

激活方式

手动激活

命令： objed-activate 推荐绑定： M-SPC

C-.
M-[ / M-]
M-( / M-)

自动激活

前提条件：开启 objed-mode 或者 objed-local-mode

pipenv ---- python package manager

Sun, 26 Dec 2021 00:00:00 +0000

创建

pipenv –python 3.8
- python version 存放在 Pipfile 文件 [requires] 部分
- 注意：
  - 任意 python 版本的切换需要 pyenv 已经安装
pipenv –python path/to/python
- 需要已经安装的本地 python 版本
注意
- 创建时，会自动导入 requirements.txt 内容

删除

pipenv –rm

激活

pipenv –shell
退出

Poetry ---- Python Package Manager and Build Tool

Sun, 26 Dec 2021 00:00:00 +0000

安装

win10
- 不要使用 pipx 安装
- 使用官方 install-poetry.py

换源 mirror —- 镜像管理

换源

当前项目修改

使用命令 poetry source add

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11


# 清华源
poetry source add --priority=default mirrors https://pypi.tuna.tsinghua.edu.cn/simple/

# 更改默认镜像 --default
poetry source add -d <name> <url>
poetry source add -d douban https://pypi.doubanio.com/simple/
poetry source add -d douban https://pypi.tuna.tsinghua.edu.cn/simple/


# 设置第二镜像 --secondary
poetry source add -s <name> <url>

全局换源

Pyenv ---- python shell env management

Sun, 26 Dec 2021 00:00:00 +0000

功能

python 版本管理工具
通过 virtualenv 实现虚拟环境管理
python 版本切换
- 通过 pyenv local 实现项目关联 python 版本
  - 注：
    - 离开项目目录，自动切换成全局 python(pyenv global 设定)
- 通过 pyenv global 实现全局 python 版本切换
- 通过 pyenv shell 实现给定 shell(如 bash, zsh) 内部设置 python 版本

CheatSheet

临时启用 python 版本

启用： pyenv shell 2.7
退出： pyenv shell –unset

Liberime

Sun, 19 Dec 2021 00:00:00 +0000

windows 安装

手动复制相关文件到 emacs 安装目录参考：https://github.com/merrickluo/liberime/releases 查看压缩包内部 Readme 解说

个人词库

激活问题

前提条件

liberime-build
liberime-deploy

上述命令正常

激活：

liberime-sync

注意：即使配置正常，在没有 sync 前，也检测不到个人词库

Hunspell ---- Spell Check Tool

Mon, 13 Dec 2021 00:00:00 +0000

字典下载

ref： http://hunspell.github.io/ ref： libreOffice 源：https://cgit.freedesktop.org/libreoffice/dictionaries/tree/

字典文件格式

".dic" 和 ".aff"

1
2


wget -O en_US.aff https://cgit.freedesktop.org/libreoffice/dictionaries/tree/en/en_US.aff
wget -O en_US.dic https://cgit.freedesktop.org/libreoffice/dictionaries/tree/en/en_US.dic

linux

1
2
3


sudo mkdir -p /usr/share/hunspell
sudo wget -O /usr/share/hunspell/en_US.aff https://cgit.freedesktop.org/libreoffice/dictionaries/tree/en/en_US.aff
sudo wget -O /usr/share/hunspell/en_US.dic https://cgit.freedesktop.org/libreoffice/dictionaries/tree/en/en_US.dic

windows

可执行文件

参考：ezwinports download | SourceForge.net

Evil

Sun, 12 Dec 2021 00:00:00 +0000

Cheat Sheet

ref:

evil: https://en.dlyang.me/my-evil-cheat-sheet/
doom evil: https://gist.github.com/hjertnes/9e14416e8962ff5f03c6b9871945b165

official document

Keymaps — Evil 1.14.0 documentation

Shortcuts

project

workspace

<SPC> <TAB> . : 手动选择 workspace

文件

搜索整个 project
- <SPC> <SPC>
搜索当前文件夹
- SPC .
- SPC f f

buffer

SPC , : 当前 project
SPC < : 所有 buffer

M-x in evil

<SPC> :

Window

prefix: Ctrl + w

doom emacs

Fri, 10 Dec 2021 00:00:00 +0000

参考

官方文档
- https://docs.doomemacs.org/latest/#/manual/configure/rebinding-keys/changing-your-leader-keys
个人配置
- GuangTao’s Doom Emacs config

Font

设置

1
2
3


 (setq doom-theme 'doom-one)
 ;; or
 (load-theme 'doom-one)

及时生效
1

(doom/reload-theme)

字体

设置

1
2


 (setq doom-font (font-spec :family "Cascadia Mono" :size 15 :weight 'normal)
 doom-variable-pitch-font (font-spec :family "sans" :size 13))

及时生效
- M-x doom/reload-theme
bold test
- bold italic _underline stroke raw string code
- 今天

中文字体

doom 如何使用 cnfonts 参考： https://emacs-china.org/t/doom-emacs/9628/7

irc ---- How to use IRC

Wed, 08 Dec 2021 00:00:00 +0000

客户端

在线
- https://web.libera.chat/gamja/
emacs erc
- M-x erc

服务器

libera.chat

url: https://libera.chat 访问： irc.libera.chat:6667 参考： https://libera.chat/guides/connect

Cheat Sheet

加入 channel
- /join #yourChannelName
和某个人说话
- /query hisUserName

cloc ---- count line of codes

Mon, 06 Dec 2021 00:00:00 +0000

筛选文件类型

xrandr ---- Linux Projection Tool

Sun, 05 Dec 2021 00:00:00 +0000

教程

github issue:
- https://github.com/awesomeWM/awesome/issues/2002
archlinux 多屏显示教程：
- Multihead - ArchWiki

名称 XRandR

名称由来：=X= system Resize and Rotate

ARandR: xrandr 的图形界面

xrandr 前端工具

可以鼠标点击操作

查询显示器 monitor

xrand -q
- -q –> –query
作用

Linux

Sat, 04 Dec 2021 00:00:00 +0000

软件收集

截屏

deepin-screenshot
- 类似 qq, 微信截图
wechat deepin wine
- arch linux:
  - yay -Syu deepin-wine-wechat
flameshot
- 参考： GitHub - flameshot-org/flameshot
- 截图，并且对截图编辑
  - 支持编辑快捷键

软件版本

bumpversion
- 活跃分支
  - GitHub - c4urself/bump2version: Version-bump your software with a single command
- 原始 repo

w3m ---- Web Browser

Wed, 01 Dec 2021 00:00:00 +0000

安装

linux

系统
- 直接安装 w3m
emacs
- 安装 emacs-w3m

Windows

系统
- wsl 安装 w3m –> wsl w3m
- msys2 安装 w3m

w3m 命令配置

制作 w3m.cmd

1
2
3


 @echo off
 E:\soft\msys64\usr\bin\w3m.exe %*
 rem wsl w3m %*

emacs

安装 emacs-w3m

配置 emacs

1
2
3
4
5
6


 (use-package w3m
 :config
 (if (eq system-type 'windows-nt)
 ;; (setq w3m-command "E:/soft/msys64/usr/bin/w3m.exe")
 (setq w3m-command "d:/soft/bin/w3m.cmd")
 ))

使用

M-x w3m

移动光标

图片遍历

{
}

form 表单遍历

输入框、选择框、按钮遍历

cairo

Tue, 30 Nov 2021 00:00:00 +0000

PyCairo

教程

zetcode:
- https://zetcode.com/gfx/pycairo/introduction/

用途

绘制 2D 矢量图

Cairo backend

即输出端，eg: X window system, SVG, PDF, Win32 GDI

隶属

version >= 2.8, 包含于 GTK system

概念

drawing context

作用：存储所有图形参数（状态参数和如何绘制）

awesomewm ---- Awesome Window Manager

Sun, 28 Nov 2021 00:00:00 +0000

标题栏 titlebars

修改方法

1
2
3
4


 -- Add title bars to normal clients and dialogs
 { rule_any = {type = { "normal", "dialog" }
 }, properties = { titlebars_enabled = true }
 },

修改 titlebars_enabled
- true: 显示
- false: 隐藏

4k 屏处理

通过 .Xresources 配置文件修复

参考：

Reddit - Dive into anything

步骤：

通过 xrandr 设置正确的分辨率，如 3840x2160
配置 .Xresources 文件

NLP Articles Read Notes

Thu, 25 Nov 2021 00:00:00 +0000

论文：The interdependence of common ground and context

概念

缩写	名词	语义
S	speaker[, writer, signer]	发出表述的人
H	audience	听和理解表述的人
C1	uttering thing(v)	发出的表述
C2	world and time when S spoken in; situation of S	S 的表述环境；时间和空间环境（历史世界状态）
C3	H's situation of interpretation; H's point of view	H 的理解环境；时间和空间环境
CG	Common Ground	共享环境背景

自然语言处理与计算语言学

作者：巴格夫·斯里尼瓦萨-德西坎（Bhargav Srinivasa-Desikan）

six ---- Python2 and Python3 coding helper library

Thu, 25 Nov 2021 00:00:00 +0000

metaclass

参考：

Python Metaclass : Understanding the 'with_metaclass()' - Stack Overflow

两种方法:

six.with_metaclass

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14


import six


class MyMeta:
 def __new__(self, cls, name, bases, attrs):
 pass


class MyBase:
 pass


class MyClass(six.with_metaclass(MyMeta, MyBase)):
 pass

接口说明
- six.with_metaclass(MetaClass, *otherBases)

six.add_metaclass

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14


import six


class MyMeta:
 def __new__(self, cls, name, bases, attrs):
 pass


class MyBase:
 pass

@six.add_metaclass(MyMeta)
class MyClass(myBase):
 pass

字符串类型 str

six.text_type

7z

Wed, 24 Nov 2021 00:00:00 +0000

解压缩

不保持目录

在当前目录导出
命令
1

7z e ./pack.zip

保持目录结构

命令

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22


# 压缩文件结构 mypack.zip
# -----------------------
# tei/
# file1.txt
# file2.txt

# 在当前目录导出
# 导出结构
# ------------------------
# ./tei/
# file1.txt
# file2.txt
7z x ./mypack.zip


# 制定目录
# 到处结构
# -------------------------
# ./tei/tei/
# file1.txt
# file2.txt
7z x ./mypack.zip -otei/ # 指定到处文件夹： ./tei/

xmonad ---- Window Manager

Wed, 24 Nov 2021 00:00:00 +0000

reload config

xmonad --restart

Alacritty ---- Fastest Terminal Emulator

Mon, 22 Nov 2021 00:00:00 +0000

change themes

工具:

alacritty-themes
- 参考： HOW TO: Easily Apply and Change Alacritty Themes

快捷键

参考：

Alacritty 0.9.0 keyboard shortcuts ‒ defkey

移动:

屏幕上移一行
- Ctrl + Y
屏幕下移一行
- Ctrl + E
屏幕上移半屏
- Ctrl + U
屏幕下移半屏
- Ctrl + D
屏幕上移满屏

tee ---- 文本文件制作工具

Sun, 21 Nov 2021 00:00:00 +0000

优势

相对于重定向操作符 > 和 >>
1. 功能更多
2. 权限丰富

功能

把命令行获取到的输入，输出到文件

可以接受的输入类型：

stdin
stdout
Pipe 管道结果

类似 >

管道

1

 echo hello | tee /path/to/my_file.txt

heredoc

flatpak ---- Third Party Software Store

Sat, 20 Nov 2021 00:00:00 +0000

切换中国源

eg:

1

 sudo flatpak remote-modify flathub --url=https://mirror.sjtu.edu.cn/flathub

安装

在 flathub 官网搜索软件 id
- https://flathub.org/home
- eg:
  - emacs –> org.gnu.emacs
- 为什么用官网
  - flatpak search 命令无效

安装

命令

1
2
3
4
5
6


 flatpak install org.gnu.emacs

 # 使用 id
 flatpak install flathub org.vim.Vim
 # 使用 ref 文件
 flatpak install ~/Downloads/org.vim.Vim.flatpakref --user

用户安装

archlinux

Fri, 19 Nov 2021 00:00:00 +0000

换源

参考
- https://bbs.archlinux.org/viewtopic.php?id=187746

修复 keyring 错误

命令

1
2
3
4


pacman-key --init
pacman-key --populate
pacman-key --refresh-keys
pacman -Sy archlinux-keyriit

一键换源

1

sudo pacman-mirrors -c China

AUR package 安装

yay 工具

使用 yay 工具
安装
1

sudo pacman -Syu yay
调用
- 接口类似 pacman
- 搜索
  1
  
  yay -Ss emacs
注意

Fish Shell ---- Friendly Interactive Shell

Tue, 16 Nov 2021 00:00:00 +0000

参考

Fish shell cheatsheet

completion 自动补全

快捷键

Ctrl + F
- 接受所有建议
Alt + F
- 接受部分建议
- 一个单词

变量处理

set 命令实现

eg:

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16


# * 定义
set myVar "value"
echo $myVar
# output: value

# * 清除
set -e myVar

# * 检查存在
env | grep myVar

# * export: -x 或 --export
set -x myVar1 myVar2

# * 取消 export: -u 或 --unexport
set -u myVar1

异常

prompt 异常错误

Google Search Skills

Mon, 15 Nov 2021 00:00:00 +0000

参考

双引号 "more than one keyword"

文件格式

格式
- 关键词：format
  - 注：冒号后不允许空格
eg:
- 语法：
  - keyword:pdf
  - keyword:torrent
- 实例：
  - site:hello.com

站内搜索 keyword site: website.com

关键词过滤

- - 必须含有
- - 不包含

搜索框快捷键 /

地址补全

Manjaro Notes

Mon, 15 Nov 2021 00:00:00 +0000

教程

官方
- Manjaro

换源

1

sudo pacman-mirrors -c China -m rank

AUR

参考
- Arch User Repository - Manjaro

使用工具 pamac

search
- pamac search -a
安装
- pamac build <package>

chemacs debug

命令

1

 emacs -q --eval '(setq user-emacs-directory "/home/sawyer/.emacs.d.default")' -l ~/.emacs.d.default/init.el --debug-init

sshd

sshd -t 报错

 # sshd -t

 # output error:
 sshd: no hostkeys available -- exiting.

解决方法

sudo ssh-keygen -A

字体

步骤

Python UML class Diagram

Fri, 12 Nov 2021 00:00:00 +0000

工具

Java

pyreverse

类图制作工具

异常解决

Max Recursion Error 异常

错误提示

 1
 2
 3
 4
 5
 6
 7
 8
 9
10


....
 File "/home/sawyer/miniconda3/envs/cde2/lib/python3.7/site-packages/astroid/decorators.py", line 111, in wrapped
 for res in _func(node, context, **kwargs):
 File "/home/sawyer/miniconda3/envs/cde2/lib/python3.7/site-packages/astroid/inference.py", line 481, in _filter_operation_errors
 for result in infer_callable(self, context):
 File "/home/sawyer/miniconda3/envs/cde2/lib/python3.7/site-packages/astroid/inference.py", line 769, in _infer_binop
 lhs_context = copy_context(context)
 File "/home/sawyer/miniconda3/envs/cde2/lib/python3.7/site-packages/astroid/context.py", line 188, in copy_context
 return context.clone()
RecursionError: maximum recursion depth exceeded

解决方法
- 提高递归限制
  - 修改文件 ~/miniconda/envs/py38/bin/pyreverse
  - 添加代码

Network Analysis

Tue, 09 Nov 2021 00:00:00 +0000

教程

网络图分析入门
- 网络分析_Learning-Deep-CSDN博客

lsp -- Emacs lsp client usage

Thu, 28 Oct 2021 00:00:00 +0000

lsp-java

jdtls 安装
1. lsp-install-server 命令
2. 手动安装
  - 下载 source code
    - https://github.com/eclipse/eclipse.jdt.ls/archive/refs/tags/v1.5.0.zip
  - maven 安装
    1 2 3
    
    mvnw clean verify mvnw clean verify -DskipTests=true # 避免单元测试错误
  - 生成 jdtls 命令
    - 放置位置
      - ./org.eclipse.jdt.ls.product/target/repository

eglot 配置

M-x eglot
输入 jdtls 项目根目录
- eg: e:/programs/jdtls/

我的配置

eg:

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23


(use-package eglot
 :ensure t
 :config
 (defconst my/jdtls-project-root (expand-file-name (concat user-emacs-directory ".cache/lsp/eclipse.jdt.ls/")))
 (defconst my/jdtls-jar-file-pattern "^org\.eclipse\.equinox\.launcher_[1-9].*\.jar$")

 (defun my/jdtls-find-executable-jar-file (dir file-pattern)
 (car (directory-files-recursively dir file-pattern)))

 (defun my/eclipse-jdt-contact (interactive)
 (let ((cp (getenv "CLASSPATH"))
 (path_seprator ":"))
 (if (eq system-type 'windows-nt)
 (setq path_seprator ";"))
 (setenv "CLASSPATH" (concat cp path_seprator (my/jdtls-find-executable-jar-file my/jdtls-project-root my/jdtls-jar-file-pattern)))
 (message (getenv "CLASSPATH"))
 (unwind-protect
 (eglot--eclipse-jdt-contact nil)
 (setenv "CLASSPATH" cp))))

 (setcdr (assq 'java-mode eglot-server-programs) #'my/eclipse-jdt-contact)
 (add-hook 'java-mode-hook 'eglot-ensure)
 )

lsp-mode 配置

Efficient Cpp

Wed, 27 Oct 2021 00:00:00 +0000

unordered_map

查找

map.find(key) != map.end() 快于 map.get(key)

Efficient Python

Wed, 27 Oct 2021 00:00:00 +0000

dict

查找

速度
- key in our_dict > our_dict[key] > our_dict.get(key)
- 即
  - in: 查找 key 更快
  - [] 下标索引优于 dict.get() 索引
  - dic.get() 具有安全保护，背后逻辑更耗时

use-package

Mon, 25 Oct 2021 00:00:00 +0000

教程

官方
- Get Started

autoload

使用 :commands 关键字

 1
 2
 3
 4
 5
 6
 7
 8
 9
10


(use-package color-moccur
 :commands (isearch-moccur isearch-all) ;; 自动 autoload
 :bind (("M-s O" . moccur)
 :map isearch-mode-map
 ("M-o" . isearch-moccur)
 ("M-O" . isearch-moccur-all))
 :init
 (setq isearch-lazy-highlight t)
 :config
 (use-package moccur-edit))

key-binding 绑定

参考
- key-binding
功能
- :bind
  - command 绑定
- :bind-keymap
  - keymap 绑定

使用 :bind 关键字

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11


(use-package color-moccur
 :commands (isearch-moccur isearch-all)
 :bind (("M-s O" . moccur) 			;; 全局绑定

 :map isearch-mode-map			;; mode 内绑定
 ("M-o" . isearch-moccur)
 ("M-O" . isearch-moccur-all))
 :init
 (setq isearch-lazy-highlight t)
 :config
 (use-package moccur-edit))

特性

自动创建 autoload

Boost ---- Boost Library of C++

Sat, 23 Oct 2021 00:00:00 +0000

教程

第三方英文教程：
- The Boost C++ Libraries
官方教程(manual and reference)：
- Boost C++ Libraries __ boost.org

string_algo 字符串算法

参考：

功能总览（quickref）
- Quick Reference - 1.79.0
文档目录
- Index listing for doc/html/string_algo/ - 1.54.0
使用例子

Gnus

Thu, 21 Oct 2021 00:00:00 +0000

nntp 客户端收集

GitHub - php/web-news: The mailinglist frontend

nntp server 收集

php

PHP Mailing Lists (PHP News)

news.gmane.io 和 gwene.org

gmane.io 原名 gmane.org
gmane 用于 nntp
gwene 用于 rss

使用 QQ 邮箱

参考
- Emacs收发邮件完全操作指南: Send-Mail, Rmail and Gnus - Emacs-general - Emacs China

Mailing List 邮件列表

参考

cheminfomatics

Wed, 13 Oct 2021 00:00:00 +0000

工具

Toolkit

参考
- 工具列表：
  - Chemtoolkits | Macs in Chemistry
CDK
- Java: GitHub - cdk/cdk: The Chemistry Development Kit
- 帮助文档
  - Groovy Cheminformatics with the Chemistry Development Kit | cdkbook
RDKit
- python
Indigo
- C++, Java, Python
- python:
  - epam.indigo: epam.indigo · PyPI

分子结构识别 OCSR

化学式表示格式

SMILES

InChi

IUPAC name

SELFIES

参考：

helm

Wed, 13 Oct 2021 00:00:00 +0000

参考

教程
- A Package in a league of its own: <code>Helm</code>

semiconductor notes

Wed, 13 Oct 2021 00:00:00 +0000

英语名词

英语	解释	短语
affinity	亲和力	electron affinity
lattice	晶格	lattice constant
photovoltaic effect	光伏打效应	photovoltaic cell
solar cells	太阳能电池
solar panels	太阳能板；太阳能电池板
p-type	P 型
n-type	N 型
p-n conjunction	PN 结
insulator	绝缘体
semiconductor	半导体
conductor	导体
semiconducting material	半导体材料
electric field
electromagnetic	电磁的
electromagnetic radiaction	电磁幅射
electromagnetic energy
wavelength	波长
conduction band	导带
valance band	价带
forbidden band	禁带
empty band	空带
filled band	满带
two charge carriers	电子和空穴算两个载流子
carriers	载流子
electron-hle pair
excited	激发的
excited state	激发态
diagram	图表；图解
	(带有图示的，解说性图)
graph	图表；曲线图
substrat mapping
wafer mapping
feastability
HVM 经常作为 High Volume Manufacturing	大批量生产
electrolyte
meteorology
derive
coefficent of determination	判定系数
thermionic

工艺名词

英语	解释	短语
deposition
coating
exposure
development
etching
ashing/cleaning

数据网站

ioffe.ru

chemdataextractor ---- Chemistry Articles NLP Library

Tue, 12 Oct 2021 00:00:00 +0000

参考

chemdataextractor2 documentation
- Getting Started — ChemDataExtractor v2.0.0 documentation
chemdataextractor2 repo
- GitHub - CambridgeMolecularEngineering/chemdataextractor2: ChemDataExtractor
tabledataextractor
- repo: GitHub - CambridgeMolecularEngineering/tabledataextractor: Extracts data from…
- doc: Welcome to TableDataExtractor! — TableDataExtractor 2019 documentation

参考文献和链接

jsr 385:

ref：https://jcp.org/en/jsr/detail?id=385 unit of measurement api 2.0

JSR 363:

ref：https://jcp.org/en/jsr/detail?id=363 unit of measurement api 1.0

Computer Hardware drivers

Tue, 12 Oct 2021 00:00:00 +0000

ThinkPad P50 linux settings

参考：
- https://download.lenovo.com/pccbbs/mobiles_pdf/thinkpad_p43s_p53s_ubuntu_installation_whitepaper_v1.0.pdf

GPL Notes

Mon, 11 Oct 2021 00:00:00 +0000

链接库

参考
- derivative works - Is it allowed to dynamically link a GPL licensed library f…
链接动态链接库
- 必须使用 GPL 证书
链接静态链接库
- 必须使用 GPL 证书

GCC 使用特例

参考
- gpl - Any license for my gcc-compiled program? - Stack Overflow
例外条文

When you use GCC to compile a program, GCC may combine portions of certain GCC header files and runtime libraries with the compiled program. The purpose of this Exception is to allow compilation of non-GPL (including proprietary) programs to use, in this way, the header files and runtime libraries covered by this Exception.

pybind11 ---- a Python C++ Binding Library

Sun, 10 Oct 2021 00:00:00 +0000

教程

官方：First steps — pybind11 documentation

概述

类似 Boost.Python, 不过去掉了对 Boost 库的依赖，更轻便，便于绑定到 python

模块创建

例子

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11


#include <pybind11/pybind11.h>

int add(int i, int j) {
 return i + j;
}

PYBIND11_MODULE(example, m) {
 m.doc() = "pybind11 example plugin"; // optional module docstring

 m.def("add", &add, "A function which adds two numbers");
}

重点

relation extraction of NLP

Sat, 09 Oct 2021 00:00:00 +0000

算法

Boostrap Learning

Snowball

Boostrap 的一种改良算法
2000 年发表
参考教程
- 原版论文： Snowball: Extracting Relations from Large Plain-Text Collections
- Snowball 关系提取，简单理解 - 知乎
- 有图文解释：笔记:关系抽取算法之Snowball_哈呼 bro的博客-CSDN博客_snowball 算法

Distant Supervision

远程监督
参考教程

pypy ---- a Python Interpreter Implementation

Thu, 07 Oct 2021 00:00:00 +0000

通过 conda 安装

参考：https://conda-forge.org/blog/posts/2020-03-10-pypy/

1
2
3


conda config --set channel_priority strict
conda create -n pypy pypy
conda activate pypy

cffi ---- Python C API Tool

Wed, 06 Oct 2021 00:00:00 +0000

使用模式

综述
- ABI 不使用 compiler
- API 使用 compiler
- in-line, 只使用 cffi 代码
- out-of-line 还使用 .c 文件
- 不严谨地说
  - in-line –> ABI +
  - out-of-line –> API +
ABI Vs. API
- ABI
  - 直接和二进制文件交互（lib）
  - eg:

LGPL Notes

Thu, 30 Sep 2021 00:00:00 +0000

参考

lgpl 原文：
- GNU Lesser General Public License v3.0 - GNU Project - Free Software Foundation
google 付费问答
- Q: Using LGPL code for commercial application
GNU 官方
- LGPLStaticVsDynamic

如何闭源项目并调用 lgpl 开源项目

参考：
- LGPL与闭源程序 - 走看看
回答引文

Situation: Your own C / C++ source code using an unmodified LGPL library to produce a commercial product (with closed source code) that you can distribute to customers (for a fee).

Python Game Frameworks

Thu, 30 Sep 2021 00:00:00 +0000

框架

Panda3D
专业级工具
- 推荐入门框架工具：Alice
Pyglet
- 参考
  - pyglet Documentation — pyglet v1.5.21

Python C API ---- Write Python C Extension and Call Python From C

Tue, 28 Sep 2021 00:00:00 +0000

C 语言转 Python

解析 Python 变量

函数： PyArg_ParseTuple
- 单个 python 变量转成 C 变量
- python tuple 转成多个 C 变量
- 接口 (PyArg_ParseTuple(args, "ii", &num1, &num2)
  - args: Python 所有参数
  - "ii": Python 参数的类型与个数，相当于翻译模板， "ii" 代表两个整数
  - &num1, &num2: 使用引用指针接收，解析出来的变量
- 返回值：失败为零, 成功非零

1
2
3
4
5
6
7
8
9


static PyObject * Conver_Test_Max_value(PyObject *self, PyObject *args)
{
 int num1, num2;
 // "ii"表示两个整型参数
 if(!(PyArg_ParseTuple(args, "ii", &num1, &num2))){
 return NULL;
 }
 return (PyObject *)Py_BuildValue("i", Max_value(num1, num2));
}

创建 Python 变量

函数： Py_BuildValue

coverage ---- Python unit test and code coverage tool 代码覆盖率探测

Mon, 27 Sep 2021 00:00:00 +0000

report 中包含大量 site-packages 模块测试

参考：coverage run does not ignore .venv dir
解决办法
- coverage run --omit ".venv/*" -m pytest tests

修复 report, no source code error

情况一

案例

py38 run-test: commands[3] | coverage html --skip-covered
No source for code: '/mnt/d/source/infrared_quantity/D:\source\infrared_quantity\tests\test_textrender.py'.
Aborting report output, consider using -i.
ERROR: InvocationError for command /mnt/d/source/infrared_quantity/.tox/py38/bin/coverage html --skip-covered (exited with code 1)

修复方法

mypy ---- Python typing checker

Mon, 27 Sep 2021 00:00:00 +0000

missing types or stubs not installed

解决办法
- mypy –install-types tests
- mypy –install-types -c 'import tests'
参考
- https://mypy.readthedocs.io/en/stable/running_mypy.html#missing-imports
- https://github.com/python/mypy/issues/9997

pyproject.toml 配置文件

参考
- The mypy configuration file — Mypy 0.910 documentation

例子

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23


# mypy global options:

[tool.mypy]
python_version = "2.7"
warn_return_any = true
warn_unused_configs = true

# mypy per-module options:

[[tool.mypy.overrides]]
module = ["mycode.foo.*", "module2", "module3", ...]
disallow_untyped_defs = true

[[tool.mypy.overrides]]
module = "mycode.bar"
warn_return_any = false

[[tool.mypy.overrides]]
module = [
 "somelibrary",
 "some_other_library"
]
ignore_missing_imports = true

初次启动慢

正常现象

stubs

pandas

tox ---- Python project multiple python version test framework

Mon, 27 Sep 2021 00:00:00 +0000

修改 pip 源

参考：Basic usage — tox 3.24.5.dev3 documentation

方法

设置环境变量 PIP_INDEX_URL

例子

1
2
3


[testenv]
setenv =
 PIP_INDEX_URL = https://pypi.my-alternative-index.org

与 pyenv 联用

先设定 pyenv local

在运行 tox

1
2
3


pyenv local system 3.5.2 3.7.8 3.9.10

tox

fastapi ---- a Python Web Framework

Thu, 23 Sep 2021 00:00:00 +0000

教程

官方文档： FastAPI
类似项目对比
- 与 flask 对比
  - Why Choose Flask Over FastAPI - Python kitchen
    - flask 和 starlette 是 counterpart
    - flask-restx 和 fastapi 是 counterpart
兄弟项目
- Typer, 命令行工具
  - Typer
相关工具
- uvicorn
  - 用于运行 fastapi 程序
- Starlette
  - ASGI, python 异步 web 服务框架
- pydantic
  - 数据验证和设置工具
  - 通过 python annotations (typing) 实现
  - 在 runtime 时期强制执行 typing(type hint)
  - 类型不一致，给出错误提示

pydantic ---- a Python Json Scheme Library

Thu, 23 Sep 2021 00:00:00 +0000

教程

Python笔记：Pydantic库简介_codename_cys 的博客-CSDN博客_pydantic
官方
- pydantic
相关项目
- datamodel-code-generator
  - GitHub - koxudaxi/datamodel-code-generator: Pydantic model generator for easy…
  - 代码生成器，使用 OpenAPI 和 json schema
- hypothesis
  - GitHub - HypothesisWorks/hypothesis: Hypothesis is a powerful, flexible, and …
  - 基于属性的测试库
相关 python library

unicodedata

Thu, 23 Sep 2021 00:00:00 +0000

教程

正规化：Difference Between NFD, NFC, NFKD, and NFKC Explained with Python Code
- normalize()
各种函数教程：{383}python unicodedata用法_周小董-CSDN博客_unicodedata
英语教程：Unicode In Python - The unicodedata Module Explained - AskPython
Python 官方教程：Unicode HOWTO — Python 3.9.7 documentation
Python unicode catetory 解说：General_Category_Values —- Unicode Character Database
11. Programming languages — Programming with Unicode

Clustering Algorithms

Thu, 16 Sep 2021 00:00:00 +0000

教程

英语
- 10 Clustering Algorithms With Python
  - 生词
    - outlier
    - anomaly
    - prior to, 在 … 之前
      - 类似 before
聚类效果评估
- How to measure clustering performances when there are no ground truth? | by H…

用途

pattern discovery or knowledge discovery
- 模式发现，知识发现
特征工程

算法实现角度

相似性
距离判断

常见算法初始参数

参数

OpenRefine ---- 聚类工具

Wed, 15 Sep 2021 00:00:00 +0000

教程

Cleaning Data with OpenRefine | Programming Historian
中文：
- OpenRefine - anovana - 博客园
英文三方：
- Home - OpenRefine - LibGuides at University of Illinois at Urbana-Champaign

安装和启动

win10

下载包
- 最好使用嵌入 java 版本
  - 下载页
安装
- 解压即可
启动
- 鼠标启动
  - 双击 openrefine.exe
  - 双击 refine.bat
- 命令行

hardware

Tue, 14 Sep 2021 00:00:00 +0000

不同芯片对比

cpu vs fpga
- 参考：CPU vs FPGA，图像处理谁更厉害？_嵌入式资讯精选-CSDN博客
cpu gpu asic fpga
- 参考：FPGA与CPU、GPU、ASIC的区别，FPGA在云计算中的应用方案_打怪升级ing-CSDN博客
- FPGA
  - field programmable gate array
- GPU
- ASIC
  - 专用芯片
  - 开发成本高，用途狭窄，一旦变更需求，报废

异构计算

heterogeneous computing

Python Distribution, Packaging and pip

Tue, 14 Sep 2021 00:00:00 +0000

教程

官方
- Distributing Python Modules — Python 3.9.7 documentation
三方教程
- Overview — The Joy of Packaging 0.1 documentation

术语

Python Package Index
Python Package Authority
- 管理机构，一个开发者维护者委员会
distutils(1998)
- 过时的分发工具
setuptools(2004)
- distutils 替代工具
wheel
- 发布的项目
- 参考：PEP 427 – The Wheel Binary Package Format 1.0 | Python.org

分发工具（打包）

distutils
setuptools

plotly ---- Python Chart Ploting Library

Mon, 13 Sep 2021 00:00:00 +0000

桑椹图

参考：
- 官方：Sankey Diagram | Python | Plotly

代码实践

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36


# 实际映射关系
df = pd.DataFrame(
[
 ['A', 'A', 'A', 'B', 'B', 'B'],
 ['a', 'b', 'c', 'a', 'b', 'c'],
 [50, 25, 25, 10, 50, 40]]

)

# 输出

0 1 2
0 A a 50
1 A b 25
2 A c 25
3 B a 10
4 B b 50
5 B c 40

# 绘制使用关系（转换后）
df = pd.DataFrame(
[
 [0, 0, 0, 1, 1, 1],
 [2, 3, 4, 2, 3, 4],
 [50, 25, 25, 10, 50, 40]]

)
# 节点名称到数字映射 A, B ---> [0, 1], a,b,c --->[2,3,4]
df = df.T

# 绘制
data = go.Sankey(link={'source': df[0], 'target': df[1], 'value': df[2]}, 
 node={'label':list('AB') + list('abc'), 'pad':50, 'thickness':10})

fig = go.Figure(data)
fig.show()

注意

Graphics Programing编程图形

Sat, 11 Sep 2021 00:00:00 +0000

教程

html graphics

矩形： (左上角顶点坐标为(x1,y1)，右下角顶点坐标为(x2,y2))
1

<area shape="rect" coords="x1,y1,x2,y2" href=url>

圆形: (圆心坐标为(X1,y1)，半径为 r)

1

<area shape="circle" coords="x1,y1,r" href=url>

多边形: (各顶点坐标依次为(x1,y1)、(x2,y2)、(x3,y3) ……)

scipy ---- Python Scientific Computation Library

Fri, 10 Sep 2021 00:00:00 +0000

线性代数 scipy.linalg

线性方程组

Ax = b

linalg.solve(A, b)

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17


import numpy as np
from scipy import linalg
# x + y = 2
# x - y = 4
# 解： x= 3, y = -1

In [100]: A = np.array([[1, 1],
 ...: [1, -1]])

In [101]: b = np.array([[2],
 ...: [4]])
 ...:

In [110]: linalg.solve(A,b)
Out[110]:
array([[ 3.],
 [-1.]])

Ax = 0

sympy -- Python Symbolic Compuation Library

Fri, 10 Sep 2021 00:00:00 +0000

矩阵

sympy.Matrix
- 方法和属性
  - shape
    - mat.shape
    - sympy.shape(mat)
  - list 化
    - mat.tolist()
  - 点积
    - matA * matB
      - 和 numpy 不同， np.dot 才可以
  - 创建矩阵
    - 单位阵
      - sympy.eye(size)
    - ones
      - sympy.ones(…)
    - zeros
      - sympy.zeros(…)
    - 对角阵
      - sympy.diag(value1, value2, …)
        
        直接输入对角元素
      - sympy.diag(value1, mat1, mat2, …)

joblib ---- a Python Parallel and Function Disk Cache Tool

Thu, 09 Sep 2021 00:00:00 +0000

教程

官方：Joblib: running Python functions as pipeline jobs — joblib

用途

加速函数执行
- 函数结果缓存
- 第二次执行，直接返回缓存的结构，无需执行代码块
并行运算
替代 pickle
- 更高效
函数式编程

Memory 类

作用缓存函数执行结果
参考：On demand recomputing: the Memory class
支持对 numpy 的优化

初始化

Memory(cachedir: str|None='your/given/path', verbose: int=0)
参数

pickle -- Python Serialization Tool

Thu, 09 Sep 2021 00:00:00 +0000

教程

Protocol 协议

协议间不兼容
- 老版本pickle 不能识别新版本 pickle dump 结果

函数

pickle.dumps
- 参数
  - protocol: int
    - 0 ~ pickle.HIGHEST_PROTOCOL
pickle.loads
pickle.dump
pickle.load

注意缺陷和陷阱

序列化失败

不能序列化 __main__ 模块中的函数

Tue, 17 Aug 2021 00:00:00 +0000

教程

官方：pathlib — Object-oriented filesystem paths — Python 3.9.6 documentation

Path 对象和 `in` 运算符

判断

Path.is_absolute()
Path.is_relative_to(*other)
Path.is_reserved()
Path.match(pattern)
- 通配符匹配
  - eg: '*.py'
Path.exists()
Path.samefile(other: Path)
Path.is_dir()
Path.is_file()
Path.is_symlink()
Path.is_mount()
Path.is_socket()
Path.is_fifo()
Path.is_block_device()
Path.is_char_device()

修改组分（返回新 Path）

Path.with_name(name)
- 替换 basename
Path.with_stem(stem)
- 替换 stem (除去 suffix 部分)
Path.with_suffix(suffix)

shutil ---- Python File Operating Module

Tue, 17 Aug 2021 00:00:00 +0000

参考

官方文档：shutil — High-level file operations — Python 3.9.6 documentation

命令

which
- shutil.which
移动
- shutil.move
复制
- shutil.copy
  - 复制内容 + mode
- shutil.copy2
  - 复制 content + all_metadata
- shutil.copystat(src, target)
  - 复制 stat, 不是内容
  - 注意：
    - 复制到的对象，target 必须存在
    - 可能不完全一致
- shutil.copyfileobj(fsrc, fdst[, length])

psutil -- Python vmstat like tool

Thu, 05 Aug 2021 00:00:00 +0000

cpu_count

代码
1 2 3

import psutil psutil.cpu_count(logical=False)
- 统计 CPU 核心数量
- logical : 是否统计单核多线程

ray -- Python Distributed Computing Framework

Thu, 05 Aug 2021 00:00:00 +0000

教程

快速入门：
- 官方：A Gentle Introduction to Ray — Ray v1.4.1
- 三方文章：Modern Parallel and Distributed Python: A Quick Tutorial on Ray
基准测试
- python 单进程、multiprocessing 和 Ray 性能比较
  - cpu 核数越多 Ray 的优势越明显

注意事项

参考：Tips for first-time users — Ray v2.0.0.dev0
条目

emacs_font -- How to work with emacs font

Tue, 03 Aug 2021 00:00:00 +0000

如何让 Emacs 检测到字体

官方教程：How-to-add-fonts
- 太古老
EmacsWiki: EmacsWiki: Set Fonts

cnfonts

中文字体
- 部分是选择字体，部分是宋体
  - 原因，字号的问题，
检测不到 文泉驿字体 原因

Plot in Python ---- 使用 Python 绘图

Thu, 29 Jul 2021 00:00:00 +0000

绘图库

matplotlib
pycharts
- 参考：GitHub - pyecharts/pyecharts: Python Echarts Plotting Library
- ECharts python 接口
plotly
bokeh
plotnine
- 参考： A Grammar of Graphics for Python — plotnine 0.8.0 documentation
- 基于 R 语言中的 ggplot2

terminal plot 命令行绘图

参考：

How to Create Stunning Graphs in the Terminal with Python | by Sourav De | Me…

列表：

terminology -- 专业术语处理

Tue, 27 Jul 2021 00:00:00 +0000

术语查询网站

国内工具
- termonline: 术语在线—权威的术语知识服务平台
- 词都网： http://www.dictall.com

pip notes

Mon, 26 Jul 2021 00:00:00 +0000

更改到阿里源

1
2


https://mirrors.aliyun.com/pypi/simple/
pip config set global.index-url https://mirrors.aliyun.com/pypi/simple/

腾讯源

1

pip config set global.index-url https://mirrors.cloud.tencent.com/pypi/simple

豆瓣源

1
2


https://pypi.douban.com/simple/
pip config set global.index-url https://pypi.douban.com/simple

华为源

1
2


https://repo.huaweicloud.com/repository/pypi/simple
pip config set global.index-url https://repo.huaweicloud.com/repository/pypi/simple

清华源

1
2
3
4
5


# * 永久
pip config set global.index-url https://pypi.tuna.tsinghua.edu.cn/simple

# * 临时
pip install -i https://pypi.tuna.tsinghua.edu.cn/simple some-package

pip -f 和 pip -i 使用

参考：

cut linux command

Sun, 25 Jul 2021 00:00:00 +0000

Tutorials

Linux cut命令 | 菜鸟教程

作用

分割一行文字，使用给定分隔符 seperator
返回给定 field 内容

对比 awk

类似 awk
但是功能简单

参数

-f
- 制定提取的 field 编号
-d
- 制定分隔符
- 默认值，制表符
- 与 -f 一起使用
处理单位

FlashText -- Fast Text Extract and Replace Tool

Fri, 23 Jul 2021 00:00:00 +0000

教程

原理解说：FlashText | Python FlashText For NLP Tasks
Git Repo
- GitHub - vi3k6i5/flashtext: Extract Keywords from sentence or Replace keyword…

特性

不随词的数量增长，消耗时间快速增长

例子

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13


# 创建工具
In [49]: p = flashtext.KeywordProcessor()

In [50]: p.add_keywords_from_dict({'a': ['b', 'c']})


# match单词
In [52]: p.extract_keywords('a b c')
Out[52]: ['a', 'a']

# match 包括 index
In [56]: p.extract_keywords('a b c', span_info=True)
Out[56]: [('a', 2, 3), ('a', 4, 5)]

entity-fishing

Thu, 22 Jul 2021 00:00:00 +0000

kafka-python notes

Wed, 21 Jul 2021 00:00:00 +0000

教程

中文：Python操作Kafka的通俗总结（kafka-python） - 知乎

KafkaConsumer

参数
- group_id
- bytes 类型转换
  - key_serializer
  - value_serializer

C++ Notes

Mon, 19 Jul 2021 00:00:00 +0000

帮助

可以使用 man 命令查找帮助
- man malloc
参考手册，在线
- 注：* 英文：http://www.cpusplus.com
  - 中文：http://zh.cppreference.com
  - 中文：http://c.biancheng.net/ref/ 页面更美观，但是只包含部分 C 头文件各种 C&&C++教程：http://wiki.jikexueyuan.com/list/c/

教程

Kafka Notes

Mon, 19 Jul 2021 00:00:00 +0000

Tutorials

中文：Kafka的简介

设计目标

消息持久化，时间复杂度 o(1)，TB 级以上数据
高吞吐量
- 消息传输速率 100KB/s (单机模式下)

ZooKeeper Notes

Mon, 19 Jul 2021 00:00:00 +0000

教程

Generate Python Documentation

Fri, 16 Jul 2021 00:00:00 +0000

Tools

pydoc
- python 自带工具，命令行，功能简单
pdoc
- 无需配置，界面美观，功能简单
sphinx
- 功能强大，需要配置
doxygen
- 古老工具
- 可以解析依赖和继承关系

msys2

Wed, 14 Jul 2021 00:00:00 +0000

shell 分类

参考：

Environments - MSYS2

区别：

msys
- cygwin
Msys mingw 64
- x86_x64 windows
- 提供基于 windows 的程序和 mingw-w64 编译系统
Msys mingw 32
- x86 windows

启动不同 msystem 的方法

参考：

Launchers - MSYS2

使用 msys2_shell.cmd

1

E:\soft\msys64\msys2_shell.cmd -mingw64 -shell zsh

使用 env 命令

1

e:\msys64\usr\bin\env MSYSTEM=MSYS /usr/bin/bash -li

.exe 工具

Python Locker Implementation Notes ---- python 中锁的实现

Fri, 09 Jul 2021 00:00:00 +0000

分布式锁

portalocker.RedisLock

实现方式
- redis pubsub channel

创建

1
2
3
4
5
6
7
8


import portalocker

lock = portalocker.RedisLock('some_lock_channel_name')

with lock:
print('do something here')

# *** Redis 连接设定

Redis 连接设定
- 使用 redis.client.Redis 类实现
用 RedisLock 可选关键字参数 redis_kwargs: typing.Optional[typing.Dict] = None 指定

参考

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14


class Redis:
 def __init__(self, host='localhost', port=6379,
 db=0, password=None, socket_timeout=None,
 socket_connect_timeout=None,
 socket_keepalive=None, socket_keepalive_options=None,
 connection_pool=None, unix_socket_path=None,
 encoding='utf-8', encoding_errors='strict',
 charset=None, errors=None,
 decode_responses=False, retry_on_timeout=False,
 ssl=False, ssl_keyfile=None, ssl_certfile=None,
 ssl_cert_reqs='required', ssl_ca_certs=None,
 ssl_check_hostname=False,
 max_connections=None, single_connection_client=False,
 health_check_interval=0, client_name=None, username=None):

python-redis-lock pip 包实现

参考：GitHub - ionelmc/python-redis-lock: Lock context manager implemented via redi…
模块：＝redis_lock＝
例子

Google Test(gtest) Notes

Wed, 07 Jul 2021 00:00:00 +0000

教程

平台要求

编译器 >= C++ 11
gcc5.0+
clang5.0+
msvc2015+
参考：https://google.github.io/googletest/platforms.html

基本概念

gtest 特性

不限于 unit tests
测试独立性和可重复性
测试编组
可移植和重用性，平台中立性
一个测试失败，不影响其他测试继续进行
不需要运行编排
运行快速
基于 xUnit 框架

Nginx Notes

Fri, 02 Jul 2021 00:00:00 +0000

概述

正则语法

使用 perl 正则语法

Nginx 三种代理模式

参考：Nginx代理的几种模式 - 柴犬砍柴 - 博客园
官方高级教程： Configuring NGINX and NGINX Plus as a Web Server | NGINX Plus

反向代理

参考： Nginx（三）——nginx 反向代理 - YSOcean - 博客园

Grep Command Notes

Wed, 30 Jun 2021 00:00:00 +0000

反向查找

-v: –invert-match
?: 查找没有被匹配到的内容

pattern 指定 -e pattern

-e pattern

perl 格式 regexp -P

-P

特点：

支持 extended regexp 的全套功能
- eg: [[:digit:]]+
支持类似 python regex 的功能
- eg: \d+(\.\d+)?G
有限制的 perl regexp 功能实现

Python Memory Profile Notes

Tue, 29 Jun 2021 00:00:00 +0000

工具

tracemalloc
- 内存分配跟踪 trace memory allocations
- 官方库
memory_profiler
line-profiler
- 逐行 profile

line-profiler

命令行使用

1
2
3
4
5


# 第一步 ---> 生成 profile 结果文件 --> your_script.py.lprof
kernprof -l -v your_script.py

# 第二步 ---> 格式化展示
python -m line_profiler your_script.py.lprof

例子
- 注意：不需要导入 profile 装饰器
- Line Profiling in Python · GitHub

ccls Notes

Tue, 22 Jun 2021 00:00:00 +0000

项目设置

Project Setup · MaskRay/ccls Wiki · GitHub

使用 compile_commands.json

参考
compile_commands.json
- 产生方法
  - cmake

cmake -D 命令

1

cmake .. -DCMAKE_EXPORT_COMPILE_COMMANDS=ON

CMakeLists.txt

1

 set(CMAKE_EXPORT_COMPILE_COMMANDS ON)

bear

1

 bear -- make

ninja
…

1

 ln -s -f ./build/compile_commands.json ./

windows

使用Ninja

gcc notes

Tue, 22 Jun 2021 00:00:00 +0000

编译安装

参考
- 在Deepin v20系统中将gcc升级到10.1.0版本的方法_Linux 教程_云网牛站
- Compile GCC5.1 from Source Code | 程式隨筆

流程

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13


 # 安装依赖
 ./contrib/download_prerequisites

 # 可选是否使用 gcc-multilib
 sudo apt install gcc-multilib flex

 # disable multilib
 ./configure --prefix=/usr/local/gcc --enable-bootstrap --enable-checking=release --enable-languages=c,c++ --disable-multilib
 # enable multilib
 ./configure --prefix=/usr/local/gcc --enable-bootstrap --enable-checking=release --enable-languages=c,c++


 make -j 8 && sudo make install

conan ---- C++ Package Management Tool

Sat, 19 Jun 2021 00:00:00 +0000

教程

入门：
- Getting Started — conan 1.50.0 documentation
依赖安装方法
- Installing dependencies — conan 1.50.0 documentation

cmake 集成用法

参考：

所有方法
- CMake — conan 1.50.0 documentation
find_package 方法
- cmake_find_package generator — conan 1.50.0 documentation
三方例子
- Conan Integration — ApprovalTests.cpp documentation
cmake 内部直接使用 conan
- GitHub - conan-io/cmake-conan: CMake wrapper for conan C and C++ package manager

Cheat Sheet

快捷命令

初始化

Dap Mode Notes

Sat, 19 Jun 2021 00:00:00 +0000

教程

vscode debug 教程

鼠标支持 dap-mouse

注意：

dap-mouse 与 lsp-mode 和 lsp-treemacs 关联
使用 lsp-bridge-mode 启用 dap-mouse 无效

启用方法：

1
2


(dap-tooltip-mode +1)
(tooltip-mode +1)

延迟时间：

1

(setq tooltip-delay 0.2)

launch.json

configuration 属性
变量

${workspaceFolder}

项目根目录

{$file}

当前打开的 editor 显示文件

{$env:variable_name}

环境变量

flask-restx notes

Thu, 17 Jun 2021 00:00:00 +0000

教程

Api 类教程

namespace

作用：对 Resource 分组
参考：API — Flask-RESTX documentation–Namspace class
调用
1

api.namespace(...)

Model

参考：
- API — Flask-RESTX restx.Model
- api.model 方法
parameters 字段

Parameters: default – The default value for the field, if no value is specified. attribute – If the public facing value differs from the internal value, use this to retrieve a different attribute from the response than the publicly named value. title (str) – The field title (for documentation purpose) description (str) – The field description (for documentation purpose) required (bool) – Is the field required ? readonly (bool) – Is the field read only ? (for documentation purpose) example – An optional data example (for documentation purpose) mask (callable) – An optional mask function to be applied to output

profile ---- python time consuming Python 运行时间分析工具

Fri, 11 Jun 2021 00:00:00 +0000

工具

graphviz
snakeviz
gprof2dot

profiler

cProfile
profile

使用

snakeviz

1
2
3


python -m cProfile -o /to/profile_result.prof your_program.py args

snakeviz /to/profile.prof

结果
- 网站

gprof2dot

1
2
3


python -m cProfile -o profile.pstats program.py args

gprof2doc -f pstats /to/profile.pstats | dot -Tpng -o result.png

结果
- 函数调用图片

代码速度

set 快于 list

x in set 快于 x in list

requests ---- python requests library

Fri, 11 Jun 2021 00:00:00 +0000

教程

requests官方教程
curl 转换工具： Convert curl commands to code

发送 post json 请求 Request

1
2


import requests
requests.post('http://localhost:8999', json={"hello": "data"})

上传文件和 multpart/form-data

参考：

上传文件

用法：

单独设置文件内容

Redis Notes

Tue, 01 Jun 2021 00:00:00 +0000

参考

Redis知识详解（超详细）-CSDN博客
【Redis篇】简述Redis | 详解Redis命令-CSDN博客
分布式锁：Redlock（redis分布式锁）原理分析 - RGC - 博客园
消息中间件：Redis中的消息中间件-腾讯云开发者社区-腾讯云
- 简单，不可和专业的消息中间件相比

概述

特点

高速读写
基于内存
持久化

pycrytodome ---- another encryption library for python 加密类库

Thu, 27 May 2021 00:00:00 +0000

Tutorial

https://pycryptodome.readthedocs.io/en/latest/src/introduction.html

安装

pip install pycrytodome

注意
- pycrytodome 和 pycryto 是功能类似的两个 package

Python Signal Module Notes

Thu, 20 May 2021 00:00:00 +0000

教程

发送信号

singal.pause

暂停 进程 等待接受信号
- 即，休眠进程

signal.alarm

计时功能
- 在给定时间之后，发出 singal.SIGAlRM 信号（默认结束进程）
- 多个 singal.alarm 覆盖前面的
取值
- 正值，设置计时时间
- 0，取消计时

获取信号处理函数

signal.getsignal

1
2
3
4


signal.getsignal(<Signal Number>)

# 例子
singal.getsignal(singal.SIGINT)

设置信号处理函数

`signal.singal`

1

Signal.singal(<signal number>, <handler function>)

处理函数的取值

函数签名如： handler(signum, frame) 的函数

Encryption Notes

Sun, 16 May 2021 00:00:00 +0000

教程

工具

openssh
tls/ssl
GnuPG
seahorse
- 密钥管理 GUI

TLS 和 CA

教程
- 简单易懂
- TLS 协议握手流程

概念

CA

Certificate Authority 证书办法机构

CA 证书

公钥 和 被颁发者信息 被 CA 机构的 私钥 加密后生成

用途

验证被颁发者 2) 获取公钥

解密方法

使用 CA 机构的 公钥 解密

CA 公钥

CA 机构公钥

parallel ---- Concurrent tool on linux

Sat, 15 May 2021 00:00:00 +0000

教程

https://www.gnu.org/software/parallel/parallel_tutorial.html

安装

1
2


(wget -O - pi.dk/3 || lynx -source pi.dk/3 || curl pi.dk/3/ || \
fetch -o - http://pi.dk/3 ) > install.sh

输入命令

格式
- parallel command
“没有” 输入命令
- 行为
  - 类似 cat | sh
“有” 输入命令
- 行为
  - 类似 xargs
- 输入数据处理
  - 后面的 {} 被转换成输入数据

输入数据

替换符

{}

Crystal

Wed, 12 May 2021 00:00:00 +0000

英语专业名词

英语	缩写	解释
coordinate number	CN	配位数
	Z	晶胞原子数

专业名词

名词	解释
最密堆积

Python Module Configparser Notes ---- config 文件解析工具

Tue, 11 May 2021 00:00:00 +0000

教程

python 官方

python module

config parser

特征

类似 python dict 接口

tornado ---- a python web app framework

Fri, 07 May 2021 00:00:00 +0000

处理异常

参考

步骤

自定义异常类，继承 tornado 异常类 tornado.web.HTTPError
修改 http header, 重载 tornado.web.RequestHandler::write_error
在自己的 handler 中抛出自定义异常类

Hexo

Thu, 06 May 2021 00:00:00 +0000

与 org-mode 连用

插件
- hexo-renderer-org

注意事项

发布之前需要重新 generate
1

hexo generate

Chemacs Notes

Tue, 04 May 2021 00:00:00 +0000

教程

chmacs2

windows

配置例子

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13


(
 ("spacemacs" . ((user-emacs-directory . "~/.emacs.d.spacemacs")
 (server-name . "~/.emacs.d/server/spacemacs")
 (env . (("SPACEMACSDIR" . "~/.emacs.d.spacemacs")))))

 ("default" . ((user-emacs-directory . "~/.emacs.d.default")
 (server-name . "~/.emacs.d/server/server")
 ))

 ("doom" . ((user-emacs-directory . "~/.emacs.d.doom")
 ;; (env . (("DOOMDIR" . "~/doom-config")))
 ))
 )

打开 emacsclient 方法

1
2
3
4
5
6
7


emacsclient -c -t -a=""

emacsclient -c -t -f "~/.emacs.d/server/server"
emacsclient -c -t -f server

emacsclient -c -t -f "~/.emacs.d/server/spacemacs"
emacsclient -c -t -f spacemacs

可以通过指定 server 文件路径来

启动 daemon 方法

1
2
3
4


emacs --daemon # alternate-editor='' server-file=server

emacs --with-profile spacemacs --daemon=spacemacs # server-file='~/.emacs.d.spacemacs/server/spacemacs'
emacs --with-profile spacemacs --daemon="~/.emacs.d/server/spacemacs" # server-file='spacemacs'

-f 或 –server-file=/path/to/file: 针对 windows
-s 或 –socket-name: 针对 linux

OAuth

Thu, 29 Apr 2021 00:00:00 +0000

教程

中文，阮一峰
- 简介
- OAuth2.0 四种方式

概念

token 令牌

和密码类似
有有效时长
可以被主动撤销
可以设置权限范围 scope
- 密码是所有权限

角色

客户端
资源所有者

Tagger ---- machine learning 机器学习标柱工具

Thu, 29 Apr 2021 00:00:00 +0000

工具列表

https://awesomeopensource.com/projects/annotation-tool

Universal Data Tool

特性
- 可以标注多种类型数据
  - 文本分类
  - 图片分类
  - Image Segmentation
  - …
- 多用户协作
  - 无需注册
https://github.com/UniversalDataTool/universal-data-tool

Doccano

https://github.com/doccano/doccano
特性
- 标注数据类型
  - 序列标注
  - 文本分类
  - …
- 界面美观清爽
  - 类似 Gmail
多用户协作

GnuPG ---- GNU Privacy Guard

Wed, 28 Apr 2021 00:00:00 +0000

教程

QEMU notes

Wed, 28 Apr 2021 00:00:00 +0000

Ubuntu 20.04 安装教程

创建磁盘

qemu-image

1
2
3


qemu-img create ubuntu.img 20G

qemu-img create -f qcow2 ubuntu.qcow2 20G

启动和安装

安装

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13


qemu-system-x86_64 \

 # 磁盘路径
 -hda ubuntu.img \

 # 启动顺序
 -boot d \

 # 安装iso文件路径
 -cdrom /path/to/install_iso_file \

 # 内存大小，默认单位MiB
 -m 640

-boot: 启动数序

decorator ---- python decorator 装饰器

Mon, 19 Apr 2021 00:00:00 +0000

类装饰器，修饰类的装饰器 class decorator

参考：
- https://www.geeksforgeeks.org/metaprogramming-metaclasses-python/

例子

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37


from functools import wraps

def debug(func):
 """decorator for debugging passed function
 """
 @wraps(func)
 def wrapper(*args, **kwargs):
 print("Full name of this method:", func.__qualname__)
 return func(*args, **kwargs)
 return wrapper


# 类装饰器
def debugmethods(cls):
 '''class decorator make use of debug decorator
 to debug class methods '''

 # check in class dictionary for any callable(method)
 # if exist, replace it with debugged version
 for key, val in vars(cls).items():
 if callable(val):
 setattr(cls, key, debug(val))
 return cls

# sample class
@debugmethods
class Calc:
 def add(self, x, y):
 return x+y
 def mul(self, x, y):
 return x*y
 def div(self, x, y):
 return x/y

mycal = Calc()
print(mycal.add(2, 3))
print(mycal.mul(5, 2))

pdf parsing ---- pdf 文本解析

Mon, 29 Mar 2021 00:00:00 +0000

参考

工具列表：

PDF信息提取技术的汇总（干货满满！） - 知乎

中文 PDF 抽取工具

pdfact
paddleocr
grobid
- 中文支持不好
pdf2docx
- 排版信息不好，乱序
chinese_science_paper_to_text
- https://github.com/flyingwaters/chinese_science_paper_to_text/blob/main/extract.py
pdfplumber
- 测试，中文专利可以

pdf 转图片

pdftoppm
- poppler 套装组件
pyvips (libvips)
- 宣称更快
- python - what is fastest way to convert pdf to jpg image? - Stack Overflow
- 支持每页并行处理
pypdfium2

Thermodynamics 热力学

Sat, 20 Mar 2021 00:00:00 +0000

参考

网站

TRC – Thermodynamics Research Center 美国热力学研究中心
- https://trc.nist.gov/

工具软件

HSC Chemistry
FactSage
- https://www.factsage.com/
- 二元相图，三元相图等
Thermocalc
- Computational Materials Engineering - Thermo-Calc Software

热力学拟合公式

教程
- https://trc.nist.gov/TDE/Equations/FEquations.html#PhaseBoundaryLG

image rendering ---- render image with python 图片处理

Wed, 17 Mar 2021 00:00:00 +0000

图片存储网站

postimages: Postimages — free image hosting / image upload
- 免费

工具

OpenCV
pillow
scikit-image
scipy.ndimage

工具比较

Python image processing libraries performance: OpenCV vs Scipy vs Scikit-Image

load and save

教程
- https://towardsdatascience.com/loading-and-saving-images-in-python-ba5a1f5058fb
- 打开方式和性能评估
  - https://towardsdatascience.com/what-library-can-load-image-in-python-and-what-are-their-difference-d1628c6623ad
三种方式
- PIL
- opencv –> np.ndarray
- matplotlib

Spacemacs Notes

Wed, 10 Mar 2021 00:00:00 +0000

切换国内源

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21


 (defun dotspacemacs/user-init ()
 "Initialization function for user code.
 It is called immediately after `dotspacemacs/init', before layer configuration
 executes.
 This function is mostly useful for variables that need to be set
 before packages are loaded. If you are unsure, you should try in setting them in
 `dotspacemacs/user-config' first."
 (setq configuration-layer-elpa-archives
 '(("melpa-cn" . "http://elpa.emacs-china.org/melpa/")
 ("org-cn" . "http://elpa.emacs-china.org/org/")
 ("gnu-cn" . "http://elpa.emacs-china.org/gnu/")))
 )



 (setq configuration-layer-elpa-archives
 '(
 ("melpa-stable-cn" . "http://mirrors.tuna.tsinghua.edu.cn/elpa/melpa-stable")
 ("melpa-cn" . "http://mirrors.tuna.tsinghua.edu.cn/elpa/melpa/")
 ("org-cn" . "http://mirrors.tuna.tsinghua.edu.cn/elpa/org/")
 ("gnu-cn" . "http://mirrors.tuna.tsinghua.edu.cn/elpa/gnu/")))

自定义 layer 教程

参考

Apidocjs

Mon, 08 Mar 2021 00:00:00 +0000

教程

快速了解
- https://blog.jscrambler.com/documenting-apis-using-apidoc-js/
参考
- https://apidocjs.com/#param-api-error

`@apiIgnore` 跳过在写的部份（未完成）

`@apiSuccess` 返回 Response 参数解释

嵌套 json 解释

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25


def crop_image():
 """
 @api {post} /crop_image Request to crop image for a pdf
 @apiName CropImagePost
 @apiGroup Cropper
 @apiVersion 0.1.0
 @apiSuccess {String} code Status code.
 @apiSuccess {Object[]} data Tasks' result list.

 @apiSuccess {Number} data.code Status code of the Task.
 @apiSuccess {String} data.coordinates Coordinate group of the Task.

 @apiSuccessExample {json} Success Response json:
 {
 "code": 2000,
 "data": [
 {
 "code": 2000,
 "coordinates": "1,166.6,539.87,16.5022,9.1575;1,166.6,539.87,16.5022,9.1575",
 }
 ],
 }

 """
 pass

一个函数多个 method

注意

Pyside ---- Qt official python api

Tue, 02 Mar 2021 00:00:00 +0000

教程

简介：PySide6: Professional Python GUI Library

环境配置错误

参考：PySide6开发环境 - 代码先锋网
设置环境变量 QT_QPA_PLATFORM_PLUGIN_PATH
- 值： D:\soft\miniconda3\envs\py38\Lib\site-packages\PySide6\plugins\platforms

设置 QObject 属性

动态属性
- setter & getter
  - obj.setProperty("propName", "value")
  - obj.property("propName")
- 遍历
  - obj.dynamicPropertyNames()

1
2
3
4
5
6


obj.setProperty("Full name", "Summer Festival")
obj.setProperty("Age", 16)
obj.setProperty("Gender", "female")
names = obj.dynamicPropertyNames()
for name in names:
 print(str(name, encoding="utf-8"))

使用 CSS

方法

subprocess ---- python shell tool

Mon, 01 Mar 2021 00:00:00 +0000

教程

https://pymotw.com/2/subprocess/

subprocess.run

参数
- check=True
  - 自动跳出 subprocess.CalledProcessError 异常

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27


class RunCommand:
 """Run the command and check if the command is success
 """
 def __init__(self, command: str, check=True, capture_output=True):
 self.command = command
 self.logger = logging.getLogger(self.__class__.__name__)
 # self.logger = logging.getLogger(str(self.__class__))
 self.success = True
 self.returncode = None
 self.check = check
 self.capture_output = capture_output

 def run(self) -> bool:
 """Run the command in the shell.
 """
 try:
 self.logger.info('try to run command: %s', self.command)
 ret = subprocess.run(shlex.split(self.command),
 check=self.check,
 capture_output=self.capture_output
 )
 self.returncode = ret.returncode
 except subprocess.CalledProcessError as e:
 self.logger.info('Failed to call command: %s', self.command)
 self.logger.exception(e)
 self.success = False
 return self.success

subprocess.Popen

与命令交互，可以取出命令输出内容
调用方式

Awk

Fri, 26 Feb 2021 00:00:00 +0000

Cheat Sheet

指定分隔符

1

awk -F "," '{print Awk}' ./filename.txt

多个 field 输出，使用 ","

1
2
3
4
5
6
7


# 输入
#figure-extract cuda12.2-1-move-app-v1 a74c57ab7c82 3 days ago 7.16GB
#table-extract cuda12.2-1-move-app 358de070777c 3 days ago 16.4GB
awk '{print $1,":",$2}'
# 输出
# figure-extract:cuda12.2-1-move-app-v1
# table-extract:cuda12.2-1-move-app

分隔符： -F ","

设置变量： -v

-v FS="\t"

与 unexpand 连用

unexpand 把空格转化成 tab(\t)字符

if 语句

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11


$ awk '{
 if ([]: >=35 && >= 35 && >= 35)
 print ,"=>","Pass";
 else
 print ,"=>","Fail";
 }' student-marks
Jones 2143 78 84 77 => Pass
Gondrol 2321 56 58 45 => Pass
RinRao 2122 38 37 => Fail
Edwin 2537 87 97 95 => Pass
Dayan 2415 30 47 => Fail

Curl

Thu, 25 Feb 2021 00:00:00 +0000

教程

curl 发送 POST 请求
- https://linuxize.com/post/curl-post-request/

POST 请求

参考
- https://linuxize.com/post/curl-post-request/
参数
- -X, –request
  - 可选值： POST, GET, …
- -F, –form
  - 背后机制：设置 Content-Type:multipart/format
  - 格式： -F 'key=value'
  - 用途：发送请求字段
- -d, –data
  - 背后机制：设置 Content-Type=application/x-www-form-urlencoded
  - 格式：
- -d 'key=value' -d 'key01=value01' –> 一次制定一个字段
- -d 'key01=value01&key02=value02' –> 多个字段
- -H, –header

scp command

Thu, 25 Feb 2021 00:00:00 +0000

Tutorial

https://linuxhandbook.com/scp-command/

本地到远程

1
2
3


scp /local/file user@remote:/remote/folder

scp -r /local/folder user@remote:/remote/

文件夹： -r

远程到本地

1

scp user@remote:/remote/file /local/folder/

远程到远程

1

scp user@remote01:/remote/file user@remote02:/remote/folder

压缩传输： -C

传输过程使用压缩，但是两端仍然是解压文件

Minio

Tue, 23 Feb 2021 00:00:00 +0000

Cheat Sheet

docker 快速启动 server

1

docker run -p 9000:9000 -v /mnt/c/temp/minio/:/data -e "MINIO_ROOT_USER=matgene" -e "MINIO_ROOT_PASSWORD=matgene001" --rm minio/minio server /data

Java Thread Notes

Tue, 19 Jan 2021 00:00:00 +0000

wait() 和 notify()

参考
- https://www.liaoxuefeng.com/wiki/1252599548343744/1306580911915042

wait()

作用
- 暂时性释放锁
- 在 synchronized 块中间暂时释放锁
特性
- native 方法
调用位置
- 只能在 synchronized 方法内部执行
  - 对应 this 锁， this.wait()
- 在 synchronized 块内部执行
  - 对应锁对象的 wait() 方法
机理
- this.wait()
- 执行后释放锁
- 返回后再试图获取锁

notify() 和 notifyAll()

作用

Maven ---- Java package management tool

Sun, 17 Jan 2021 00:00:00 +0000

教程

快速入门:
- https://spring.io/guides/gs/maven/
重在说明子模块和父项目组织结构
- https://maven.apache.org/guides/introduction/introduction-to-the-pom.html#Project_Inheritance_vs_Project_Aggregation

常见命令

清理 mvn clean

编译 mvn compile

打包 mvn package

运行 run

eg: java -jar target/gs-maven-0.1.0.jar

本地安装 mvn install

install to local Repository

Scope

compile

编译时需要

Python abc module notes

Wed, 13 Jan 2021 00:00:00 +0000

作用

强制子类实现方法（类似 Java 接口）

教程

参考
- https://www.cnblogs.com/FG123/p/9463673.html

流程

定义抽象类

1
2
3
4
5
6
7


import abc


class CopyBase(metaclass=abc.ABCMeta):
 @abc.abstractmethod # 必须实现的方法
 def save(self):
 pass

定义子类，实现类

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11


class CopyPaper(CopyBase):
 def __init__(self):
 pass

 def save(self):
 print("copy paper")


class CopyQuestion(CopyBase): # 没有实现 抽象方法
 def __init__(self):
 pass

测试

Java BigInteger

Tue, 12 Jan 2021 00:00:00 +0000

sign-magnitude BigInteger

参考

https://stackoverflow.com/a/42913853

1
2


byte[] arr = new byte[]{(byte) 1, (byte) 2, (byte) 3};
BigInteger num = new BigInteger(1, arr);

构造函数
- BigInteger(int signnum, byte[] magnitude)
- 取值
  - signnum

0 –> 0
-1 –> negative 负数
1 –> positive 正数
- byte[] magnitude
big-endian byte array
- 高位在末尾（右侧）
- 1000 0000 —> 0000 0001

java regex

Mon, 11 Jan 2021 00:00:00 +0000

教程

https://www.liaoxuefeng.com/wiki/1252599548343744/1306046817632290

流程

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13


 @Test
 public void testRegex(){
String s = "hel*o";
Pattern pattern = Pattern.compile(s); // * 创建正则
String source = "helllo helo hello there.";
Matcher m = pattern.matcher(source); // * 制作Match
int i = 1;
while(m.find()){ // * 使用 Match --> 进行正则操作，匹配 find, matches, replaceAll, ....
 System.out.println("m:" + m);
 System.out.println(i + " matched:" + source.substring(m.start(), m.end()));
}

 }

minio python api

Mon, 11 Jan 2021 00:00:00 +0000

教程

https://docs.min.io/docs/python-client-quickstart-guide.html

错误

1
2
3
4
5
6


client = Minio(
"127.0.0.1:9000", # * 这里 不要写协议头：http:// 或者 https://
access_key="matgene",
secret_key="matgene001",
# secure=False # * http --> secure=False, https secure=True(默认值)
)

参考
- https://github.com/minio/minio/issues/8161

Java Time and Date

Sun, 10 Jan 2021 00:00:00 +0000

老 API

参考
- https://www.liaoxuefeng.com/wiki/1252599548343744/1303791989162017

Date 类

创建
- new Date()

Calendar 类

创建
- Calendar.getInstance()
方法
- get(Calendar.YEAR)
- get(…)
- set(Calendar.YEAR, 2000)
- …

TimeZone 类

创建
- TimeZone.getDefault()

SimpleDateFormat

创建
- new SimpleDateFormat("yyyy-MM-dd HH:mm:ss")
方法
- format(Date)

Org_babel

Sun, 10 Jan 2021 00:00:00 +0000

功能点

switches

方法：
- -n : 显示行号
  - source block switches
  - 详情：rich format

代码预览

功能解释：

最终 执行 或者 导出 的代码，并不一定是看到的代码的样子
如果要预览后台真正使用的代码，就需要使用整个功能了

调用方法：

File class

Sat, 09 Jan 2021 00:00:00 +0000

教程

https://www.liaoxuefeng.com/wiki/1252599548343744/1298069154955297#0

路径分割符

File.seperator : "/" or "\"
File.pathSeperator: ":" or ";"

当前路径 pwd

参考
- https://stackoverflow.com/questions/4871051/how-to-get-the-current-working-directory-in-java

user.dir

1
2


 System.getProperty("user.dir")
 File(".").getCanonicalPath()

jvm 调用 application 位置

Paths

1

 Paths.get(".").toAbsolutePath().normalize().toString();

File 类

作用：目录和文件
用途：
1. 本文件路径的基本操作

Java Process

Sat, 09 Jan 2021 00:00:00 +0000

教程

https://www.cnblogs.com/aademeng/articles/6141627.html

创建

ProcessBuild().start() 创建
Runtime.getRuntime().exec() 创建

unittest

Fri, 08 Jan 2021 00:00:00 +0000

异常测试

1
2
3
4
5
6


class TestFormula(unittest.TestCase):
 def test_parse_forward_uncoupled_parse_error(self):
 f = 'H2O)'
 with self.assertRaises(ParseError) as e:
 Formula.parse_forward_with_bracket(f)
 self.assertTrue('With not coupled bracket' in str(e))

call_shell

Thu, 07 Jan 2021 00:00:00 +0000

教程

https://stackabuse.com/executing-shell-commands-with-python/

imageMagick

Wed, 06 Jan 2021 00:00:00 +0000

安装

1

sudo apt install imagemagick

报错

pdf security 报错

引用
- https://stackoverflow.com/a/53180170
方法

Well, I added

<policy domain="coder" rights="read | write" pattern="PDF" />

just before </policymap> in /etc/ImageMagick-7/policy.xml and that makes it work again, but not sure about the security implications of that.

截图

-crop

1

 convert -density 200 ./one.pdf -quality 100 -colorspace gray -crop 500x500+500+500 "./one_300.jpg"

geometry 参数意义

参考

nlp notes

Wed, 06 Jan 2021 00:00:00 +0000

教程

nlp 项目组

DARPA COSMOS

sentence_parsing

Tue, 05 Jan 2021 00:00:00 +0000

教程

宾州树库
- https://www.nltk.org/book/ch08.html

句法结构分析

sentence -> clauses -> phrases -> words
- 句子 -> 从句 -> 短语 -> 单词

单词

N(oun)
- NN (singular noun)
- NNS (plural noun)
- NNP (singular proper noun)
  - 单数专有名词
    - 如人名，地名，物名等等
V(erb)
Adj
Adv
Det

Stanza Notes

Tue, 05 Jan 2021 00:00:00 +0000

入门教程

ipython
- https://github.com/stanfordnlp/stanza/blob/master/demo/Stanza_Beginners_Guide.ipynb

数据对象和注解 Data Objects and Annotations

Document
Sentence
Token
Word
Span
others …

POS (part of speech)

POSProcessor

upos

包含 universal pos 标记

Universal pos tags 类型

官方资料
- https://universaldependencies.org/u/pos/
个人理解
- 标注词性，词的类型
  - 是名词还是动词
  - 并不说明跟其它词的关系

xpos

tree bank-specific POS 标记
用于语法树解析

xpos 类型

官方资料

sgml notes

Wed, 30 Dec 2020 00:00:00 +0000

Sgml entity list

PubMed Data Provider Documentation: SGML Entity List

ChemicalTagger Notes

Tue, 29 Dec 2020 00:00:00 +0000

分词

化学物质对 "-" 敏感

grobid-quantities

Tue, 29 Dec 2020 00:00:00 +0000

文献

软件对应论文

title: Automatic Identification and Normalisation of Physical Measurements in Scientific Literature
doi: https://doi.org/10.1145/3342558.3345411

AI Notes

Fri, 25 Dec 2020 00:00:00 +0000

社区网站

模型收集网站
- hugging face, AI 的 github
- Hugging Face – The AI community building the future.
AI 产品收集和社区讨论
- AI Product Hub - Find the best new AI Products
- aiproduct on reddit

工具

模型效果分析工具

google LIT: Language Interpretability Tool(LIT)
- web ui
- GitHub - PAIR-code/lit: The Language Interpretability Tool: Interactively ana…
hugging face

Tensorflow Notes

Fri, 25 Dec 2020 00:00:00 +0000

tensorflow-gpu 安装

stackoverflow
- https://stackoverflow.com/questions/51306862/how-do-i-use-tensorflow-gpu
官网
- https://www.tensorflow.org/install/gpu

windows

参考
- https://zhuanlan.zhihu.com/p/94220564?utm_source=wechat_session
步骤
- python3 x64
- 查看 nvidia drive cuda 支持版本
- 下载 cuda
  - https://link.zhihu.com/?target=https%3A//developer.nvidia.com/cuda-downloads
- 下载 cudnn
  - https://link.zhihu.com/?target=https%3A//developer.nvidia.com/rdp/cudnn-download
  - 把 cudnn 解压得到的 lib, bin, include 复制到 cuda 安装目录

在 wsl2 上使用 tensorflow-gpu

参考
- https://docs.nvidia.com/cuda/wsl-user-guide/index.html
windows 端：
- 安装使 wsl2 支持 gpu 的驱动

Sciencebeam-Gym Notes

Thu, 24 Dec 2020 00:00:00 +0000

Sciencebeam-Gym 项目 git

https://github.com/elifesciences/sciencebeam-gym
原始使用目标
- elif: https://elifesciences.org/

数据集 datasets

介绍：
- https://grobid.readthedocs.io/en/latest/End-to-end-evaluation/
数据：
- https://zenodo.org/record/3873702#.X-RG8TTitPY

Systemd Notes

Fri, 18 Dec 2020 00:00:00 +0000

教程

archlinux
- https://wiki.archlinux.org/index.php/systemd#Basic_systemctl_usage

基本操作

systemctl enable <unit>
- systemctl enable –now
systemctl disable
systemctl mask
- systemctl unmask

电源管理（开关机）

systemctl reboot
systemctl poweroff
systemctl suspend
systemctl hibernet

编写 sytemd 服务

参考

Visual Studio Notes

Thu, 17 Dec 2020 00:00:00 +0000

各种 Visual C++ 编译工具 prompt command 区别

参考
- stackoverflow
  - https://stackoverflow.com/questions/27246382/what-is-the-difference-between-x64-native-tools-command-prompt-and-x64-cross-too
- 官方
  - https://docs.microsoft.com/en-us/cpp/build/building-on-the-command-line?view=msvc-160

VS 提供的工具

 Developer Command Prompt for VS 2019
 VS2013 ARM Cross Tools Command Prompt
 VS2013 x64 Cross Tools Command Prompt
 VS2013 x64 Native Tools Command Prompt
 VS2013 x86 Native Tools Command Prompt

默认工具

名称
- Developer Command Prompt for VS 2019
- 名称上不写平台
机理

Conda Notes

Wed, 16 Dec 2020 00:00:00 +0000

Tutorials

官方
- https://docs.conda.io/projects/conda/en/latest/user-guide/tasks/manage-environments.html#using-pip-in-an-environment

导入导出环境

pip 兼容 —- 制作 requirements.txt

1

conda list > requirements.txt

conda 导出环境

1
2
3
4
5


conda env export > environment.yaml # 所有

conda env export -n py37 > py37.yaml # 给定环境

conda env export --help

conda 导入环境（多个）

1

conda env create -f environment.yaml

win10 异常

问题简述

regex ---- python regex

Mon, 14 Dec 2020 00:00:00 +0000

Tutorial

python 官方
- re — Regular expression operations — Python 3.11.1 documentation
Regular Expressions | Regex Examples | Regexp Tutorials | OCPsoft
- 常用例子解说
Cover - Understanding Python re(gex)?
- 类似一个 manual, 另外有不少高级用法，如：使用 perl regex 语法

工具

可视化测试工具
- regex101
正则生成随机字符串

seq ---- Sequence linux command

Mon, 14 Dec 2020 00:00:00 +0000

作用

枚举，类似 python range

eg:

1
2
3
4


seq 10
# 3
# 2
# 1

Bash Notes

Fri, 11 Dec 2020 00:00:00 +0000

命令

gpg

gnu privacy guard

重定向

heredoc

eg:

1
2
3
4
5


sudo tee /etc/docker/daemon.json <<-'EOF'
{
 "registry-mirrors": ["https://o8npla25.mirror.aliyuncs.com"]
}
EOF

使用 XDG_HOME 存放 .bashrc

参考：

HiPhish's Workshop

把下面的内容存放到 /etc/profile.d/bash_xdg.sh 中：

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17


# Make bash follow the XDG_CONFIG_HOME specification
_confdir=${XDG_CONFIG_HOME:-$HOME/.config}/bash
_datadir=${XDG_DATA_HOME:-$HOME/.local/share}/bash

# Source settings file
if [ -d "$_confdir" ]; then
 for f in bash_profile .bashrc ; do
 [ -f "$_confdir/$f" ] && . "$_confdir/$f"
 done
fi

# Change the location of the history file by setting the environment variable
[ ! -d "$_datadir" ] && mkdir -p "$_datadir"
HISTFILE="$_datadir/history"

unset _confdir
unset _datadir

string 字符串

基本语法

连接字符串

实现：连着写即可

tar ---- linux file compression and archive command

Fri, 11 Dec 2020 00:00:00 +0000

快速 + 多线程压缩

使用 pigz 辅助实现
1

tar -cf - /var demo |pigz -9 -p3 > test.tar.gz
- 注意
  - -cf 后面的 "-"
- 它会最后被 > test.tar.gz 取代
- 参考
  - https://stackoverflow.com/questions/12313242/utilizing-multi-core-for-targzip-bzip-compression-decompression

已有 .tar 文件操作

参考：

man tar, GNU style syntax
- 有效功能只有 gnu 模式才存在，比如删除文件 --delete

删除文件

注意：

Shell Regex Notes

Thu, 10 Dec 2020 00:00:00 +0000

字符集

ssh

Thu, 10 Dec 2020 00:00:00 +0000

工具收集

sshpass
- 个人环境的 ssh 密码输入工具
- 注意：不安全，不建议用于服务器
- 参考：
  - 系统运维|sshpass：一个很棒的免交互 SSH 登录工具，但不要用在生产服务器上
ssh tunnel
- linux: =autossh 命令
```
autossh -M 4010 -NR 22:remote_host:8822 remote_host
```
  - GitHub - Autossh/autossh: Automatically restart SSH sessions and tunnels
- windows: sshtunnel-ng 软件

httpd ---- python httpd library

Wed, 09 Dec 2020 00:00:00 +0000

如何创建文件共享网站

类似 httpd
参考
- https://stackabuse.com/serving-files-with-pythons-simplehttpserver-module/

命令创建

1
2
3
4
5


python -m http.server

python -m http.server <Port>

python -m http.server --help

snap

Wed, 09 Dec 2020 00:00:00 +0000

速度慢

更改 /etc/hosts

1

151.101.62.217 fastly.cdn.snapcraft.io

参考
- https://askubuntu.com/questions/1164523/installing-snaps-in-china-is-too-slow

代理

参考：为Snapd设置代理 - 简书

Virtualbox

Wed, 09 Dec 2020 00:00:00 +0000

MacOS 安装

virtualbox 破解程序

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13


cd "d:\Program Files\Oracle\VirtualBox"

VBoxManage.exe modifyvm "macos sierra" --cpuidset 00000001 000106e5 00100800 0098e3fd bfebfbff

VBoxManage setextradata "macos sierra" "VBoxInternal/Devices/efi/0/Config/DmiSystemProduct" "iMac11,3"

VBoxManage setextradata "macos sierra" "VBoxInternal/Devices/efi/0/Config/DmiSystemVersion" "1.0"

VBoxManage setextradata "macos sierra" "VBoxInternal/Devices/efi/0/Config/DmiBoardProduct" "Iloveapple"

VBoxManage setextradata "macos sierra" "VBoxInternal/Devices/smc/0/Config/DeviceKey" "ourhardworkbythesewordsguardedpleasedontsteal(c)AppleComputerInc"

VBoxManage setextradata "macos sierra" "VBoxInternal/Devices/smc/0/Config/GetKeyFromRealSMC" 1

ubuntu virtualbox 不能联网问题

解决方法

Windows Terminal Notes

Mon, 07 Dec 2020 00:00:00 +0000

快捷键

切换 Tab 快捷键

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27


"keybindings":
[
 // Copy and paste are bound to Ctrl+Shift+C and Ctrl+Shift+V in your defaults.json.
 // These two lines additionally bind them to Ctrl+C and Ctrl+V.
 // To learn more about selection, visit https://aka.ms/terminal-selection
 { "command": {"action": "copy", "singleLine": false }, "keys": "ctrl+shift＋c" },
 { "command": "paste", "keys": "ctrl+shift+v" },

 // Press Ctrl+Shift+F to open the search box
 { "command": "find", "keys": "ctrl+shift+f" },

 // Press Alt+Shift+D to open a new pane.
 // - "split": "auto" makes this pane open in the direction that provides the most surface area.
 // - "splitMode": "duplicate" makes the new pane use the focused pane's profile.
 // To learn more about panes, visit https://aka.ms/terminal-panes
 { "command": { "action": "splitPane", "split": "auto", "splitMode": "duplicate" }, "keys": "alt+shift+d" },

 { "command": { "action": "switchToTab", "index": 0 }, "keys": "alt+1" },
 { "command": { "action": "switchToTab", "index": 1 }, "keys": "alt+2" },
 { "command": { "action": "switchToTab", "index": 2 }, "keys": "alt+3" },
 { "command": { "action": "switchToTab", "index": 3 }, "keys": "alt+4" },
 { "command": { "action": "switchToTab", "index": 4 }, "keys": "alt+5" },
 { "command": { "action": "switchToTab", "index": 5 }, "keys": "alt+6" },
 { "command": { "action": "switchToTab", "index": 6 }, "keys": "alt+7" },
 { "command": { "action": "switchToTab", "index": 7 }, "keys": "alt+8" },
 { "command": { "action": "switchToTab", "index": 8 }, "keys": "alt+9" }
]

放置位置

selenium ---- a python netcrawler tool

Tue, 01 Dec 2020 00:00:00 +0000

教程

中文
- http://www.python3.vip/tut/auto/selenium/skills_1/

选择框

radio button

单选框，列表

docker notes

Sun, 22 Nov 2020 00:00:00 +0000

教程

包括初级、中级、高级教程： 🏗️ Getting Started with Docker | dockerlabs
- linux 内核能力： Capabilities | dockerlabs

docker compose 功能速查

Docker Compose Cheatsheet – Collabnix

python 调用 docker

参考：

GitHub - docker/docker-py: A Python library for the Docker Engine API

docker 命令速查手册 cheat sheet

container

快捷创建 container

docker run

创建后台 container

docker run -d

后台运行，detach container

Ctr + P Ctrl + Q

前台运行 container

docker attach

执行命令，开启的 container

docker exec <container> <your-command>

运行状态查询 container

docker ps -a

列出 container

docker ps
docker container ls

重命名 container

docker rename

删除 container

docker rm -f <container>

删除所有终止的容器

docker container prune
我的命令

k8s notes

Sun, 22 Nov 2020 00:00:00 +0000

教程

命令大全

Docker Vs k8s(Kubernets)

https://www.cnblogs.com/misswangxing/p/10669444.html

安装

Ubuntu 20.04 使用 kubeadm

集群(cluster)创建工具比较

参考
工具
- MiniKube
  - 单机，学习
- Kind
  - 一个 container 一个 node
- Kubeadm
  - 要求高
- K3S
  - 不使用 docker, 减配版 k8s

network addons

网络插件选择

sed notes

Sun, 22 Nov 2020 00:00:00 +0000

教程

GNU 官方
- https://www.gnu.org/software/sed/manual/html_node/index.html#Top

windows sed 类似工具

参考：

-relace 运算符： about Comparison Operators - PowerShell | Microsoft Learn

Cheat Sheet

多行处理

范围表示

"3,4a hello"
"3,$a hello"
- $ –> 到行尾

insert 前面插入

sed -e "3i hello"

append 后面追加

sed -e "3a hello"

delete 删除

sed -e "3,5d"

change 修改

sed -e "3c hello" –> 修改成 hello

print 打印输出

sed -n "3,4p" —> 与 -n 连用

单行编辑

简单替换

sed -e "s/root/my-name/"

替换次数

sed -e "s/root/my-name/3"

全局替换

sed -e "s/root/my-name/3g"

支持正则 regex

echo "home/demo.ZIP" | sed -e "s\.ZIP$/.zip/3g"
注意

find command notes

Wed, 28 Oct 2020 00:00:00 +0000

教程

https://shapeshed.com/unix-find/

-type

指定搜索结果类型
可选值
- d: directory 目录
- f: file 文件

-name

指定搜索名称:

可以使用通配符

eg:

1
2


find . -name "*public*" -type d
# result : ./public

-regex

指定搜索名称:

xargs command notes

Wed, 28 Oct 2020 00:00:00 +0000

Tutorials

https://shapeshed.com/unix-xargs/

用途

处理标准输出 stdout
转化成合适的格式
再传递给另一个命令

简单使用

1

find . -links 1 -type f |xargs ls -l

xargs 直接后跟命令

与 find -exec your_command {} \; 比较

xargs 更快速

xargs 一次传输所有参数

find -exec {} \; 一次传输一个参数

-t 打印执行的命令

-p 打印执行的命令和 “执行的用户”

-I 执行多条命令

1

 cat foo.txt | xargs -I % sh -c 'echo %; mkdir %'

-I R your_command

Computational Chemistry

Sat, 24 Oct 2020 00:00:00 +0000

文件格式

.xyz 文件

二维分子空间位置信息
尺寸
- 以埃米为单位
参考信息
- wiki: https://en.wikipedia.org/wiki/XYZ_file_format

Quantum Notes

Fri, 23 Oct 2020 00:00:00 +0000

教程

本源量子科普漫画
- https://learn-quantum.com/EDU/Cartoon.html

量子纠缠 Quantum Entanglement

多个粒子
- 相互作用
  - 强相互作用
- 无法单独描述单个粒子性质
- 只能描述整体系统的性质
经典力学里，没有类似现象
超距作用

IntelliJ ---- Java IDE

Wed, 21 Oct 2020 00:00:00 +0000

创建 gradle 项目

没有 gradle-wrapper.properties

原因
- 没有 gradle wrapper 相关文件
- intellij Bug
  - 公司电脑没问题，家中的有问题
解决
- 运行命令
  1
  
  gradle wrapper

没有 src 文件夹

解决

在 build.gradle 文件中，添加如下代码

 1
 2
 3
 4
 5
 6
 7
 8
 9
10


task 'create-dirs' {
doLast {
sourceSets*.java.srcDirs*.each {
it.mkdirs()
}
sourceSets*.resources.srcDirs*.each {
it.mkdirs()
}
}
}

在 gradle tasks 中 Other 分类下运行 create-dirs 任务

快捷键

隐藏侧边栏

Ctrl + Shift + F12

查看所有补全内容

Ctrl + .

cracking

Clash

Fri, 16 Oct 2020 00:00:00 +0000

linux 使用 clash GUI

clash_for_windows_linux

说明： clash windows 项目组开发的 linux 版本

参考：

linux下使用clash(GUI) - 简书

安装包：

v0.19.24

安装方法：

解压缩后，执行 ./cfw

Tap 模式

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43


mixin:
 dns:
 enable: true
 enhanced-mode: redir-host # 或 fake-ip
 listen: 0.0.0.0:53
 nameserver:
 - 223.5.5.5
 interface-name: 以太网# 物理网卡名称




mixin:
 interface-name: 以太网
 dns:
 enable: true
 enhanced-mode: redir-host
 listen: 0.0.0.0:53
 nameserver:
 - https://doh.dns.sb/dns-query
 - https://dns.adguard.com/dns-query

mixin:
 interface-name: 以太网 # 物理网卡名称
 dns:
 enable: true
 enhanced-mode: fake-ip
 listen: 0.0.0.0:53
 nameserver:
 - 223.5.5.5
 fake-ip-filter:
 - 'dns.msftncsi.com'
 - 'www.msftncsi.com'
 - 'www.msftconnecttest.com'

mixin:
 dns:
 enable: true
 enhanced-mode: redir-host # 或 fake-ip
 listen: 0.0.0.0:53
 nameserver:
 - 223.5.5.5
 interface-name: InnerWeb # 物理网卡名称

clash service

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15


[Unit]
Description=Clash Backend
After=network.target

[Service]
ExecStart=/home/sawyer/bin/clash -d /home/sawyer/.config/clash
ExecStop=/bin/kill -HUP $MAINPID
KillMode=process
Restart=on-failure
RestartPreventExitStatus=255
Type=simple
Restart=on-failure

[Install]
WantedBy=multi-user.target

archlinux 路径

Chemistry

Wed, 14 Oct 2020 00:00:00 +0000

教程

Home - Chemistry LibreTexts

名词

保留时间

色谱，专业名词
retension time
百科
解释
- 从进样到波峰的时间
  - 即，在色谱柱中停留的时间
相关名词
- 校正保留时间
  - 即减去空气的保留时间
- 相对保留时间

Cython Notes

Mon, 12 Oct 2020 00:00:00 +0000

教程

官方 Tutorial
- 官方入门

编译单个文件

制作 setup.py

1
2
3
4
5
6


from setuptools import setup
from Cython.Build import cythonize

setup(
 ext_modules = cythonize("helloworld.pyx")
)

这里假设我们要处理的脚本是 helloworld.pyx

命令行执行
1

python setup.py build_ext --inplace

直接使用 .pyx 模块

需要添加的代码

obfuscation ---- python 代码混淆

Mon, 12 Oct 2020 00:00:00 +0000

工具

pyminifier
pyarmor
- 可以与 pyinstaller 一起使用
  - 低层调用 pyinstaller 打包
更多
- https://zhuanlan.zhihu.com/p/54296517
GitHub - 0sir1ss/Anubis: A Python script to obfuscate and protect your code t…
Carbon: GitHub - 0sir1ss/Carbon: A Python script to obfuscate and protect your code b…
- 删除 comment
- 重命名 class, variables, functions, parameters

traceback ---- python exception helper module

Mon, 12 Oct 2020 00:00:00 +0000

Tutorial

作用

TraceBack 的打印和记录

sys.exc_info()

返回值
1. 异常类型
2. 异常 object(异常实例)

cmd --- windows cmd.exe

Sun, 11 Oct 2020 00:00:00 +0000

工具

clink: 提供类似 bash 的行编辑功能

CMD 默认编码修改

前不知道怎么改的，CMD 的代码页被默认设置成了 65001

但我右击 CMD 标题，选择‘默认值’，显示默认却是 936，但为何每次打开都是 65001 呢

Compile Python Files

Fri, 09 Oct 2020 00:00:00 +0000

Tutorials

工具

cython
mypyc
- 使用带 annotation 类型注解的 .py 文件，编译制作 .so 文件
- 速度提升
  - 约十倍
- 注意
  - mypy 类型检查出错，可能编译不能通过，或者导致编译的程序有问题
  - 因此，最好 mypy 检查无错误，无警告

优化字节码文件 .pyc Vs. .pyo

.pyc 和 .pyo 文件

DevOps Notes

Sun, 27 Sep 2020 00:00:00 +0000

Tutorials

wikipedia: https://en.wikipedia.org/wiki/devops#definition
专业术语
- http://www.360doc.com/content/18/0825/18/99071_781155847.shtml

名称 devops

全称
- software development and it operations
  - 软件开发与 it 运营

特征

与 agile development(敏捷开发) 交集很多
- 第一个会议，就是 agile development 工程师主办的
定义

Data Scientce

Fri, 25 Sep 2020 00:00:00 +0000

可视化教程

pyviz
- 汇总各种可视化工具
- 这是一个工具介绍网站，帮助大家介绍和推荐合适的数据处理工具
- 工具列表
  - All Tools — PyViz 0.0.1 documentation
- 提供的教程列表
  - Tutorials — PyViz 0.0.1 documentation
    - matplotlib
    - bokeh
    - holoviz
    - jupyter wikdget
pydata

Chrome

Thu, 24 Sep 2020 00:00:00 +0000

禁用快捷键

GitHub - google/disable-keyboard-shortcuts: Chrome extension to disable keybo…

diable keyboard shortcuts
- 这是一个 chrome extension.
如何配置
- 安装完成后
  - 打开这个网址：chrome://extensions/shortcuts
  - 记录需要禁用的快捷键即可

matplotlib ---- python plotting library

Tue, 22 Sep 2020 00:00:00 +0000

转换绘制结果成 np.ndarray

https://stackoverflow.com/questions/7821518/matplotlib-save-plot-to-numpy-array

字符串方式

fig.canvas.tostring_rgb

np.fromstring

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14


import matplotlib.pyplot as plt
import numpy as np

# Make a random plot...
fig = plt.figure()
fig.add_subplot(111)

# If we haven't already shown or saved the plot, then we need to
# draw the figure first...
fig.canvas.draw()

# Now we can save it to a numpy array.
data = np.fromstring(fig.canvas.tostring_rgb(), dtype=np.uint8, sep='')
data = data.reshape(fig.canvas.get_width_height()[::-1] + (3,))

ByteIO 方式

fig.savefig(byteioObj, format='png', dpi=180)
byteioObj.seek(0)
numpy.frombuffer(byteioObj)
cv2.cvtColor

Emacs Editing Commands

Mon, 21 Sep 2020 00:00:00 +0000

M-z zap-to-char

剪切到后面第一次出现给定的字符

M-c capitalize-word

给定单词，首字母大写

M-l downcase-word

注意
- 光标生效位置
  - 单词的开头
- 完成操作后，光标位置
  - 单词尾部

M-u upcase-word

C-x C-l downcase-region

全部转成小写

C-x C-u upcase-region

全部转成大写

M-s isearch prefix 搜索

M-s .

isearch 光标下的 symbol(单词）

M-s _

isearch symbol

M-s w isearch

搜索单词 word

M-s o search occured symbol

右侧弹出搜索结果

M-s h highlight prefix 高亮

M-s h .

高亮当前 symbol

M-s h u

取消高亮

M-h M-w eww search

M-r 在 top, middle, bottom 三个位置移动光标

类似 vim 命令 H, M, L

M-y yank pop

删除上一次 yank 存储的内容

markdown ---- a simplified notes making markup language

Sat, 19 Sep 2020 00:00:00 +0000

教程

latex
- https://github.com/adam-p/markdown-here/wiki/Markdown-Cheatsheet
typora 官方支持
- https://support.typora.io/
中文
- GitHub - younghz/Markdown: Markdown 基本语法。

链接和图片

链接

1
2
3
4
5
6
7
8


 链接
 [text](real path link)
 [text][reference link]


 图片
 ![text](real path link)
 ![text](reference link)

引用类型 reference link

用来简化输入，具体的链接，在文末或者某个地方说明即可

operators ---- python operator overloading Python 运算符重载

Fri, 18 Sep 2020 00:00:00 +0000

python 运算符与特殊函数对应关系

in —- $contains$

https://docs.python.org/3.6/reference/expressions.html#in

注意
- 对于 builtin.list 类型
  - 内部比较的好像是引用

1
2
3
4
5
6
7
8
9


class Hello:
 pass


if __name__ == '__main__':
 assert (Hello() in [Hello()]) is False

 t = Hello()
 assert (t in [t]) is True

lombok notes

Wed, 16 Sep 2020 00:00:00 +0000

教程

https://blog.csdn.net/riemann_/article/details/105374987?utm_medium=distribute.pc_relevant_t0.none-task-blog-BlogCommendFromMachineLearnPai2-1.edu_weight&depth_1-utm_source=distribute.pc_relevant_t0.none-task-blog-BlogCommendFromMachineLearnPai2-1.edu_weight

@Getter and @Setter

https://projectlombok.org/features/GetterSetter

作用目标

类
字段

生成 gettter 名称

普通类型
- foo –> getFool()
boolean
- foo –> isFool()

javadoc 转换

@param @return 会被自动转换到生成代码的对应位置
- 原始代码

Yaml ---- a kind of markup language

Wed, 16 Sep 2020 00:00:00 +0000

Tutorials

中文视频 https://www.bilibili.com/video/BV1Et411Y7tQ?p=9

字符串

"", 双引号
- 进行转义
  - eg: words: "Lucy \n Lily" 会换行
'', 单引号
- 转移字符无效，只是普通字符
  - eg: words: "Lucy \n Lily" 不会换行

Map, Dict

多行模式
- ":"
  - 冒号分割 + 键值对
    1 2 3
    
    pet: type: cat age: 13
单行模式

Gradle Notes

Tue, 15 Sep 2020 00:00:00 +0000

教程

快速入门 https://spring.io/guides/gs/gradle/

gradle + spring boot https://docs.spring.io/spring-boot/docs/2.3.2.RELEASE/gradle-plugin/reference/html/

运行

配置

1
2
3


 apply plugin: 'application'

 mainClassName = 'hello.HelloWorld'

gradlew run

打包

配置

1
2
3
4


 jar {
baseName = 'gs-gradle'
version = '0.1.0'
 }

gradlw build

依赖

1
2
3
4


 dependencies {
compile "joda-time:joda-time:2.2"
testCompile "junit:junit:4.12"
 }

版本

1
2


 sourceCompatibility = 1.8
 targetCompatibility = 1.8

命令

gradlew tasks

gradlew build

配置

Java IO

Sun, 13 Sep 2020 00:00:00 +0000

教程

java.io 包教程，英文 https://www.tutorialspoint.com/java/io/index.htm

输入输出，中文视频教程 https://www.w3cschool.cn/minicourse/play/java_io_my#menulist

文件与路径

File 类

用于文件本身属性和操作（增删改查）

Java 7 新包

java.nio.file https://blog.csdn.net/qq877728715/article/details/104499687/

Files 类

文件复制，linux 属性 rwx 等高级功能

Path 类

新工具，用来取代 java.io.file.File 类

相对路径

https://stackoverflow.com/questions/204784/how-to-construct-a-relative-path-in-java-from-two-absolute-paths-or-urls

Java Collections Notes

Thu, 10 Sep 2020 00:00:00 +0000

map

使用

使用 Map<KeyType, ValueType> 声明引用变量

使用实现类（如：new HashMap<>()），创建被引用对象

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15


 @RestController
 public class ProductServiceController {
private static Map<String, Product> productRepo = new HashMap<>();
static {
 Product honey = new Product();
 honey.setId("1");
 honey.setName("Honey");
 productRepo.put(honey.getId(), honey);
 
 Product almond = new Product();
 almond.setId("2");
 almond.setName("Almond");
 productRepo.put(almond.getId(), almond);
}
 }

实现类

HashMap

pyautogui Notes

Tue, 08 Sep 2020 00:00:00 +0000

Tutorials

官方文档: https://pyautogui.readthedocs.io/en/latest/quickstart.html

获取位置 position()

屏幕尺寸 size()

给定位置是否在屏幕内 onScreen(x, y)

初始配置

调用延时 pyautogui.PAUSE = 2.5

设置调用延时
- 每一次调用 pyautogui 之后, 会被延时多久

中止方式 pyautogui.FAILSAFE = True

鼠标移动到左上角，中止执行

移动操作

绝对移动 moveTo(x, y, duration=num_seconds)

即，相对于原点（左上角）的位置
参数

pywin32 Notes

Tue, 08 Sep 2020 00:00:00 +0000

Tutorials and Documentations

https://stackoverflow.com/questions/5481686/why-cant-i-find-any-pywin32-documentation-resources

http://docs.activestate.com/activepython/2.6/pywin32/PyWin32.HTML

https://pbpython.com/windows-com.html

numpy -- Python Matrix Compputing Library

Mon, 07 Sep 2020 00:00:00 +0000

教程

https://github.com/yishuixing/numpy-tutorial
- 视频教程

概念

Axis

用途
- 用来说明维度，第几个维度
取值

0

row, 行

1

column, 列

2

panel, 层

-1

last, 最后一维
使用场景
- np.stack
  - axis 直接指定堆叠操作的维度，其它维度，依次用单个元素的 shape 成员取代
  - 0 – 把数据在不同的行之间堆叠

Meghanada Notes

Sat, 05 Sep 2020 00:00:00 +0000

不能使用

可能是因为 emacs 以前的缓存造成的拖累
- 解决方法
  1. 删除 .emacs.d/workspace 文件夹
  2. 重启

调试方法

shell 启动

1

 java -jar ~/.emacs.d/meghanada/meghanada-1.3.1.jar

argparse

Thu, 03 Sep 2020 00:00:00 +0000

argparse 模块, 辅助模块 shlex

辅助模块 shlex

eg: shlex.split('lpp –species-list Na NaH')

弹出错误提示

使用 parser.error("Your message.")

https://stackoverflow.com/questions/6722936/python-argparse-make-at-least-one-argument-required

 1
 2
 3
 4
 5
 6
 7
 8
 9
10


import argparse

parser = argparse.ArgumentParser()
parser.add_argument('-process')
parser.add_argument('-upload')

args = parser.parse_args()

if not (args.process or args.upload):
parser.error('No action requested, add -process or -upload')

Action 类

查看原码

itertools ---- Python Iteration Module

Thu, 03 Sep 2020 00:00:00 +0000

Tutorials

官方教程： https://docs.python.org/3/library/itertools.html#itertool-functions

无限迭代器

count(start, step)

起点开始，无穷迭代, 每次返回值（yield）增加给定 step
1 2

itertools.count(1) itertools.count(1, 3)

cycle(iterable)

提供的材料，被无穷迭代

1
2


itertools.cycle([1, 2, 3])
itertools.cycle('ABC')

repeat(object, times_count)

给定元素，被迭代 N 次

Python 类型检查 ---- typing 模块

Thu, 03 Sep 2020 00:00:00 +0000

Tutorials

PEP 484:
- 英文：https://www.python.org/dev/peps/pep-0484/
- 中文：https://bbs.huaweicloud.com/blogs/143892
简略介绍，PEP 483: https://www.python.org/dev/peps/pep-0483/
PEP 544
- Protocols: Structural subtyping (static duck typing)
- 用来规定鸭子类型的检验 typecheck
- 英文：https://www.python.org/dev/peps/pep-0544/
mypy 泛型教程
- 英文：https://mypy.readthedocs.io/en/latest/generics.html

Subtype 概念（子类型）

type tree
- 类型树
  - 类似 class tree (类树)
注意

python 代码规范

Wed, 02 Sep 2020 00:00:00 +0000

Lambda functions λ 函数更规范的使用

https://treyhunner.com/2018/09/stop-writing-lambda-expressions/

错误用法

lambda 赋给变量

错误

1

normalize_case = lambda s: s.casefold()

正确
- 定义单行，正常函数

1

def normalize_case(s): return s.casefold()

多余的转换

错误

在 lambda 中又调用同样接口的函数

1

sorted_numbers = sorted(numbers, key=lambda n: abs(n))

正确
- 直接使用已有函数，不要多此一举

C# Notes

Wed, 26 Aug 2020 00:00:00 +0000

反编译工具

https://blog.csdn.net/kongwei521/article/details/54927689

dotPeek
- 好用，免费
- 在线源码支持
.Net Reflector
ILSpy/dnSpy
- dnSpy 报病毒

String 类型

System.String

两种格式
- "a string"
  - ""
- @"a string, c:home"
  - @""
  - 相当于其它语言 r"a string c:home"
  - 不把 "\" 当成转义符，而是普通字符
  - crude string
  - 支持换行，类似 python """ a string """, doc string

junit ---- Java Unit Test Framework

Wed, 26 Aug 2020 00:00:00 +0000

Tutorials

https://www.tutorialspoint.com/junit/junit_overview.htm

概述

Test Case
- 用来测试一段代码（类的方法）的最小单元
测试一个问题
- 最少需要两个 Test Case
  - 一个“正确”的结果测试 positive
  - 一个“失败”的结果测试 negative

junit 安装

不需要具体安装
放到依赖中即可

运行

使用 JUnitCore.run(your_test_class.class) 运行

Java Servlet

Thu, 13 Aug 2020 00:00:00 +0000

Tutorials

https://www.runoob.com/servlet/servlet-intro.html

https://www.javatpoint.com/servlet-tutorial

Servlet 简介

一种用于创建 web 应用的技术

用于创建动态 web Application
an API
- 包括多个接口和类
创建一个 Servlet 必须要实现 Servlet 的接口
用于扩展服务器 Server, 处理 Request 的功能
Servlet 是一个 Web component, 用于部署到服务器来创建动态网页

Web Application

组成组件 Components

Servlet
JSP
Filter
HTML
CSS
JavaScript

Servlet VS CGI

https://www.javatpoint.com/servlet-tutorial

JSP ---- Java Template tool to make web pages

Thu, 13 Aug 2020 00:00:00 +0000

Tutorials

https://www.runoob.com/jsp/jsp-tutorial.html

JSP 简述

Java Server Pages

响应 Request, 动态生成 Html, XML 等文档的 Web 网页技术标准
以 html 模板 + 嵌入式 Java 代码的形式编写

文件后缀 *.jsp

以 Java 为脚本语言

以 <% %> 标签插入 java 代码

 1
 2
 3
 4
 5
 6
 7
 8
 9
10


 <html>
 <head>
<title>第一个 JSP 程序</title>
 </head>
 <body>
<%
out.println("Hello World！");
%>
 </body>
 </html>

动态网页开发技术

以 Servlet 的形式在低层运行

环境搭建

jdk

Tomcat

JSP 调用流程

Web Server 收到 Request
Web Server 判断是 JSP 网页请求，把 Request 交给 JSP 引擎

Spring Boot notes

Thu, 13 Aug 2020 00:00:00 +0000

Tutorials

https://www.baeldung.com/spring-tutorial

https://www.tutorialspoint.com/spring_boot/index.htm

Rest Web Service

https://www.tutorialspoint.com/spring_boot/spring_boot_building_restful_web_services.htm

Resource Controller

URL 参数处理

类 @RestController

Model, View(这里没有), Controller 模型
把 URL 路由相关的输入，通过方法，映射到模型 Model 来处理，并返回这个模型

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20


 package com.example.restservice;

 import java.util.concurrent.atomic.AtomicLong;

 import org.springframework.web.bind.annotation.GetMapping;
 import org.springframework.web.bind.annotation.RequestParam;
 import org.springframework.web.bind.annotation.RestController;


 @RestController
 public class GreetingController {

private static final String template = "Hello, %s!";
private final AtomicLong counter = new AtomicLong();

@GetMapping("/greeting") 
public Greeting greeting(@RequestParam(value = "name", defaultValue = "World") String name) {
 return new Greeting(counter.incrementAndGet(), String.format(template, name));
}
 }

方法 @RequestMapping

映射路由到方法

Spring Notes

Thu, 13 Aug 2020 00:00:00 +0000

Tutorials

英文 https://www.tutorialspoint.com/spring/spring_overview.htm

中文 https://www.w3cschool.cn/wkspring/pesy1icl.html

Dependency Injection(DI) 依赖注入

Inversion of Control(IoC) 控制反转的一个具体实例
解说：
- 所谓依赖注入，就是由 IOC 容器在运行期间，动态地将某种依赖关系注入到对象之中
来历：
- 对于控制反转

click ---- cli 工具，来自 flask

Fri, 07 Aug 2020 00:00:00 +0000

教程

https://click.palletsprojects.com/en/7.x/quickstart/

python2 和 python3 的兼容

click.echo() 代替 print()

@click.command()

把函数转化成命令行命令

@click.option() (可选参数)

映射函数参数 <—> 命令行可选选项 option 参数

@click.argument() (位置参数)

映射函数参数 <—> 命令行位置选项 option 参数

flask

Fri, 07 Aug 2020 00:00:00 +0000

教程

快速入门
高级教程
- GitHub - realpython/discover-flask: Full Stack Web Development with Flask.
样版代码 boilerplate
- GitHub - realpython/flask-boilerplate: Boilerplate template for a Python Flas…

实战项目教程

GitHub - mjhea0/flaskr-tdd: Flaskr: Intro to Flask, Test-Driven Development (…

工具 list

工具列表

awesome-flask

virtualenv ---- python virtual environment manager

Fri, 07 Aug 2020 00:00:00 +0000

教程

https://packaging.python.org/guides/installing-using-pip-and-virtual-environments/#:~:text=To%20create%20a%20virtual%20environment,virtualenv%20in%20the%20below%20commands.&text=The%20second%20argument%20is%20the,project%20and%20call%20it%20env%20.

依赖的备份与还原（安装）

dump dependencies

1

pip freeze > requirements.txt

restore

1

pip install -r requirements.txt

创建工具

venv

python -m venv your_env_name

激活

linux + zsh
- 有效：
  - source /venv/bin/activate~
- 无效：
  - ./venv/bin/activate
  - . ./venv/bin/activate
    - 有时有效，有时失效

特点

python 标准库
python3.3 以后

参数

your_env_name

Python logging

Wed, 05 Aug 2020 00:00:00 +0000

教程

https://docs.python.org/zh-cn/3/howto/logging.html#logging-basic-tutorial

入门

设置 logging 的完整流程

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21


import logging

# Create a logger object
logger = logging.getLogger()
logger.setLevel(logging.INFO)

# Create a stream handler
sh = logging.StreamHandler()

# Set the level of the handler
sh.setLevel(logging.INFO)

# Create a formatter and set it for the handler
formatter = logging.Formatter('%(asctime)s: %(levelname)s: %(message)s')
sh.setFormatter(formatter)

# Add the handler to the logger
logger.addHandler(sh)

# Log an info message
logger.info('hello')

包含关系：logger –> handler –> formater

sqlalchemy ---- ORM tool in python

Wed, 05 Aug 2020 00:00:00 +0000

教程

快速入门
- 使用SQLAlchemy - 廖雪峰的官方网站
详细教程
- SQLAlchemy Unified Tutorial — SQLAlchemy 2.0 Documentation
  - 完整官方教程
  - 这个教程更具系统性，更推荐的深入教程
- Overview — SQLAlchemy 1.3 Documentation
- SQLAlchemy ORM Tutorial for Python Developers

高效处理

参考：

Jackson libary for Java Json

Tue, 04 Aug 2020 00:00:00 +0000

Tutorials

快速入门 https://blog.csdn.net/u011054333/article/details/80504154

英文详细教程 https://www.baeldung.com/jackson

Jackson Document https://github.com/FasterXML/jackson-docs

github project center https://github.com/FasterXML/jackson

类的映射

Data class

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15


 package cn.matgene.jack;

 import lombok.AllArgsConstructor;
 import lombok.Data;
 import lombok.NoArgsConstructor;
 import lombok.Value;

 @Data
 @AllArgsConstructor
 @NoArgsConstructor
 public class Person {
private String name;
private long id;

 }

Test and convert class to json

Computer Graphics

Mon, 03 Aug 2020 00:00:00 +0000

教程

曲线曲面：参数曲线、参数几何代数形式 https://blog.csdn.net/Jurbo/article/details/75046766

英语专业名词

CS184 教程

Lecture 0, Other notes

Instructor	导师，教育者
instructional	教学的，教育的
registrar	(大学)教务长，教务主任；登记员
Instructors and TAs	teacher assistants
roster	执勤名单；候选名单
class roster	老师的点名册（花名册）；名册
teaching staff	教职员；教师；教育工作者
user-programmable vertex engine
vertex	顶点
fragment shaders	像素着色器
as of	在……是
as of last semester
niggling issuses	微不足道的；（不严重却持续不断的）烦人的
being of importance	很重要
treate this assignment as being of utmost importance
piazza	(尤指意大利城镇中的) 广场;

Lecture 1, Course Overview

segment 1

spherical harmonic lighting	球谐光照
on the faculty of	职员之一；（院校）系里的成员
graphics image synthesis
rendering
create realistic images
ACM SIGGRAPH
program 3D computer graphics
OpenGL, which is a graphics API
the OpenGL shading language
a real time scene viewer
ray tracing	光线追踪算法
a little bit of a hint of the kinds of things
collage	拼贴画；收集品
reflections	反射
refractions	折射
glass spheres	玻璃球
chess boards
initial segment
it's really an intellectually, exciting and challenging field,
Pixar
1995 Toy Story by Pixar	first completely computer graphics movie
Lighting simulation
one very important area in computer graphics
computer graphics is really critical for visualization.
flight simulators
and so forth.	等等
digital visual media
of which computer graphics is an integral part
3D geometric models
Visual media are so prevalent
We have Flickr. YouTube. WebGL
Google earth
very realistic flythroughs of the real world.
Electronic publishing
Online gaming
is perhaps the biggest driver of games
3D printers and fabrication
we are now seeing a vast revolution
print real 3D objects, perhaps with realistic material properties
we can expect to see dramatic advances
new computing methods, new display technologies

Lighting simulation lighting simulation is important to create realistic simulations of how the interiors of buildings, interiors of rooms will look. How an automobile will look in an outdoor lighting environment. And computer graphics is used for all of these applications. It can be used for scientific visualization as well as medical visualization.
future So, what we have seen here is that computer graphics has numerous applications and it involves fundamental intellectual and technical challenges which make it one of the most exciting areas to study and I hope you will join us in this course.

Segement 2, Outline and Logistics

course logistics
go over some of the course logistics
3D graphics pipeline.
collaborators	合作者
humanoid motion	人形的
vibrant humanoid motion
assignment	任务
homework
assignment logistics
Logistics	组织，安排；
	后勤
rasterize	格栅化，点阵化
raytrace	光线追踪
workload	工作量
shaders
programmable shaders
our initial lecture on an overview and history.
was coined by	由……创造，铸造
a bank of	一堆……
a bank of LEDs
in the scene	场面，场景
presages	预兆
SuperPaint system really presages modern software technologies
alter images by cropping, scaling, compositing them.
add or remove objects.
Sports broadcasts
That's been a quick tour of 2D computer graphics.
Geometric modeling
Geometric modeling is the process of creating 3D geometry,
spline curves and surfaces	样条曲线
genus	属，类
spout	(容器的)嘴；水柱

3D graphics pipeline he graphics pipeline consists of 3 stages: modeling, animation and rendering.

sklearn ---- python ai assistant tool

Mon, 03 Aug 2020 00:00:00 +0000

cheat sheet

Choosing the right estimator — scikit-learn 1.2.2 documentation
- 选择模型

MinMaxScaler

归一化工具，把特征 feature 放缩到给定的范围内（默认值 0~1）

一个 Python 类
模块位置
- sklearn.preprocessing

特征放缩

https://blog.csdn.net/iterate7/article/details/78881562?utm_source=blogxgwz7

方法

调节比例 Rescaling

使用极值

Css

Mon, 27 Jul 2020 00:00:00 +0000

CSS 样式继承

参考：

特点：

有具体指出的属性，使用具体指出的
其它使用优先级，推导给定的

总结

越近的优先级越高

优先级

内联 > 内部 > 外部 > 浏览器默认值

破除继承和优先级关系

使用“!important”

背景 Background

background-color

颜色

svg 图片

Tue, 21 Jul 2020 00:00:00 +0000

Tutorial

svg, js and html
- http://www.petercollingridge.co.uk/tutorials/svg/interactive/javascript/#:~:text=To%20create%20elements%2C%20you%20need,methods%20of%20an%20SVG%20element.
- 示例代码：code-for-blog/svg-interaction/svg-and-js at master · petercollingridge/code-f…
SVG 教程 - 基础教程在线

在网页中使用 svg

插入方式

inline
external

SVG + JS

inline SVG

SVG 直接写在 html 中

Vue

Thu, 16 Jul 2020 00:00:00 +0000

Purpose

Notes for Vue

教程

分割线

v-divider

水平分割线，上下分割

v-seperator

竖直分割线，左右分割

v-if

参考： https://www.runoob.com/vue2/vue-if.html 作用：控制可见性，是否插入对应的标签

相关指令
- v-else
- v-else-if
相似指令

Javascript

Mon, 13 Jul 2020 00:00:00 +0000

教程

变量作用域

作用域类型

全局 Global Scopes
- let 不属于 window
- undefined 属于 window
- var 声明属于 window
局部 Local Scopes
- 函数 Function Scopes
- 块 Block Scopes
  - 使用 let 或者 const
- let 声明普通变量
- const 声明“引用”不便类型

特殊变量

null VS. undefined

参考：JavaScript — What’s the difference between Null & Undefined? | by Brandon Mor…

yarn

Fri, 10 Jul 2020 00:00:00 +0000

安装 sqlite3 失败

yarn config set registry https://registry.npm.taobao.org/

npm install -g node-pre-gyp npm install -g node-gyp 来源：https://stackoverflow.com/a/58073812

下面的没试过 npm config set user 0 npm config set unsafe-perm true https://github.com/jansmolders86/mediacenterjs/issues/191#issuecomment-317437604

coroutines + asyncio ---- python coroutine 协程笔记

Mon, 22 Jun 2020 00:00:00 +0000

工具收集

参考：

GitHub - timofurrer/awesome-asyncio: A curated list of awesome Python asyncio…
- Awesome-AsyncIO

消息循环工具

libuv + uvloop

asyncio 的类型替换框架

trio
curio
anyio
- 支持方便切换使用的消息循环实现（uvloop）
- 可以在 asyncio 和 trio 之间任意切换

工具 library

文件读写

Projectile Notes

Sun, 21 Jun 2020 00:00:00 +0000

重新生成项目 cache

调用函数 M-x projectile-invalidate-cache

忽略文件问题

https://docs.projectile.mx/projectile/2.2/projects.html#ignoring-files

使用 .projectile 配置
或者设置变量
- projectile-globally-ignored-files
- projectile-globally-ignored-directiories

.projectile 文件配置

只包含的文件夹 "+"

注意
- "+" 后面只能跟目录
- 对文件使用无效

1
2


+/src/foo
+/tests/foo

忽略的文件或者文件夹 "-"

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12


# 文件夹
-/log
-/tmp
-/vendor
-/public/uploads


# 文件
-tmp
-*.rb
-*.yml
-models

注意

WSL Notes

Sun, 21 Jun 2020 00:00:00 +0000

教程

工具收集

lxrunoffline
wslu
OpenInWSL
- OpenInWSL | openinwsl
- 打开 windows 文件，使用 linux 软件
gwsl
- GWSL Downloads | gwsl
  1. GUI server
  2. linux 命令开始菜单创建工具

访问 windows 网络文件

可以使用的方法

mount -t drvfs

1
2
3
4


sudo mount -t drvfs '\\server\share' /mnt/share
sudo mount -t drvfs '\\freenas\public' /mnt/freenas

sudo mkdir -p /mnt/wsl/ubuntu && sudo mount -t drvfs '\\wsl$\Ubuntu-20.04' /mnt/wsl/ubuntu

无效方法

mklink 法

在 windows 中 mklink /D \\server\share d:\share
再在 wsl 中访问 /mnt/d/share
原因

threading ---- python multi-threading Python 多线程

Wed, 17 Jun 2020 00:00:00 +0000

强制终止线程

https://blog.csdn.net/A18373279153/article/details/80050177?utm_medium=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-2.nonecase&depth_1-utm_source=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-2.nonecase

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38


import threading
import time
import inspect
import ctypes


def _async_raise(tid, exctype):
 """raises the exception, performs cleanup if needed"""
 tid = ctypes.c_long(tid)
 if not inspect.isclass(exctype):
 exctype = type(exctype)
 res = ctypes.pythonapi.PyThreadState_SetAsyncExc(tid, ctypes.py_object(exctype))
 if res == 0:
 raise ValueError("invalid thread id")
 elif res != 1:
 # """if it returns a number greater than one, you're in trouble,
 # and you should call it again with exc=NULL to revert the effect"""
 ctypes.pythonapi.PyThreadState_SetAsyncExc(tid, None)
 raise SystemError("PyThreadState_SetAsyncExc failed")


def stop_thread(thread):
 _async_raise(thread.ident, SystemExit)


def test():
 while True:
 print('-------')
 # time.sleep(0.5)
 pass


if __name__ == "__main__":
 t = threading.Thread(target=test)
 t.start()
 time.sleep(5.2)
 print("main thread sleep finish")
 stop_thread(t)

获取返回值

https://blog.csdn.net/it_is_arlon/article/details/86594416

pyinstaller ---- executable maker for python, Python 程序包装成可执行文件

Wed, 10 Jun 2020 00:00:00 +0000

Max Recursion Exceeded

设置最大循环数

1
2
3
4
5
6


import sys
sys.setrecursionlimit(100000)

from PyInstaller.utils.hooks import collect_data_files, collect_submodules

block_cipher = None

收集动态导入模块 hidden modules

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14


hiddenimports = collect_submodules('pkg_resources._vendor') + ['pkg_resources.py2_warn']

a = Analysis(['socketapi.py'],
 pathex=['d:\\Documents\\HSC_Chemistry\\python_side\\test_resconstruct'],
 binaries=[],
 datas=[('databases', 'databases')],
 hiddenimports=hiddenimports, # **** ...... set hidden import s here
 hookspath=[],
 runtime_hooks=[],
 excludes=[],
 win_no_prefer_redirects=False,
 win_private_assemblies=False,
 cipher=block_cipher,
 noarchive=False)

多进程 multiprocessing 支持

https://stackoverflow.com/questions/24944558/pyinstaller-built-windows-exe-fails-with-multiprocessing

aiohttp ---- Async IO Web Framework

Mon, 01 Jun 2020 00:00:00 +0000

Client

ClientSession

response

resp.status

一次性读取内容

resp.text()
- 文本 str 类型
- resp.text(encoding='gbk')
resp.read()
- bytes 类型
resp.json()
- 提取 json

流模式读取 Streaming Response Content

resp.content.read(10)

request

session.get
session.put

关键字参数 arguments

params

格式：http://hello.com?key=value&key1=vale1
session.get(http://hello.com, params=params)

json

session.post(url, json={'test': 'value'})

Post 请求

sesson.post https://docs.aiohttp.org/en/stable/client_quickstart.html#more-complicated-post-requests

cryptography ---- python encryption library 加密类库

Wed, 27 May 2020 00:00:00 +0000

英语术语

Words	Explanations
symmetric cipher	对称加密
message digest	类似 md5, sha1 等等

Tutorial

英文教程，快速入门
详细参考与教程：https://cryptography.io/en/latest/

安装

pip install cryptography

AES 加密

使用 Fernet class 实现

注意
- 这里 Fernet 需要的 key 是二进制的
- key 有特定的格式要求

Network ---- 计算机网络基础知识

Tue, 26 May 2020 00:00:00 +0000

名词辨析

localhost 与 127.0.0.1

https://stackoverflow.com/a/7382629

localhost 是域名，类似 baidu.com
使用 localhost, 程序会再查询 localhost 对应的 ip
- 有可能，用户自定义了配置，导致 localhost 对应到别的 ip
127.0.0.1 直接都应 ip，不需要查询

网络模型

https://blog.csdn.net/lianghe_work/article/details/45169815

socket ---- python socket library

Tue, 26 May 2020 00:00:00 +0000

英语名词

words	explain
backlog	积压的待办工作
imperative	必要的，不可避免的
	it's imperative to do sth.
switchboard	配电盘
switchboard operator	总机，接线员（电话接线员）
overhead	经常性的
insideout	心中有数（我自己认为的解释）
	your app should be almost insideout.
multiplex	多路的，多工的
simplex	单一的，单工的

教程

https://realpython.com/python-sockets/#background 英文，易懂全面

http 协议

Sun, 24 May 2020 00:00:00 +0000

Tutorials

https://www.runoob.com/http/http-intro.html

工作原理

本质

一个基于 TCP/IP 通信协议传递数据（图片，文本，等等）的协议

特点

无连接
- 完成，单次请求和响应就会断开-
媒体独立
- 只约定文件的打开类型 MIME-type, 对方怎么处理不管
无状态

brew ---- howbrew installation tool

Sat, 16 May 2020 00:00:00 +0000

Tutorial

关于 Homebrew——— 你所要了解的一切 - 简书

brew tap

用途：设置单个或一组软件的安装源

brew info

brew install

安装最新版

brew install formula

安装指定版本

brew install formula.rb brew install https://github.com/.../formula.rb

urllib ---- python url library

Mon, 04 May 2020 00:00:00 +0000

Tutorials

https://python3-cookbook.readthedocs.io/zh_CN/latest/c11/p01_interact_with_http_services_as_client.html

url 构成

地址
查询参数

urllib

基本概念

请求 Request
响应 Response

请求

原料

方程求解问题

Mon, 04 May 2020 00:00:00 +0000

Tutorials

uml

Tue, 28 Apr 2020 00:00:00 +0000

关系名词

UML六种依赖关系_添码星空的博客-CSDN博客有图解说，易懂

UML类图（Class Diagram）中类与类之间的关系及表示方式_sean-zou的博客-CSDN博客_类图中类与类之间的关系带代码解说

Boost_Python Notes

Fri, 17 Apr 2020 00:00:00 +0000

Classes

Constructor 构造函数

多个构造函数

使用def 添加第二个及以后的Constructor

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18


 #include <boost/python.hpp>
 using namespace boost::python;

 // 单个构造函数
 BOOST_PYTHON_MODULE(hello)
 {
class_<World>("World", init<std::string>())
.def("greet", &World::greet)
.def("set", &World::set)
;
 }

 // 多个构造函数
 class_<World>("World", init<std::string>())
 .def(init<double, double>())
 .def("greet", &World::greet)
 .def("set", &World::set)
 ;

禁用构造函数

使用no_init

Powershell Notes

Tue, 10 Mar 2020 00:00:00 +0000

教程

bilibili
- https://www.bilibili.com/video/BV1yb411g7n7?p=2
中文教程
- https://www.pstips.net/powershell-online-tutorials

Cheat Sheet

获取对象信息 Get-Member

别名 gm
eg: ls | gm

注释

- 单行注释
<# … #>
- 多行注释

Powershell

快捷键模式

使用 emacs-like 快捷键 https://stackoverflow.com/questions/43295639/update-powershell-keyboard-bindings-to-be-emacs-style-like-bash-shell

https://docs.microsoft.com/en-us/powershell/module/psreadline/about/about_psreadline?view=powershell-7 MS 官方文档
1

Set-PSReadLineOption -EditMode Emacs

后台运行任务—-Job 相关命令

https://blog.csdn.net/litterfrog/article/details/104001641

Emacs Java Customization

Mon, 20 Jan 2020 00:00:00 +0000

lsp-java

安装 lsp-server

jdtls
- 要求 java >= 11

lsp-java-genrate-getters-and-setters

在有 Contructor 中初始化后才能触发
在给定字段上触发
注意
- lsp-java-genrate-* 和 lsp-java-create-*
- 这些函数和 lsp-ui actions 是相互关联的
- 有这些actions 时，才能调用对应的函数

java snippets

println

Computational Geometry ---- 计算几何学

Tue, 31 Dec 2019 00:00:00 +0000

参考

工具

python

Shapely

math -- mathematics -- Pure Math and AI Math

Fri, 27 Dec 2019 00:00:00 +0000

教程

向量

点积

名称

不同的称呼：点积，数量积，内积

结果

数值，不是向量

运算法则

表示方法

数值

C Language

Tue, 10 Dec 2019 00:00:00 +0000

教程

Eigen

Thu, 24 Oct 2019 00:00:00 +0000

Purpose

notes for c++ matrix library Eigen

get started

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14


#include <iostream>
#include <Eigen/Dense>

using Eigen::MatrixXd;

int main()
{
 MatrixXd m(2,2);
 m(0,0) = 3;
 m(1,0) = 2.5;
 m(0,1) = -1;
 m(1,1) = m(1,0) + m(0,1);
 std::cout << m << std::endl;
}

Windows Notes

Fri, 11 Oct 2019 00:00:00 +0000

工具

heu 站
- heu8.net
- 知彼而知己-HEU8
- GitHub - zbezj/HEU_KMS_Activator
  - 密码： HEU168
faststone capture
- FastStone Capture注册破解码_塔娜@的博客-CSDN博客_faststone 注册码
  - name: bluman
  - code: VPISCJULXUFGDDXYAUYF

快捷键

剪贴板，复制中心

Infosearch信息搜集

Fri, 20 Sep 2019 00:00:00 +0000

Purpose

关于一个问题或“主题”的信息搜集

方法

微信公众号
官网
新闻
宣传信息
认证信息查询网站
- 天眼查： https://www.tianyancha.com
  - 例子：https://www.tianyancha.com/brand/b0db88711
  - 上面有：

公司介绍
相关新闻
微信公众号
竞品信息（竞争对手）

pillow ---- PIL, pure python image rendering library 纯Python图像处理库

Thu, 29 Aug 2019 00:00:00 +0000

方法

Access a pixel

im.getpixel((row, col))

im.load()

1
2


pixel_data = im.load()
pixel_data = [255,255,255]

im.putpixel((row, col), color)

numpy.array <–> PIL image

参考
- https://pillow.readthedocs.io/en/stable/reference/Image.html?highlight=numpy#PIL.Image.fromarray

PIL image –> numpy.array

1
2
3
4
5


from PIL import Image
import numpy as np
im = Image.open('hopper.jpg')
arr = np.asarray(im)
arr01 = np.array(im)

np.array –> PIL Image

1

im = Image.fromarray(a)

Java Notes

Wed, 28 Aug 2019 00:00:00 +0000

教程

数组

字段
- arr.length : 长度，size
方法
- arr[index]
  - 越界异常：java.lang.ArrayIndexOutOfBoundsException
数组类型

CMake Notes

Sat, 24 Aug 2019 00:00:00 +0000

教程

官方
- 入门教程
  - CMake Tutorial — CMake 3.24.0-rc4 Documentation
  - 1. Overview — CGold 0.1 documentation
- 中文翻译
  - github 用户翻译
    - GitHub - shendeguize/CMakeTutorialCN: Cmake tutorial in Chinese, CMake教程中文翻译
- cmake 语言语法（语法规范）
  - cmake-language(7) — CMake 3.24.1 Documentation
- cmake 构建系统（如何编译）

Rtags

Fri, 23 Aug 2019 00:00:00 +0000

rtags 安装问题

clang 找不到 Index.h

解决方法
1. 安装 llvm clang
2. 注意：libclang-dev
  - 指定环境变量
Installing RTags · Andersbakken/rtags Wiki · GitHub

gdb

Wed, 21 Aug 2019 00:00:00 +0000

break 断点

alias –> b
info b
1. 断点详情
break 3 (在第 3 行设置断点)
break functionName
1. 在函数 functionName 处中断
info breakpoints
diable/enable 1 (breakpoint number)
1. 禁用/启用断点

删除断点

https://ftp.gnu.org/old-gnu/Manuals/gdb/html_node/gdb_31.html

clear

clear filename clear filename:lineno

delete

https://stackoverflow.com/questions/4340718/how-do-i-remove-a-single-breakpoint-with-gdb

alias –> del

algorith.org ---- 计算机算法

Fri, 16 Aug 2019 00:00:00 +0000

参考

z-lib.org –> booklist –> 算法
- Booklist

课程

邓俊辉课程
- 资料：https://dsa.cs.tsinghua.edu.cn/~deng/ds/dsacpp

邓俊辉数据结构教程

绪论

算法的特点

输入输出
基本操作、确定性和可行性
有穷性和正确性

Smiles

Sat, 10 Aug 2019 00:00:00 +0000

教程

daylight tutorial

Daylight>SMILES Tutorial

Atoms 原子

[]

eg: [Li] 表示单个原子

在不是单个原子时

注意： "[]"方括号内要具体写出有多少个 H, 不能省略

普通 organic subset，达到氢饱和，可以只写原子符号（同时这也是其最低化合价）

eg: CH4 –> C; H2O –> O; B(3), C(4), N(3,5), O(2), P(3,5), S(2,4,6), F(1), Cl(1), Br(1), I(1)

Matlab

Fri, 19 Jul 2019 00:00:00 +0000

format

format	comment
short	4 位小数
long	15 位小数
bank	2 位小数
rat	分数形式
e	指数形式

matlab 命令总结

MATLAB命令_w3cschool

GUI matlab 字体问题

安装字体不能使用

https://www.ilovematlab.cn/thread-566857-1-1.html

把字体添加到对应目录

1

C:\Program Files\Polyspace\R2019a\sys\java\jre\win64\jre\lib\fonts

中英文混合字体

github 上有下载

multiprocessing ---- python 多进程

Sun, 07 Jul 2019 00:00:00 +0000

笔记目的

python3 多进程学习笔记

Manager 变量陷阱

https://www.jianshu.com/p/52676b93430d

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17


 # Manager对象无法监测到它引用的可变对象值的修改，
 # 需要通过触发__setitem__方法来让它获得通知
 from multiprocessing import Process, Manager

 manager = Manager()
 m = manager.list()
 m.append({'id':1})

 def test():
hack = m[0]
hack['id'] = 2
m[0] = hack

 p = Process(target=test)
 p.start()
 p.join()
 print(m[0])

Pool

Queue

在 Pool 中不能直接使用，

解决方法：

使用 Manager().Queue()

xml

Wed, 19 Jun 2019 00:00:00 +0000

语言特性

https://www.runoob.com/xml/xml-intro.html

目的
- 传输数据，不是显示数据
  - XML 被设计用来结构化、存储以及传输信息。
特点
- 标签没有预定义，需要自定义
- Extensible markup language 可扩展标记语言

table

<tgroup>

http://eadiva.com/tgroup/

xml 编辑

python3

Edit Distance 编辑距离

Mon, 17 Jun 2019 00:00:00 +0000

sites

Levenshtein_distance

https://en.wikipedia.org/wiki/Levenshtein_distance

Wagner–Fischer algorithm

https://en.wikipedia.org/wiki/Wagner%E2%80%93Fischer_algorithm

求两个序列/字符串的相似度（Levenshtein）

https://blog.csdn.net/qq_37788558/article/details/78780785

中文详细叫教程

https://www.zhihu.com/question/315634571/answer/620984468

Git Notes

Thu, 13 Jun 2019 00:00:00 +0000

视频教程

07.使用git diff查看差异_哔哩哔哩_bilibili
- 这是一个系列 git 教程

书籍：

参考：

Repository: Directory content tracking | Git from the Bottom Up

多语言，详细全面版

官方：https://git-scm.com/book/zh/v2

更易懂

bitbucket

Apache Web Server

Thu, 30 May 2019 00:00:00 +0000

配置 cgi-bin

https://blog.csdn.net/typ2004/article/details/59174162

一个比较全面的教程

注意

配置 cgi-bin 目录权限

1
2
3
4
5
6
7


ScriptAlias /cgi-bin/ /home/sawyer/web/cgi-bin/ # 注意： 这里不可以忽略最后的“/”
<Directory "/home/sawyer/web/cgi-bin/">
 AllowOverride None
 Options +ExecCGI -MultiViews +SymLinksIfOwnerMatch
 Require all granted
 allow from all
</Directory>

启用 cgi 模块

https://blog.csdn.net/a623891391/article/details/47170355

scrapy ---- a python netcrawler framework

Tue, 28 May 2019 00:00:00 +0000

xpath 兼容问题

在 scrapy shell 中 xpath 能提取到结果，然而，spider.py 中不能提取到结果，可能原因是 scrapy 不支持其中 xpath 的某些特性。

解决方法

重写一个 xpath, 尽量不要使用高级的 xpath 功能

xpath

Tue, 28 May 2019 00:00:00 +0000

xpath 进阶

简书教程
- https://www.jianshu.com/p/1575db75670f
官方文档
- https://www.w3.org/TR/xpath-31/
wiki
- https://en.wikipedia.org/wiki/XPath
  - 可以查看底部，外部链接
超详细中文教程
- https://www.cnblogs.com/sthu/p/8319072.html

注意事项

索引

从“一”， "1" 开始，切记不是 0 开始

index, 位置函数

fn:position()
//p[position() < 3]

最后一个

fn:last()

Emacs Ipython Notes

Sun, 19 May 2019 00:00:00 +0000

Login And open notebooklist buffer 登录已有 jupyter server

ein:notebooklist-login

Open a new notebook

C-c C-o ein:notebook-open

Open exist notebook

C-c C-o ein:notebook-open
- 实测，无效

Rename current notebook

C-x C-w ein:notebook-rename-command

Save current notebook

C-x C-s ein:notebook-save-notebook-command

Close a notebook

C-c C-# ein:notebook-close

账户操作

登出

ein:stop

文件操作

新建

ein:notebooklist-new-notebook
ein:notebooklist-new-notebook-with-name

打开 ipynb 文件

ein:notebook-open – C-c C-o

打开任意文件

ein:file-open – C-c C-f
作用

pubchempy ---- get chemical data from pubchem website

Tue, 14 May 2019 00:00:00 +0000

pubchempy.Compound

Object_Properties:

name	comment
'class',
'delattr',
'dict',
'dir',
'doc',
'eq',
'format',
'ge',
'getattribute',
'gt',
'hash',
'init',
'init_subclass',
'le',
'lt',
'module',
'ne',
'new',
'reduce',
'reduce_ex',
'repr',
'setattr',
'sizeof',
'str',
'subclasshook',
'weakref',
'_setup_atoms',
'_setup_bonds',
'aids',
'atom_stereo_count',
'atoms',
'bond_stereo_count',
'bonds',
'cactvs_fingerprint',
'canonical_smiles',	SMILES
'charge',
'cid',
'complexity',
'conformer_id_3d',
'conformer_rmsd_3d',
'coordinate_type',
'covalent_unit_count',
'defined_atom_stereo_count',
'defined_bond_stereo_count',
'effective_rotor_count_3d',
'elements',
'exact_mass',
'feature_selfoverlap_3d',
'fingerprint',
'from_cid',
'h_bond_acceptor_count',
'h_bond_donor_count',
'heavy_atom_count',
'inchi',
'inchikey',
'isomeric_smiles',
'isotope_atom_count',
'iupac_name',	IUPAC name
'mmff94_energy_3d',
'mmff94_partial_charges_3d',
'molecular_formula',	Formula 分子式
'molecular_weight',	摩尔质量
'monoisotopic_mass',
'multipoles_3d',
'pharmacophore_features_3d',
'record',
'rotatable_bond_count',
'shape_fingerprint_3d',
'shape_selfoverlap_3d',
'sids',
'synonyms',	Synonyms
'to_dict',
'to_series',
'tpsa',
'undefined_atom_stereo_count',
'undefined_bond_stereo_count',
'volume_3d',
'xlogp'

pcp.get_cids(identifier, namespace='name')

eg: pcp.get_cids('1344-59-8')

Deepin

Mon, 06 May 2019 00:00:00 +0000

添加 ppa 软件源

教程

修改配置，/etc/lsb_release

1
2
3
4
5
6
7
8
9


#DISTRIB_ID=Deepin
#DISTRIB_RELEASE="15.10.1"
#DISTRIB_DESCRIPTION="Deepin 15.10.1 "
#DISTRIB_CODENAME=stable

DISTRIB_ID=Ubuntu
DISTRIB_RELEASE=18.04
DISTRIB_CODENAME=bionic
DISTRIB_DESCRIPTION="Ubuntu 18.04.1 LTS"

安装支持“add-apt-repository”

1
2
3


sudo apt-get install python-software-properties
sudo apt-get install software-properties-common
sudo apt-get update

可能出现错误，GPG 密钥问题

W: GPG 错误：http://ppa.launchpad.net/kelleyk/emacs/ubuntu bionic InRelease: 由于没有公钥，无法验证下列签名： NO_PUBKEY 3FF0E01EEAAFC9CD
E: 仓库 “http://ppa.launchpad.net/kelleyk/emacs/ubuntu bionic InRelease” 没有数字签名。
N: 无法安全地用该源进行更新，所以默认禁用该源。
N: 参见 apt-secure(8) 手册以了解仓库创建和用户配置方面的细

修复方法

1
2


sudo apt-key adv --recv-keys --keyserver keyserver.Ubuntu.com 3FF0E01EEAAFC9CD
# 其中“3FF0E01EEAAFC9CD”是上面GPG 报错产生的==>无法验证下列签名： NO_PUBKEY 3FF0E01EEAAFC9CD

正常安装软件

1
2


sudo add-apt-repository ppa:kelleyk/emacs
sudo apt-get update

开机自启动

文件位置

~/.config/autostart/my-rc-local.desktop

Qt Notes

Wed, 24 Apr 2019 00:00:00 +0000

教程

PySide6 官方：Qt for Python — Qt for Python
- Tutorials 基础教程: Qt for Python Tutorials — Qt for Python
- Qt 各个模块简介
  - 主要模块：Qt for Python Modules — Qt for Python
  - 所有模块：Qt Modules — Qt for Python
- 相关类查询帮助
  - google 搜索 <类名> + PySide6 –> 右相关官方文档

Pandas ---- Big Data Manipulate Tool

Sat, 20 Apr 2019 00:00:00 +0000

教程

Pandas Cookbook:
- https://github.com/PacktPublishing/Pandas-Cookbook
Data School
- https://www.dataschool.io/best-python-pandas-resources/

修改 index

df.set_index 按给定的列名排序，给定的列变成了 index

df.reindex 重新排序 index，添加新 index（同级，不是 MultiIndex）

原形：pd.DataFrame.reindex(['the', 'new', 'labels'], axis='columns')
注意：

Physics 物理学

Thu, 18 Apr 2019 00:00:00 +0000

教程

Home - Physics LibreTexts

工具

仿真 simulation

MuJoCo
- GitHub - deepmind/mujoco: Multi-Joint dynamics with Contact. A general purpos…
- 语言：
  - C 编写
  - python 接口
  - C# 接口

名称，专有名词

尼科尔棱镜

一种检振器即：检测光的偏振方向

funtools ---- Python Function Tools Module

Thu, 04 Apr 2019 00:00:00 +0000

参考

https://docs.python.org/3/library/functools.html

functools.cache

存储 function 执行结果，以备下次调用

functools.lru_cache

functools.cache_property

存储类 method 知青结果

functools.total_ordering

作用对象
- 类定义
生成比较方法
自动为类创建 __eq__, __lt__ 等等方法

functools.partial

制作偏函数

functools.partialmethod

制作偏方法

functools.reduce

functools.singledispatch

制作重载函数

functools.singledispatchmethod

制作重载方法

functools.wrap

用户装饰器

Docset

Tue, 26 Mar 2019 00:00:00 +0000

工具集

Dash, for MacOS
Zeal, for Linux and Windows
helm-dash, for Emacs

参考手册

for docset itself
- link: https://kapeli.com/docsets#python

helm-dash

link: https://github.com/areina/helm-dash

Katalon

Tue, 26 Mar 2019 00:00:00 +0000

Katalon Studio

a Developmet Testing Software

Need to Know Other Knowledges

Selenium
Groovy

Chrome extension:

name: Katalon Recoder

Py4chemoinformatics

Tue, 26 Mar 2019 00:00:00 +0000

Brief info

This is a reading notebook for the book 《py4chemoinformatics》

遇到的专业名词

chemoinformatics
- 化学信息学
RDKit
- link: http://www.rdkit.org/
- github: https://github.com/rdkit/rdkit
- definition:
  - RDKit is a collection of cheminformatics and machine-learning software written in C++ and Python.
OpenBable
- link: http://openbabel.org/wiki/Main_Page
- definition:
  - Open Babel is a chemical toolbox designed to speak the many languages of chemical data. It's an open, collaborative project allowing anyone to search, convert, analyze, or store data from molecular modeling, chemistry, solid-state materials, biochemistry, or related areas.
SKlearn

Python Notes

Tue, 26 Mar 2019 00:00:00 +0000

教程

基础概念
- Glossary 术语表： Glossary — Python 3.10.2 documentation
学习教程
- https://www.programiz.com/python-programming
- set — Python Reference (The Right Way) 0.1 documentation
学习资源
- Real Python · GitHub
- Python Tutorials – Real Python
- The Hitchhiker’s Guide to Python! — The Hitchhiker's Guide to Python
  - 25.6k star 的书

细化笔记

函数式编程：Functional Programming in Python

工具

绘图

网站

pyspider

Mon, 25 Mar 2019 00:00:00 +0000

pyspider 安装错误

在 Ubuntu16 中

错误一：

错误描述：

1
2


 raise ValueError("Invalid configuration:\n - " + "\n - ".join(errors))
ValueError: Invalid configuration:

解决方法

link：https://github.com/binux/pyspider/issues/831

You can change pyspider/webui/webdav.py line 203：

具体：

1
2
3
4
5
6


#把
'domaincontroller': NeedAuthController(app),
#修改为：
'http_authenticator':{
 'HTTPAuthenticator':NeedAuthController(app),
 },

错误二：
- 错误描述：
  - 运行 pyspider all：
    - 启动 pyspider 时 Could not create web server listening on port 25555 报错
- 解决方法：

anaconda 使用

Wed, 20 Mar 2019 00:00:00 +0000

安装问题

在 windows 子系统 ubuntu16 中安装 Miniconda3-latest-Linux-x86_64.sh
- 安装 doccano https://github.com/chakki-works/doccano
- 出现问题：不能安装 npm，
  - 提示不能安装依赖 node-gyp (>= 0.10.9)
  - 解决方案https://askubuntu.com/questions/1057737/ubuntu-18-04-lts-server-npm-depends-node-gyp-0-10-9-but-it-is-not-going

emacs encoding

Wed, 20 Mar 2019 00:00:00 +0000

编码错误处理

解决 windows，cmd，powershell 乱码

使用 M-x shell
然后 M-x set-language-environment, Chinese-GB
避免在 eshell 里面调用 cmd，以免卡死

局部文字乱码

使用 M-x recode-region

文件乱码

使用 M-x revert-buffer-with-coding-system

English

Wed, 20 Mar 2019 00:00:00 +0000

for typesetting 排版

hyphenation
hyphen
discretionary	<–> any
accented characters
typographic	排版上的，印刷上的
ployglossia
delve
abyss
venerable
babel
preamble
glyph	字形

常用单词，生僻词义

level
- 动词，针对
honestly 真地

短语

think less of sb. 小瞧 sb.
pool game 台球
proper nouns 专业名词

数学

几何

polyhedron: 多面体

圆

circumference: 周长

chatgpt

barrage

excel -- Excel Usage Notes

Wed, 20 Mar 2019 00:00:00 +0000

快捷键

填充

向右填充 Ctrl + R right
向下填充 Ctrl + D down
智能填充 Ctrl + E

切换窗口

工作表 sheet
- Ctrl + PgUp PageUp
- Ctrl + PgDn PageDown

翻页

上下
- PageUp
- PageDown
左右
- 向左 Alt + PageUp
- 向右 Alt + PageDown

切换单元格

向右 <Tab>
向左 Shift + <Tab>
向下 <Enter>
向上 Shift + <Enter>

翻译搜索

Ctrl + 鼠标单击

python 操纵工具

参考：

html

Wed, 20 Mar 2019 00:00:00 +0000

尺寸单位

html 中只有一种单位： px
- px 是一个相对单位，原因：相同屏幕，dpi 不同 px 代表的实际长度不同

Table 表格

<table>

border="2" attribute 边界
cellpadding="10" attribute 单元格内边距，单元格框线与内容间距
cellspacing="10" attribute 单元格外边距，单元格框线与框线间距

netcrawler ---- python 网络爬虫

Wed, 20 Mar 2019 00:00:00 +0000

名词集锦

课程简介
- urllib
- 正则

网络资源

教程
- https://cuiqingcai.com/4320.html 静觅，崔庆才的博客
- https://www.jianshu.com/p/2e190438bd9c python3 urllib

urllib.request 模块

urllib.request.Request

高级方法

Handler 与 OpenerDirector

关系
- OpenerDirector 就是 Opener
- opener 来自 build_opener(opener)
- 自定义 opener：install_opener(opener)方法
得到全局的 OpenerDirector 对象

Touchpad

Wed, 20 Mar 2019 00:00:00 +0000

touchpad

普通笔记本

1
2


sudo modprobe psmouse ##启用触摸板
sudo rmmod psmouse ##禁用触摸板

如果是ThinkPad之类含有摇杆的机型可使用下述命令仅禁用触摸板而保留摇杆

1
2


synclient TouchpadOff=1 ##禁用触摸板
synclient TouchpadOff=0 ##恢复触摸板

python jupyter notebook ipython

Sun, 17 Mar 2019 00:00:00 +0000

在线提供算力的服务商

colab: colab.google.com
九天： jiutian.10086.com
AutoDL-品质GPU租用平台-租GPU就上AutoDL
智星云 AI Galaxy | GPU云服务器 GPU服务器租用远程GPU租用深度学习服务器 | 免费GPU 便宜GPU

收集列表

More Than Ten Free Hosted Jupyter Notebook Environments You Can Try Right Now…

notebook

security 安全与远程登录

使用 https 协议
tutorials

Huagongyuanli化工原理

Sun, 10 Feb 2019 00:00:00 +0000

流体力学

英语名词：

流体：fluid

流体类型：

黏性流体
- 与时间无关
  - pseudoplastic 假塑性流体
  - dilatant fluid 涨塑性流体，有的人叫膨胀性流体，胀塑性流体
  - bingham plastic 宾汉性流体

伯努利方程

传热问题

不用在伯努利方程中考虑，对外部的，吸热放热问题

Moto格言

Sun, 10 Feb 2019 00:00:00 +0000

来自歌词

test content

认真的过每一分钟

出处《我的未来不是梦》

原唱：张雨生

作曲：翁孝良

作词：陈家丽

你是不是像我在太阳下低头

流着汗水默默辛苦地工作

你是不是像我就算受了冷漠

ppt ---- powerpoint

Sun, 10 Feb 2019 00:00:00 +0000

播放

从头播放：F5
从现在位置播放：Shift + F5

English Words Learning

Fri, 25 Jan 2019 00:00:00 +0000

quick search

<2019-01-25 五>
- officer
- official
- bestow
- oblige
- infancy
- foot-soldier
<2019-01-26 六>
- workshop
- bleach
- messiah
- warlord
- raider
- ain't
- crit
- hit upon 偶然发现
- elope
- weasel
- paragon
- drawing room 客厅，休息室
- shocking
- gentry
- esquire
- yeoman
- man
- baronet
- peer
- peerage
- comprise
- perpetual
- in perpetual succession
- abomination
- abominate
- abominable
- abominating
- denominator
- gentility
- constituent
- aristocracy
- article:https://en.wikipedia.org/wiki/Gentleman and form the Pride and Prejudice
<2019-01-27 日>

Car

Tue, 09 Oct 2018 00:00:00 +0000

异地购车

注意事项

4S 能提供的事情
- 发票，合格证，完税证明，保险
- 交强险
- 商业险，回去买也行
回老家办的事情
- 上牌
- 完税
如何交购置税
- 回上牌地
- 县行政大厅
- 准备证件

latex

Wed, 18 Jul 2018 00:00:00 +0000

参考

overleaf
- 简短教程：Learn LaTeX in 30 minutes - Overleaf, Online LaTeX Editor

编译命令

.tex 文件编译成 PDF –> pdf

xelatex your_file.tex
pdflatex your_file.tex

bibtex 参考文件类 tex 编译 (.tex + bibtex.aux –> pdf)

步骤：

处理参考文献文件 .aux

Font

Sat, 10 Feb 2018 00:00:00 +0000

中文字体，对应英语名

宋体 SimSun 黑体 SimHei 微软雅黑 Microsoft YaHei 微软正黑体 Microsoft JhengHei 新宋体 NSimSun 新细明体 PMingLiU 细明体 MingLiU 标楷体 DFKai-SB 仿宋 FangSong 楷体 KaiTi 仿宋_GB2312 FangSong_GB2312 楷体_GB2312 KaiTi_GB2312

Lab Introduction实验室介绍

Sat, 10 Feb 2018 00:00:00 +0000

专业名词

		重音位置
仪器
界面张力仪	interfacial tensiometer
旋滴(旋转液滴)界面张力仪	spinning drop interfacial tensiometer
搅拌器	agitator，stirrer
悬臂式搅拌器	cantilever agitator	'lever /liv…
桨叶式搅拌器	paddle mixer
黏度计	viscometer	vis'cometer
布式黏度计	Brookfield viscometer
流变仪	rheometer	ometer
电子天平	electronic balance
分析天平	analytical balance	a->ae, 'lytical
	automatic analytical balance
实验项目名词
固含量	solid content
分子量	molecular weight	mo 'lecular
不溶物	insoluble matters
黏度	viscosity
动力黏度	dynamic viscosity
绝对黏度	absolute viscosity
运动黏度	kinematic viscosity	kine'matic, i e-> pinyin(i e)
转速	rotational speed
	rotation speed
单位值	unit system
cP 厘泊	centipoise， poise

恒聚 Chemicals

Sat, 10 Feb 2018 00:00:00 +0000

化学品英汉对照

聚丙烯酰胺	polyacrylamide	,pɒlɪə'krɪləmaɪd
聚丙烯酸	polyacrylate	pəuliə'krileit
聚丙烯酸钠	sodium polyacrylate
丙烯酰胺	acrylamide	ə'krɪləmaɪd
丙烯	propylene， propene

社会翻译用词

组织机构	orgnization framework
管理层	management layer
现场审核	on-the-spot audit
发生时间	occurance time

testing for FONT

testing for YaHei
雅黑测试

太阳能

Tue, 03 Oct 2017 00:00:00 +0000

太阳能发电

光伏打效应 photovoltaic effect

即太阳能电池发电
利用半导体 PN 结产生电动势

光热发电 solar thermo power plant

原理
- 收集太阳能，加热水，产生蒸气
- 蒸气转换成电能

光热发电

参考

Vba Excel

Wed, 09 Aug 2017 00:00:00 +0000

禁止拷贝文件方法

http://www.360doc.com/showweb/0/0/762370756.aspx

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19


 Private Sub Worksheet_SelectionChange(ByVal Target As Range)
　　Dim MyDiskCode
　　Set MyDiskCode = GetObject("Winmgmts:").InstancesOf("Win32_DiskDrive")
　　For Each mo In MyDiskCode
　　　Sheet1.Cells(999, 256).Value = mo.Model
　　Next
　　End Sub


 Private Sub Workbook_Open()
　　Dim MyDiskCode
　　Set MyDiskCode = GetObject("Winmgmts:").InstancesOf("Win32_DiskDrive")
　　For Each mo In MyDiskCode
　　MyNewCode = mo.Model
　　Next
　　If (MyNewCode <> Trim(Sheet1.Cells(999, 256).Value)) Then
　　　ThisWorkbook.Close
　　End If
　　End Sub

excel 工作表保护

可以选定单元格属性为，不锁定，
保护工作表功能，不允许，用户选定，锁定单元格，这样用户，就不能通过普通方法，修改单元格
而我们却可以，使用 VBA 后台编写程序，修改它。

Warning 实践证明，下述方法可行,但是，vba 会产生漏洞，因为通过 vba， Select 语句选定单元格，如果不，重新选定为，用户，可访问区域，而是，锁定区域(用户禁止访问区域)，那么，用户将获得，禁止区域的访问权限！！！ ===> 因此，使用 vba 后，要 Select 成，用户允许访问区域。

Calc of Emacs Notes

Fri, 17 Mar 2017 00:00:00 +0000

enter Algebraic Mode

temperarily 单次进入

使用单引号(')

all the time 长久地进入

shortcut (m a)
- 即：mod algebraic

常见命令

负号：n
倒数：&
sqrt: Q
abs: A
sign 判断正负号： f s
输入负数：下划线再加上数字，eg：-3 –> （_ 3 <RET>）

Org Notes

Tue, 11 Oct 2016 00:00:00 +0000

工具收集

提醒工具

org-notify: GitHub - syohex/org-notify: System notifications of org agenda deadlines
org-notifications: GitHub - doppelc/org-notifications: Desktop notifications for your org-agenda…
org-alert: GitHub - spegoraro/org-alert: System notifications of org agenda items
org-wild-notifier: GitHub - akhramov/org-wild-notifier.el: Alert notifications for org-agenda

org 官方工具列表

地址： Org Mode tools!

blog 工具

org 官方列表：Blogs and Wikis with Org
weblorg: weblorg - documentation
hugo
ox-hugo

visibility

注：以下功能在设置完后要使用 C-c C-c 刷新 org mode

starup

1
2
3
4


#+STARTUP: overview
#+STARTUP: content
#+STARTUP: showall
#+STARTUP: showeverything

注：上面的逗号，我本没写，是 emacs 自动添加的

Elisp Notes

Tue, 20 Sep 2016 00:00:00 +0000

example for number conversion expmple

教程

入门
- EmacsWiki: Elisp Cookbook
- Emacs Lisp 简明教程 - 水木社区Emacs版
xahlee
- http://xahlee.info/emacs/index.html
- Emacs Lisp Basics
- 注意： xahlee 会跳出付费页边，可以不用管，直接点击具体条目
- xahlee 美化的 elisp 官方文档
美化格式的 elisp 官方教程

Emacs Notes

Tue, 19 Jul 2016 00:00:00 +0000

参考

测试版下载

windows emacs 官方测试版： Index of /gnu/emacs/pretest/windows
windows 三方测试版
- GitHub - kiennq/emacs-build: Scripts to build a distribution of Emacs from so…

native comp

windows 三方
- Index of /emacs-28

教程

实用命令
- Useful Emacs Commands

packages

用过的 package
- 列表：
  - htmlize
  - cedet
  - auto-complete

quick emacs

https://www.emacswiki.org/emacs/MsWindowsGlobalContextMenu

Mon, 01 Jan 0001 00:00:00 +0000

欢迎使用Orgzly！

笔记

单击打开笔记

长按选择笔记

可选择多条笔记。设置中可切换单击与长按的功能。

右划笔记打开快捷菜单

左划笔记打开另一个菜单。

Demo

Mon, 01 Jan 0001 00:00:00 +0000

Posts on Sawyer Zheng's Blog

Langraph

参考

langgraph 的关键概念

states 状态

Agent

工具收集

prompt 收集

claude code 逆向工程博客

构建 Agent 的要点

历史对话管理

历史数据的持久化

最大对话历史长度

Wxwork 企业微信安装

教程

Devcontainers

教程

nvim

教程

config 映射

GraphRAG

教程

GraphRag 环节

Org Export Ox

ox-pandoc

latex 内嵌公式的支持

inline 图片支持

全部 resources 数据 inline 支持

Lazygit

CheatSheet

切换多个页面

切换 Tab 页

一个 Tab 页上的多个 item

Http in Emacs and ELisp

使用 plz.el / plz-see 一步请求

使用 request.el

Neovide

how to use neovide with ssh

Rss

参考

MCP 协议 + 大模型 tools 调用

mcp server list

client

Paddlex

paddlex 内部的代码设计模式

使用Registry 注册模型信息

vllm

部署 embedding 模型

Syncthing

如何在两台 ssh tunnel 连接的机器上使用 syncthing

Arm64 Aarch64

miniconda 安装

Ascend NPU

如何查看版本号

CANN

npu-smi info使用

Ollama

windows 设置

使用

SMAC

入口类

程序入口

SMAC

multi-objectives

runhistory 转换成 单个cost 的工具

数据收集用来做模型训练的方法

多目标代理模型类

SMAC

multi-objectives

runhistory 转换成 单个cost 的工具

数据收集用来做模型训练的方法

多目标代理模型类

Rime

librime 安装

ubuntu 20.04

Tmux ---- A terminal multiplex tool

改变 prefix 按键的方发

Wps

arch linux 安装 Wps 中文版方法

安装方法

runhistory 转换成单个cost 的工具

runhistory 转换成单个cost 的工具