More than code

More Than Code
The efficiency of your iteration of reading, practicing and thinking decides your understanding of the world.
未分类

brpc-5 Futex

Futex 在进入到brpc之前,先看看linux的futex是怎么用的。 man page中有比较详细的描述 可以把futex看作是一个原子的compare-and-block,他会原子的比较目标地址上的值,并进入睡眠。 通常的用法就是我们先通过一个用户空间的原子量来表示锁。当一个线程发现锁已经被获得了以后,他就会通过futex来睡眠,直到锁不再被其他人占有。 (感觉实现起来需要特殊处理signal,我们只要保证signal不出现在compare和block之间,就不会出现lost wakeup的问题) fute…

2022年6月6日 0条评论 468点热度 0人点赞 sheep 阅读全文
未分类

brpc-4 bthread

bthread 线程知识 bthread文档 bthread很关键的一点和协程的不同就是当bthread被阻塞的时候,同一个pthread下的其他bthread不会被阻塞,而是会被其他的pthread偷走运行。 bthread的启动函数 bthread中的一个task group对应了一个worker,可以看到他是从tls中取task group的,所以可以想到是一个pthread对应一个task group 如果没有task group的话,说明当前的pthread不是bthread worker。所以我们就调用…

2022年6月5日 0条评论 620点热度 0人点赞 sheep 阅读全文
未分类

brpc-3 IO(2)

IO(2) 我之前画的一个图,表示RPC的通信过程。 上一次说了server端是怎么接受请求并处理的,这一次看看客户端这边的处理。 我们在通过Stub调用RPC的时候,会调用到channel.CallMethod中 void EchoService_Stub::Echo(::google::protobuf::RpcController* controller, const ::EchoRequest* request, ::EchoResponse* response, ::google::protobuf::C…

2022年6月4日 0条评论 841点热度 0人点赞 sheep 阅读全文
未分类

brpc-2 IO

IO 文档 dispatcher在event_dispatcher.h中 当新的连接出现的时候,dispatcher就负责将fd分发给bthread epoll out在我们可以向对端写入数据的时候会触发 epoll in则是在对端有数据写入时会触发。触发一次后需要不断的读取所有数据直到EAGAIN为止。 EPOLLIN connection arrives; data is coming; The associated file is available for read operations EPOLLOUT …

2022年6月3日 0条评论 605点热度 0人点赞 sheep 阅读全文
未分类

brpc-1 ResourcePool

记录一下在读brpc的时候学习到的点 ResourcePool ResourceID来标识资源。虽然不同的类型有不同类型的ResourcID,但是内部都是一个uint64 存储数据的是Block。当线程需要内存的时候,他就会分配一个block。每个block内部的数据只会被一个线程使用 一个block就相当于是一个小的DataPool 若干个block组成一个block group。BlockGroup通过指针数组索引block LocalPool是thread local的data pool 一个比较有意思的点就…

2022年6月3日 0条评论 602点热度 0人点赞 sheep 阅读全文
paper

Morsel-Driven Parallelism: A NUMA-Aware Query Evaluation Framework for the Many-Core Age

Morsel-Driven Parallelism: A NUMA-Aware Query Evaluation Framework for the Many-Core Age Abstract 随着计算机架构的发展,在parallel query execution中出现了两个问题: * 为了利用好多核的优势,每个查询需要被均匀的分布到每个线程中 * 即便是我们拥有相当准确的统计数据,也很难将负载均匀的划分开 这两个问题导致了目前的plan-driven parallelism陷入了负载均衡和上下文切换的瓶颈中 …

2022年6月2日 0条评论 544点热度 1人点赞 sheep 阅读全文
123
分类
  • Agent/RAG
  • ARTS
  • C++
  • CSAPP
  • daily
  • database
  • leetcode
  • linux
  • ml
  • nlp
  • paper
  • RL
  • rocksdb
  • rust
  • ScummVM
  • tech
  • 其他
  • 周报
  • 未分类
  • 笔记
  • 算法
  • 计算机图形学
归档
  • 2025 年 8 月
  • 2025 年 7 月
  • 2025 年 5 月
  • 2025 年 4 月
  • 2025 年 3 月
  • 2025 年 2 月
  • 2025 年 1 月
  • 2024 年 12 月
  • 2024 年 10 月
  • 2024 年 9 月
  • 2024 年 8 月
  • 2024 年 7 月
  • 2024 年 6 月
  • 2024 年 5 月
  • 2024 年 4 月
  • 2024 年 3 月
  • 2024 年 2 月
  • 2023 年 12 月
  • 2023 年 11 月
  • 2023 年 9 月
  • 2023 年 7 月
  • 2023 年 6 月
  • 2023 年 5 月
  • 2023 年 4 月
  • 2023 年 2 月
  • 2023 年 1 月
  • 2022 年 9 月
  • 2022 年 7 月
  • 2022 年 6 月
  • 2022 年 5 月
  • 2022 年 4 月
  • 2022 年 3 月
  • 2022 年 2 月
  • 2022 年 1 月
  • 2021 年 12 月
  • 2021 年 11 月
  • 2021 年 10 月
  • 2021 年 9 月
  • 2021 年 8 月
  • 2021 年 7 月
  • 2021 年 6 月
  • 2021 年 5 月
  • 2021 年 4 月
  • 2021 年 3 月
  • 2021 年 1 月
  • 2020 年 12 月

COPYRIGHT © 2021 heavensheep.xyz. ALL RIGHTS RESERVED.

THEME KRATOS MADE BY VTROIS