设计一个 C 语言的动态扩容缓冲区
知识要点:字符串、面向对象的 C 语言设计、动态内存分配、Linux File API、getline。
文章目录
- 设计一个 C 语言的动态扩容缓冲区
-
- 代码编写及讲解
-
- Part 2A
-
- void strbuf_init(struct strbuf *sb, size_t alloc);
- void strbuf_attach(struct strbuf *sb, void *str, size_t len, size_t alloc);
- void strbuf_release(struct strbuf *sb);
- void strbuf_swap(struct strbuf *a, struct strbuf *b);
- char *strbuf_detach(struct strbuf *sb, size_t *sz);
- int strbuf_cmp(const struct strbuf *first, const struct strbuf *second);
- void strbuf_reset(struct strbuf *sb);
- Part 2B
-
- void strbuf_grow(struct strbuf *sb, size_t extra);
- void strbuf_add(struct strbuf *sb, const void *data, size_t len);
- void strbuf_addch(struct strbuf *sb, int c);
- void strbuf_addstr(struct strbuf *sb, const char *s);
- void strbuf_addbuf(struct strbuf *sb, const struct strbuf *sb2);
- void strbuf_setlen(struct strbuf *sb, size_t len);
- size_t strbuf_avail(const struct strbuf *sb);
- void strbuf_insert(struct strbuf *sb, size_t pos, const void *data, size_t len);
- Part 2C
- Part 2D
- CHALLENGE
- 参考资料
代码编写及讲解
缓冲区类的定义
struct strbuf {
int len; //当前缓冲区(字符串)长度
int alloc; //当前缓冲区(字符串)容量
char *buf; //缓冲区(字符串)
};
HINT
strbuf
的成员len
代表的是buf
缓冲区的长度,每次我们将字符串追加入strbuf
中,我们都应该使用strbuf_setlen()
去更新strbuf
的长度len
,注意123\0456
的长度不是 3,而是 7。strbuf
的成员alloc
代表的是buf
缓冲区的容量,也就是我们每次动态分配的数组大小,每当我们需要向sb
内追加一个字符串,我们需要计算当前的字符串长度加上追加的字符串长度,如果超过了当前的容量,我们就需要把容量扩大一倍,然后将字符串添加进去。
Part 2A
实现字符串缓冲区类
strbuf
简单的初始化,填充,释放,交换,比较,清空等操作。
void strbuf_init(struct strbuf *sb, size_t alloc);
初始化
sb
结构体,容量为alloc
。
初始化时要为缓冲区写入容量大小,在内存中申请空间,写入长度大小,并将缓冲区设置为空字符串。
void strbuf_init(struct strbuf *sb, size_t alloc) {
sb->alloc = alloc;
sb->buf = (char *) malloc(alloc);
sb->buf[sb->len = 0] = '\0';
}
void strbuf_attach(struct strbuf *sb, void *str, size_t len, size_t alloc);
将字符串填充到
sb
中,长度为len
, 容量为alloc
。
字符串
已经有其对应的长度、容量、内容信息,直接将其对应填入缓冲区即可。
void strbuf_attach(struct strbuf *sb, void *str, size_t len, size_t alloc) {
sb->len = len;
sb->alloc = alloc;
sb->buf = (char *) str;
}
void strbuf_release(struct strbuf *sb);
释放
sb
结构体的内存。
释放缓冲区内存,将容量大小、长度信息归零,并为缓冲区赋予空指针,防止重复释放内存时报错。
void strbuf_release(struct strbuf *sb) {
free(sb->buf);
strbuf_attach(sb, NULL, 0, 0);
}
void strbuf_swap(struct strbuf *a, struct strbuf *b);
交换两个
strbuf
。
交换时,可以利用结构体浅拷贝特性,通过增加一个临时的缓冲区变量,实现两个缓冲区的交换。
void strbuf_swap(struct strbuf *a, struct strbuf *b) {
struct strbuf tmp = *a;
*a = *b;
*b = tmp;
}
char *strbuf_detach(struct strbuf *sb, size_t *sz);
将
sb
中的原始内存取出,并将sz
设置为其alloc
大小。
将缓冲区的容量信息赋给sz
,并返回缓冲区的指针。
char *strbuf_detach(struct strbuf *sb, size_t *sz) {
*sz = sb->alloc;
return sb->buf;
}
int strbuf_cmp(const struct strbuf *first, const struct strbuf *second);
比较两个
strbuf
的内存是否相同。
缓冲区中可能有'\0'
存在,所以需要比较长度范围内的所有信息,不能使用strcmp()
。
可以先比较长度,如果长度不同则返回长度的差,如果长度相同则使用memcmp()
比较长度内的信息。
int strbuf_cmp(const struct strbuf *first, const struct strbuf *second) {
return first->len - second->len || memcmp(first->buf, second->buf, first->len);
}
void strbuf_reset(struct strbuf *sb);
清空
sb
。
清空缓冲区,则需要将长度归零,并将空字符串填入缓冲区。
void strbuf_reset(struct strbuf *sb) {
sb->buf[sb->len = 0] = '\0';
}
Part 2B
实现字符串缓冲区类
strbuf
扩容,(追加|插入)字符,字符串等操作。
void strbuf_grow(struct strbuf *sb, size_t extra);
确保在
len
之后strbuf
中至少有extra
个字节的空闲空间可用。
先计算可用空间,如果可用空间不足,则重新申请内存,将内存指针赋给缓冲区,并更新容量信息。
void strbuf_grow(struct strbuf *sb, size_t extra) {
if (sb->alloc - sb->len < extra)
sb->buf = (char *) realloc(sb->buf, sb->alloc += extra);
}
void strbuf_add(struct strbuf *sb, const void *data, size_t len);
向
sb
追加长度为len
的数据data
。
追加数据前,先保证容量足够,然后将追加内容拷贝进缓冲区,并更新长度、字符串结束标志。
void strbuf_add(struct strbuf *sb, const void *data, size_t len) {
strbuf_grow(sb, len + 1);
memcpy(sb->buf + sb->len, data, len);
sb->buf[sb->len += len] = '\0';
}
void strbuf_addch(struct strbuf *sb, int c);
向
sb
追加一个字符c
。
使用追加函数向缓冲区追加字符,长度为1。
void strbuf_addch(struct strbuf *sb, int c) {
strbuf_add(sb, &c, 1);
}
void strbuf_addstr(struct strbuf *sb, const char *s);
向
sb
追加一个字符串s
。
使用追加函数向缓冲区追加字符串,长度为strlen(s)
。
void strbuf_addstr(struct strbuf *sb, const char *s) {
strbuf_add(sb, s, strlen(s));
}
void strbuf_addbuf(struct strbuf *sb, const struct strbuf *sb2);
向一个
sb
追加另一个strbuf
的数据。
使用追加字符串函数向缓冲区追加另一个缓冲区的内容。
这种做法并不规范!标准做法是使用追加函数向缓冲区追加另一个缓冲区的内容,长度为缓冲区的长度。
void strbuf_addbuf(struct strbuf *sb, const struct strbuf *sb2) {
strbuf_addstr(sb, sb2->buf);
}
void strbuf_setlen(struct strbuf *sb, size_t len);
设置
sb
的长度len
。
如果设置的长度大于缓冲区容量,则先增加缓冲区容量。设置长度,并在对应位置增加字符串结束标志'\0'
。
这种做法并不规范!函数默认:设置的长度一定小于容量。所以不需要判断长度或者增加容量,遇到问题应该直接抛出错误。
void strbuf_setlen(struct strbuf *sb, size_t len) {
if (len > sb->alloc) strbuf_grow(sb, len - sb->len + 1);
sb->buf[sb->len = len] = '\0';
}
size_t strbuf_avail(const struct strbuf *sb);
计算
sb
目前仍可以向后追加的字符串长度。
返回缓冲区容量减去字符串长度再减一的值。
size_t strbuf_avail(const struct strbuf *sb) {
return sb->alloc - sb->len - 1;
}
void strbuf_insert(struct strbuf *sb, size_t pos, const void *data, size_t len);
向
sb
内存坐标为pos
位置插入长度为len
的数据data
。
设置缓冲区长度为插入后的长度,将插入字符串处的缓冲区内容移动到插入内容结束的位置,并使用memcpy()
拷贝长度为len
的内容到插入的位置。
void strbuf_insert(struct strbuf *sb, size_t pos, const void *data, size_t len) {
strbuf_setlen(sb, sb->len + len);
memmove(sb->buf + pos + len, sb->buf + pos, sb->len - pos);
memcpy(sb->buf + pos, data, len);
}
Part 2C
void strbuf_rtrim(struct strbuf *sb);
去除
sb
缓冲区右端的所有空格,tab,‘\t’。
如果读到结尾处时空格或者制表符,则填充字符串结束标志'\0'
,并减少长度,直到结尾处不是空格或者制表符。
void strbuf_rtrim(struct strbuf *sb) {
while (sb->buf[sb->len - 1] == ' ' || sb->buf[sb->len - 1] == '\t')
sb->buf[--sb->len] = '\0';
}
void strbuf_ltrim(struct strbuf *sb);
去除
sb
缓冲区左端的所有空格,tab,‘\t’。
声明一个修剪位置变量为缓冲区内容开头的相对位置,如果读到修剪位置处时空格或者制表符,则增加修剪位置,直到修剪位置处不是空格或者制表符。
将修剪位置处开始,长度为缓冲区长度减去修剪位置+1的缓冲区内容移动到缓冲区内容开头,并将缓冲区长度减去修剪位置,就完成了缓冲区左端的修剪操作。
void strbuf_ltrim(struct strbuf *sb) {
int trimpos = 0;
while (sb->buf[trimpos] == ' ' || sb->buf[trimpos] == '\t') trimpos++;
memmove(sb->buf, sb->buf + trimpos, (sb->len -= trimpos) + 1);
}
void strbuf_remove(struct strbuf *sb, size_t pos, size_t len);
删除
sb
缓冲区从pos
坐标长度为len
的内容。
将删除坐标加删除长度处,长度为缓冲区长度减删除长度减相对删除位置+1的内容,移动到绝对删除位置处,并将缓冲区长度减去删除长度,便完成了删除缓冲区指定位置处指定长度内容的操作。
void strbuf_remove(struct strbuf *sb, size_t pos, size_t len) {
memmove(sb->buf + pos, sb->buf + pos + len, (sb->len -= len) - pos + 1);
}
Part 2D
ssize_t strbuf_read(struct strbuf *sb, int fd, size_t hint);
sb
增长hint ? hint : 8192
大小,然后将文件描述符为fd
的所有文件内容追加到sb
中。
先使用strbuf_grow()
增长内存空间,再使用fdopen()
读取文件到文件指针*fp
。使用fgetc()
逐字符读取,并使用strbuf_addch()
将字符加入缓冲区,直到读到文件末尾结束,返回读取的文件长度。
ssize_t strbuf_read(struct strbuf *sb, int fd, size_t hint) {
strbuf_grow(sb, hint ? hint : 8192);
FILE *fp = fdopen(fd, "r");
for (char ch; (ch = fgetc(fp)) != EOF;) strbuf_addch(sb, ch);
return sb->len;
}
int strbuf_getline(struct strbuf *sb, FILE *fp);
将文件句柄为
fp
的一行内容(抛弃换行符)读取到sb
。
使用fgetc()
逐字符读取文件指针*fp
,并使用strbuf_addch()
将字符加入缓冲区,直到读到换行符或者文件末尾结束,返回读取的文件长度。
int strbuf_getline(struct strbuf *sb, FILE *fp) {
for (char ch; (ch = fgetc(fp)) != '\n' && ch != EOF;) strbuf_addch(sb, ch);
return sb->len;
}
CHALLENGE
1.实现字符串切割(C 系字符串函数的一个痛点)。
struct strbuf **strbuf_split_buf(const char *str, size_t len, int terminator, int max);
将长度为
len
的字符串str
根据切割字符terminator
切成多个 strbuf,并从结果返回,max 可以用来限定最大切割数量。返回struct strbuf
的指针数组,数组的最后元素为NULL
。
刚开始,我尝试使用strtok()
实现,但是由于缓冲区内容含有'\0'
,此后的内容被舍弃了,所以并没有达成目标。
struct strbuf **strbuf_split_buf(const char *str, size_t len, int terminator, int max) {
struct strbuf **ret = (struct strbuf **) malloc(sizeof(struct strbuf *) * (max + 1));
char s[len + 1], delim[2] = {
(char) terminator};
memcpy(s, str, len + 1);
char *token = strtok(s, delim);
for (int i = 0; token && i < max; ret[++i] = NULL) {
ret[i] = (struct strbuf *) malloc(sizeof(struct strbuf));
strbuf_init(ret[i], 0);
strbuf_addstr(ret[i], token);
token = strtok(NULL, delim);
}
return ret;
}
后来,则标记字串的起始位置和结束位置,通过循环来逐字符判断,满足条件则切割,循环完毕即输出。
struct strbuf **strbuf_split_buf(const char *str, size_t len, int terminator, int max) {
struct strbuf **ret = (struct strbuf **) malloc(sizeof(struct strbuf *) * (max + 1));
for (int pos = 0, flag = 0, n = 0; pos <= len && n < max; pos++) {
while (str[flag] == terminator) pos = flag++ + 2;
if (pos == len || pos > flag && str[pos] == terminator) {
ret[n] = (struct strbuf *) malloc(sizeof(struct strbuf));
strbuf_init(ret[n], 0);
strbuf_add(ret[n], str + flag, pos - flag);
// printf("[%d]: %s (%d~%d, %d)\n", n, ret[n]->buf, flag, pos, pos - flag);
while (str[pos] == terminator) flag = pos++;
ret[++n] = NULL;
}
}
return ret;
}
2.实现判断一个strbuf是否以指定字符串开头的功能(C系字符串函数的另一个痛点)。
bool strbuf_begin_judge(char* target_str, const char* str, int strlen);
target_str:目标字符串,str:前缀字符串,strlen:target_str长度,前缀相同返回true失败返回false
前缀字符串为空则返回true
,否则使用strncmp()
对比目标字符串的前strlen
字节是否与前缀字符串相同,如果相同结果为0返回true
,否则返回false
。
bool strbuf_begin_judge(char *target_str, const char *str, int strnlen) {
return str == NULL || !strncmp(target_str, str, strlen(str));
}
3.获取字符串从坐标
[begin, end)
的所有内容(可以分成引用和拷贝两个模式)。
char* strbuf_get_mid_buf(char* target_buf, int begin, int end, int len);
target_str:目标字符串,begin:开始下标,end:结束下标,len:target_buf的长度。参数不合法返回NULL。下标从0开始,[begin, end)区间。
如果参数不合法(起始大于结束、结束大于长度)返回NULL
。
否则为字符串申请结束下标减开始下标+1的空间,将指定位置指定长度的字符串填入,并在末尾加上字符串结束标志'\0'
,返回字符串。
char *strbuf_get_mid_buf(char *target_buf, int begin, int end, int len) {
if (begin > end || end >= len) return NULL;
char *str = (char *) malloc(end - begin + 1);
memcpy(str, target_buf + begin, end - begin);
str[end - begin] = '\0';
return str;
}
参考资料
adlternative, zhoukuo123, Y7n05h, fansehep, hiyoyolumi, Vincil Lau, yegetables. Plan/strbuf.md at main · xiyou-linuxer/Plan. 2023-01-01 (CC BY-SA 4.0)