C 语言分词

最新推荐文章于 2021-12-25 02:59:01 发布

juzimeizi

最新推荐文章于 2021-12-25 02:59:01 发布

阅读量2.8k

点赞数

本文链接：https://blog.csdn.net/jike080401/article/details/50272813

版权

本文探讨了C语言中的分词操作，重点介绍了标准库函数strtok的使用，该函数能够根据指定的分隔符将字符串分割成多个属性。

摘要由CSDN通过智能技术生成

分词是对字符串的基本操作，比如一行数据表示一个记录，记录中使用的分割符就可以做为分词符号，使用这个分词符号，可以得到记录的所有属性

C 的标准库中 “strtok” 提供了这样的功能，它的使用方式如下：

#include <stdio.h>
#include <string.h>
#include <assert.h>

class CStrTok
{
public:
	void init_pattern(char *pattern) {
		strncpy(m_pattern, pattern, PATTERN_SIZE);
	} 
	void token(const char *s) {
		m_nums_of_token = 0;
		memset(m_token_container, 0, TOKEN_SIZE_MAX);
		strncpy(m_buf, s, BUFSIZ);
		m_token_container[m_nums_of_token] = strtok(m_buf, m_pattern);
		while (m_token_container[m_nums_of_token] != NULL) {
			++m_nums_of_token;
			assert(m_nums_of_token!=TOKEN_SIZE_MAX);
			m_token_container[m_nums_of_token] = strtok(NULL, m_pattern);
		}
	} 
	size_t nums_of_token() {
		return m_nums_of_token;
	} 
	char * GetTokenStr(int index) {
		return m_token_container[index];
	}

	void reset() {
		m_nums_of_token = 0;
	}

priva