zhangjcsd的专栏

Intrduction word2vec是训练词向量的方法，tensorflow自带的word2vec代码实现的是Skip-gram方法，即使用周边词预测中心词。 代码比较简单，BP的一个前向后向过程，主要学习BP网络的搭建方法 Code Analysis：     def maybe_download(filename, expected_bytes):'''数据下载方法，下载完毕是一个

离大学网络课已经很久了，最近由于工作的原因，重新认识了一下这三个东西。以前记住的知识很全面，用来考试用。现在理解的很浅显，但是却很实用。 共同点就是，他们都有好多孔，每个孔可以引出来一条网线，连上一台电脑。这样就可以把一群电脑连到一起。 不同点 先说hub和switch 1. hub是一种低级的交换机 2. 他们都工作在数据链路层 3. 交换机以mac地址来作为网络包转发路径的依据。h

管理实验室网站的原因，学了mysql一招。 1. mysql表类型分不同的引擎，包括MyISAM和InnoDB，因为商业的问题后面可能还有其他，没关心。 MyISAM对高级的事物操作支持非常差，连最基本的外键都不支持。所以，之前在表上加外键约束，不起效，后来定位是MyISAM的问题。 Navicat上点中一个表，看他的属性，就能看到用得时是什么引擎。 2. 我的mysql版

之前，遇到汉字的utf8编码问题，掌握了处理方法，没做理论方面的深究。如今又遇到了缅甸语的编码问题，现在理清一下理论的问题。 1. utf8是变长编码，也就是一个字符（汉字或是其他文字）所占的字节数不同。 这个主要影响C++里面把一个句子分割成一串字符序列时，substring的参数，也就是一次取几个字节出来，如果字节长度没确定对，会把正确的字切开，导致乱码问题。 字节长度变化范

解码器采用Moses，有其他选择。 官网：http://www.statmt.org/moses/ ，上面的manual.pdf非常有用。 下载地址：https://github.com/moses-smt/mosesdecoder 前序安装： moses需要boost库的支持，所以需要先装boost，boost1.48中存在影响moses的bug，所以应该避开该版本，选择其他版本。我

语言模型工具选择使用SRILM。存在其他选择KenLM, IRSTLM。 下载地址：http://www.speech.sri.com/projects/srilm/download.html ，需要提供一点个人信息才允许下载。 下载完后，解压。 vi Makefile 改SRILM = $文件夹路径 MACHINE_TYPE := i686-m64 记得去掉#，保存退出。 ma

训练语料是句子级别对齐的，词对齐工具用来从句子对齐中学习到词对齐，对齐这个概念可以理解成为两个词的翻译对应关系。理论知识不再介绍，感兴趣的看《统计机器翻译》 对齐工具有多个，这里选择使用GIZA++， 下载与编译 下载地址：github 下载完，解压后的路径结构： 其实，这里包含了两个工具，一个是GIZA++，一个是mkcls。make一下，编译。我的编译环境是：gcc versio

语料获取不在赘述，可以去LDC上申请，也可以找找别人放出的免费资源。语料编码默认都是UTF8。 第一步做语料处理： 汉语端需要做分词，标点符号全半角转换。 英语端需要做转小写，token，标点符号全半角转换 工具： standford

// Sort_and_Count.cpp : 定义控制台应用程序的入口点。 // #pragma once #include "stdafx.h" #include #include #include #include using namespace std; int fileLength = 10000; int numbers[10000];//存储所有数据的数组 long i

// Sort_and_Count.cpp : 定义控制台应用程序的入口点。 // #pragma once #include "stdafx.h" #include #include #include #include using namespace std; int fileLength = 100000; int numbers[100000];//存储所有数据的数组 voi

整理一些小的方法，以后方便复用 文件duxie

#include "math.h" string str="2.1"; double= atof(str.c_str());

文件开头： #!/bin/bash 屏幕输出

# Executable EXE    = BPnetwork # Compiler, Linker Defines CC      = g++  CFLAGS  = -w -O -Wno-deprecated LIBS    =  LDFLAGS = $(LIBS) # Compile and Assemble C++ Source Files into Objec

读文件

RT 总结，积累。 2014-06-27

以前在百度写过一些技术博客，都是一些技术总结记录。 从开始踏入计算机学科，接触过的东西也很多，但是不经常总结，到现在能掌握住的也很少。 尤其现在，年龄大了，事情也多了，记性更差了。写一些拾遗文章一方面可以记录一些有用的知识，另一方面也给自己的学习提供动力，或许也能给他人提供一定的帮助。 好好写！