weixin_30814329的博客

Core Data持久化数据存储（1） Core Data是iOS编程中使用持久化数据存储的一种方式。在以前的教程 –读写应用程序的设置数据，我们已经提供了三种方式来实现App数据的存储，分别为：(1) 用户默认设置 – 这种情况通常不需要用户干预，如游戏通关信息，Video播放记录，或者App退出之后，下次进入时，希望恢复到退出时的情况...

若干年之前的一道题，当时能写出来还是超级开心的，虽然是个板子题。一直忘记写博客，备忘一下。米勒拉判大素数，关于米勒拉宾是个什么东西，传送门了解一下:biubiubiu~B. Goldbach题目传送门自己看题意吧，直接贴代码了。代码： 1 #include<iostream> 2 #include<cstdio> 3 #inc...

post的数据为xml字符串，通过 $xml = simplexml_load_string($post_data);转换成xml对象 $header[] = "Content-type: text/xml";//定义content-type为xml $post_data = '<?xml version="1.0" encoding="UTF-8"?...

中英文对照 —— 数学 a deceptively simple formula revealed a hidden unity buried in the fabric of the universe，一个看似简单的方程于错综复杂的宇宙中揭示出隐藏其中的统一性质；E=mc2：E equals m c squared.nash equilibri...

BRD 商业需求文档 Business Requirement DocumentMRD 市场需求文档 Market Requirement DocumentPRD 产品需求文档 Product Requirement Document其实最好就是记住每个文档的第一个单词： Business商业、Market市场、Product产品;那它们之间到底是什么关系呢?不如打一个比方：BRD是产品的head...

论文：https://papers.nips.cc/paper/5346-sequence-to-sequence-learning-with-neural-networks.pdf译文：用神经网络实现序列到序列的学习摘要深度神经网络模型在很多困难的学习任务中都取得了优越的表现。虽然在有大量标注数据的情况下，DNN可以工作得很好，但是它们没法把序列映射成序列。本文，我们提出一...

LSTM转载于:https://www.cnblogs.com/yangwenhuan/p/11365957.html

RNN（Recurrent Neural Networks）循环神经网络广泛应用于自然语言处理（NLP，Natural Language Processing）Back Propagation Through TimeVanishing gradient problemLSTM，长期依赖，long term dependenciesthe clouds ar...

NCCL（NVIDIA Collective Communication Library），英伟达多GPU通信库。参考链接：https://docs.nvidia.com/deeplearning/sdk/nccl-developer-guide/docs/index.html转载于:https://www.cnblogs.com/yangwenhuan/p/111...

论文：https://arxiv.org/pdf/1710.03740.pdf译文：混合精度训练摘要增加神经网络的size，可以提高准确率。但同时，也加大了训练模型所需的内存和计算量。我们介绍一种使用半精度浮点数来训练深度神经网络的方法，不会损失准确率，也不需要修改超参数。这种方法让内存需求减半，而且在最近的GPU上，加速了算术运算。权值、激活值和梯度都以IEEE半精度格式存...

论文：https://www.cs.toronto.edu/~ranzato/publications/DistBeliefNIPS2012_withAppendix.pdf译文：大规模分布式深度网络摘要最近，无监督特征学习和深度学习的相关工作表明，训练大模型可以显著提高模型的性能。本文，我们考虑使用上万个CPU核心来训练有数十亿参数的深度网络问题。我们已经开发出名为Dist...

论文：https://arxiv.org/pdf/1810.11787.pdf译文：深度神经网络分布式训练指引摘要深度学习让人工智能领域取得了很大的进步。但是训练这些深度学习模型需要大量的计算。单机单卡训练ImageNet需要一周。多机分布式训练可以极大地减少训练时间。最近，有2048个GPU的一个集群，把训练ImageNet的时间减少到4min。本文调研分布式训练的各种算法...

https://gcc.gnu.org/onlinedocs/gcc/Optimize-Options.html转载于:https://www.cnblogs.com/yangwenhuan/p/11301599.html

参考链接https://wiki.python.org/moin/ExtensionTutorial转载于:https://www.cnblogs.com/yangwenhuan/p/11299149.html

request-reply可以先启动client，再启动server。publish-subscribeparallel pipelinehttp://zguide.zeromq.org/page:allhttps://github.com/zeromq/libzmq转载于:https://...

NUMA（Non Uniform Memory Access Architecture，非统一内存访问架构）socket：多个core的封装，对应于cpu插槽。名字没啥特殊含义，感觉是随便起的。core：cpu物理核。超线程：cpu虚拟化技术。通常一个物理核会虚拟化成两个逻辑核（processor）。主要是为了在内存io比较多的场景下，不让cpu闲置，提高cpu利用率。这里多...

论文：https://i.cs.hku.hk/~cwu/papers/yhpeng-sosp19.pdf译文：一个用于分布式DNN训练加速的通用通信调度器摘要我们提出ByteScheduler，一个用于分布式DNN训练加速的通用通信调度器。ByteScheduler基于我们最基本的分析：通过张量切分和重组来进行传输，可以得到理论上的最优结果，即使真实环境中有调度代价，性能表现...

相关软件1、kubeadm安装步骤apt-get update　　1、禁用所有交换分区swapoff -a/etc/fstab可以用free命令查看禁用情况root@gpu-10-0-1-24:~# free total used fr...

1、下载ksonnet和kubeflow，并解压归档wget https://github.com/ksonnet/ksonnet/releases/download/v0.13.1/ks_0.13.1_linux_amd64.tar.gzwget https://github.com/kubeflow/kubeflow/archive/v0.4.0-rc.3.tar...

SELinux（Security-Enhanced Linux），是Linux的的安全子系统。转载于:https://www.cnblogs.com/yangwenhuan/p/11484733.html