Taobao File System

最新推荐文章于 2021-10-26 17:46:13 发布
最新推荐文章于 2021-10-26 17:46:13 发布
阅读量1.1k 收藏
点赞数
文章标签： tfs
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xubaoguo/article/details/11737995
版权

TFS是淘宝针对海量非结构化数据存储设计的分布式系统，构筑在普通的Linux机器集群上，可为外部提供高可靠和高并发的存储访问。高可扩展、高可用、高性能、面向互联网服务。

特性

  • 采用扁平化的数据组织结构
  • 使用HA架构和平滑扩容
  • 支持多种客户端
  • 支持大小文件存储
  • 可为外部提供高可靠和高并发的存储访问


 

最新动态

TFS-1.4.0版本发布

  • 新增支持大文件功能
  • 新增Resource Center Server，用于管理TFS集群的用户资源配置
  • 新增TFS服务程序开发框架，统一TFS网络客户端库，并新增异步回调功能
  • 优化数据流，让写请求尽可能均匀的分布在不同的DataServer

相关文章
http://tfs.taobao.org/

 http://blog.163.com/a12333a_li/blog/static/8759428520124411295494/

http://www.infoq.com/cn/articles/tao-tfs/

http://www.blogjava.net/xiaomage234/archive/2012/11/15/391374.html


飘着的风
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
TFS(taobao file system淘宝文件系统)RestFul API 试用总结
03-11 3422
刚试用了下淘宝自己开发的文件系统TFS，感觉基于nginx做的RESTful API用起来还是挺方便的，下面对这些API简单总结下，也说下我的一些经验： 特别是那些觉得搭PHP环境的很麻烦的朋友不访参考下我的方案二。 nginx_ip为nginx客户端的ip，port为nginx web服务接口。 一.得用restful api(详细可以参考淘宝的github)     1
TFS（Taobao FileSystem）介绍
11-07
TFS总体结构介绍；TFS平滑扩容原理；TFS存储机制；TFS容错机制；TFS并发机制；TFS安装和使用
taobao file system
sealbird的专栏
10-21 311
http://code.taobao.org/trac/tfs/wiki/intro 简介¶ TFS（Taobao FileSystem）是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统，主要针对海量的非结构化数据，它构筑在普通的Linux机器集群上，可为外部提供高可靠和高并发的存储访问。TFS为淘宝提供海量小文件存储，通常文件大小不超过1M，满足了淘宝对小文件存储的需求，被...
淘宝网图片存储系统架构
leeandmins的博客
02-24 2225
问题导读： 1.TFS(淘宝文件系统，Taobao FileSystem)是如何产生的？ 2.淘宝 TFS 文件系统在核心设计是什么？ 3.它们是如何处理大量图片的？ 4.TFS1.3在元数据存内存上，清理磁盘空间，性能做了哪些优化？ 本文侧重介绍淘宝网后台的图片存储系统架构、包括 TFS集群文件系统，以及前端处理服务器架构。解决海量并发小文件的系统噩梦，对于淘宝网这
Taobao FIle System 编译和使用
Must_Do的博客
03-20 1515
前言 最近android项目里要用到小文件存储集群，老大决定调研一下各个集群文件存储系统是否能完成相关的工作，之前我测试了一下mongoDb存储视频文件（4MB），在局域网里速度应该是秒级的，不过mongo是文档型的数据库，并不太适合做视频存储，做笔记的目的是想记录一下编译TFS的过程，因为这方面网上的教程较少，可能TFS停止更新好长时间了。 编译 编译前确定编译环境是linux 64位...
TFS（Taobao File System）团队CODE协作工具
qq_43476358的博客
10-26 1490
TFS（Taobao File System）是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统，TFS由nameserver(NS)、dataserver(DS)、client三个部分组成，详细设计原理参考[丢失link] TFS适用场景 TFS提供海量文件的可靠存储，尤其适合海量小文件的存储；TFS没有传统文件系统的目录树结构，所有文件处于一个扁平化的名字空间；TFS不支持posix接口，必须通过TFS提供的客户端API(read/write/delete)来读、写、删文件。 TFS最大集群
淘宝分布式文件服务器taobao file system tfs配置文件
08-25
淘宝分布式文件服务器taobao file system tfs配置文件 为线上正在使用的生产配置 具体配置项可视自己服务微调,配置项含义参考tfs.taobao.org的文档说明.有无备份集群不影响TFS的运行,若没有,则去掉备份集群的配置
TFS（Taobao File System）功能说明以及使用
最新发布
07-11
TFS（Taobao File System）是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统， [1]主要针对海量的非结构化数据，它构筑在普通的Linux机器集群上，可为外部提供高可靠和高并发的存储访问。TFS为淘宝...
淘宝分布式文件系统TFS设计
xiaogugood的专栏
09-17 2583
原文地址：http://blog.chinaunix.net/uid-20196318-id-3904914.html TFS（Taobao File System）是一个高可用、高性能、高可扩展的分布式文件系统，基于普通的Linux服务器构建，主要提供海量非结构化数据存储服务。TFS被广泛地的应用在淘宝的各项业务中，目前已部署的最大集群存储文件数已近千亿。 TFS已在TaoCo
TFS(Taobao File System)
weixin_33962621的博客
06-07 166
简介 TFS（Taobao !FileSystem）是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统，主要针对海量的非结构化数据，它构筑在普通的Linux机器集群上，可为外部提供高可靠和高并发的存储访问。TFS为淘宝提供海量小文件存储，通常文件大小不超过1M，满足了淘宝对小文件存储的需求，被广泛地应用在淘宝各项应用中。它采用了HA架构和平滑扩容，保证了整...
TFS淘宝文件系统原理
xiaomin1991222的专栏
06-25 296
简介     TFS（Taobao !FileSystem）是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统，主要针对海量的非结构化数据，它构筑在普通的Linux机器 集群上，可为外部提供高可靠和高并发的存储访问。TFS为淘宝提供海量小文件存储，通常文件大小不超过1M，满足了淘宝对小文件存储的需求，被广泛地应用 在淘宝各项应用中。它采用了HA架构和平滑扩容，保证了整个文件系统的可...
centos 安装 taobao file system
feng27156的专栏
06-26 1978
安装依赖的软件包 automake TFS基于automake工具构建 下载源码安装apt-get install automakeyum install automake.noarch libtool automake需要使用libtool 下载源码安装apt-get install libtoolyum install libtool.x86_64 realine 用于命
centOS下安装tfs基本步骤备份
guotao521的专栏
04-22 2035
rpm -i libstdc++-devel-4.4.7-11.el6.x86_64.rpm rpm -i libstdc++-4.4.7-11.el6.x86_64.rpm rpm -i gcc-c++-4.4.7-11.el6.x86_64.rpm rpm -i gcc-4.4.7-11.el6.x86_64.rpm rpm -i autoconf-2.63-5.1.el6.noarc
TFS（Taobao File System）完整部署文档
weixin_34110749的博客
10-26 608
一、测试环境准备拓扑：服务器NS系统：CentOS release 5.8 (Final)（Kernel:2.6.18-308.el5）IP：192.168.0.250硬盘：1块硬盘硬盘（sda）服务器DS1系统：CentOS release 5.8 (Final)（Kernel:2.6.18-308.el5）IP：192.168.0.251硬盘：3块硬盘（sda、sdb、s...
TFS（Taobao File System）淘宝自主开发的一个分布式文件系统
小海的专栏
12-12 5279
TFS（Taobao File System）是淘宝自主开发的一个分布式文件系统，适用于海量小文件存储。 运维篇 快速入门获取TFS配置部署运行TFS集群迁移工具介绍运维FAQ 使用篇 用户指南(Java版)用户指南(C++版)nginx模块 原理篇 TFS介绍写流程介绍读流程介绍NS中BlockManager和ServerManager介绍Dataserver
Taobao File System 介绍
xubaoguo的专栏
01-13 1822
官方文档： http://code.taobao.org/p/tfs/wiki/index/ TFS（Taobao File System）安装方法 http://elf8848.iteye.com/blog/1724423 http://1008305.blog.51cto.com/998305/768258 http://gdcsy.blog.163.com/blog/s
淘宝架构设计：软件基础设施与挑战
2007年前的图片存储系统由多层缓存（L1和L2）和应用存储集群组成，以及大量的ImageServer集群和TFS（Taobao File System）集群，存储容量达到了数千TB。这一系统通过全球负载均衡、缓存策略以及CDN（内容分发网络）...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值