全球主机交流论坛

标题: 求问一下这样两种系统有没有实现过 [打印本页]

作者: lsylsy2 时间: 2012-7-20 22:29
标题: 求问一下这样两种系统有没有实现过
本帖最后由 lsylsy2 于 2012-7-20 22:48 编辑

不想造轮子……
1、主服务器上维护一个任务队列，若干从服务器循环从主服务器领取任务，完成后上传主服务器；
2、将不同IDC的机器整合成分布式文件系统，主要面向文件下载

作者: 今夜不寂寞 时间: 2012-7-20 22:31
提示: 作者被禁止或删除内容自动屏蔽

作者: star826 时间: 2012-7-20 22:32
提示: 作者被禁止或删除内容自动屏蔽

作者: pcder 时间: 2012-7-20 22:39
分布式文件系统有很多吧，简单点的有国内的开源系统FastDFS。

作者: Zeddicus 时间: 2012-7-20 22:43
有

作者: wdlth 时间: 2012-7-20 22:44
初音妹子一直在研究视频广播技术，结果视频站没有搞成，科技都用在了奇怪的地方。
第二个成熟技术很多了。

作者: lsylsy2 时间: 2012-7-20 22:47

pcder 发表于 2012-7-20 22:39
分布式文件系统有很多吧，简单点的有国内的开源系统FastDFS。

但是跨机房的很少
我的想法是半CDN半DFS

作者: lsylsy2 时间: 2012-7-20 22:48

wdlth 发表于 2012-7-20 22:44
初音妹子一直在研究视频广播技术，结果视频站没有搞成，科技都用在了奇怪的地方。
第二个成熟技术很多了。 ...

第二个想要的是半CDN半DFS 主要起到防止某IDC当机目的
目前DFS大多数是在同一个机房里做大集群，不同机房之间简单replication

作者: pcder 时间: 2012-7-20 22:56

lsylsy2 发表于 2012-7-20 22:48
第二个想要的是半CDN半DFS 主要起到防止某IDC当机目的
目前DFS大多数是在同一个机房里做大集群，不同机房 ...

你是为了防止机房断网？还是防止机器挂掉？
如果是前者的话，估计你的方案还是不够保险，估计需要自己做个二次开发，文件上传时准实时同步到不同机房的机器上，貌似像FastDFS这样的系统处于效率考虑，一般数据都是延时同步的

作者: lsylsy2 时间: 2012-7-20 23:01

pcder 发表于 2012-7-20 22:56
你是为了防止机房断网？还是防止机器挂掉？
如果是前者的话，估计你的方案还是不够保险，估计需要自己做 ...

fastdfs其实还好
它是基于文件的，可以直接对接nginx
在考虑自己用php写个及其简单的，主节点热备+从节点纯Nginx

作者: wdlth 时间: 2012-7-20 23:05

lsylsy2 发表于 2012-7-20 22:48
第二个想要的是半CDN半DFS 主要起到防止某IDC当机目的
目前DFS大多数是在同一个机房里做大集群，不同机房 ...

那要有前端，用KVDB做索引，Flash访问前端，前端读KVDB找资源、预处理、缓存后放地址。
几个idc不如买晕算了。

作者: lsylsy2 时间: 2012-7-20 23:18

wdlth 发表于 2012-7-20 23:05
那要有前端，用KVDB做索引，Flash访问前端，前端读KVDB找资源、预处理、缓存后放地址。
几个idc不如买晕 ...

在计算价格呢……
现在一个想法是买云存储做源，然后VPS做成类似CDN节点的形式，只不过缓存调大

作者: lsylsy2 时间: 2012-7-21 08:00
up

作者: javaluo 时间: 2012-7-21 08:14
不如买云，对数据保证的，多个vps折腾死人，特别是经常出问题的话

作者: dns 时间: 2012-7-21 08:16
楼主...视频站呢？

作者: lsylsy2 时间: 2012-7-21 12:55

javaluo 发表于 2012-7-21 08:14
不如买云，对数据保证的，多个vps折腾死人，特别是经常出问题的话

太贵啊……烧流量

作者: lsylsy2 时间: 2012-7-21 12:56

dns 发表于 2012-7-21 08:16
楼主...视频站呢？

烧不起流量
在写音乐站

作者: 花雪月静 时间: 2012-7-21 13:39
听起来
数据库分离不知道是不是像这样

作者: dns 时间: 2012-7-21 17:43

lsylsy2 发表于 2012-7-21 12:56
烧不起流量
在写音乐站

咱们合伙搞吧

作者: geyunbing 时间: 2012-7-21 17:44
提示: 作者被禁止或删除内容自动屏蔽

作者: lsylsy2 时间: 2012-7-21 17:52

dns 发表于 2012-7-21 17:43
咱们合伙搞吧

我做的是ACG相关的……

作者: dns 时间: 2012-7-21 18:06

lsylsy2 发表于 2012-7-21 17:52
我做的是ACG相关的……

求带，ACG有爱

作者: 过客 时间: 2012-7-21 18:22
大公司的基本上都会实现，因为业务需要。

作者: Captain 时间: 2012-7-21 18:26
跨IDC。。。楼主你去买砖头zp吧

或者，把菊花洗干净等富二代投资传输网

欢迎光临全球主机交流论坛 (https://sunk.eu.org/)