用Nas设置一个全功能的服务器 - 节目预告：pt下载设置，nas出错

dalaohu

XBMC， 又多个硬件？

芝麻绿豆

no no no. google 一下
这是个软件

芝麻绿豆

原来是为微软xbox开发的，后来表现很好，就慢慢移到其他平台上了。
现在可以不用越狱直接撞到apple tv上。
似乎是最省电静音的选择了。

dalaohu

哦, 那不错

等Apple TV 评测。 好像150刀吧？

芝麻绿豆

129刀, 去跟LD申请资金。

芝麻绿豆

昨天用twonkey stream到ps3放了一部cars，1.4G的文件，每个两分钟要卡10多秒。基本不可用。

就像之前的大拿指出的，用个这个nas来做media centre显然是不合适的。

Qnap网站号称入门级的Qnap nas能同时stream 7部视频。我想即便那是真的，1，不可能是高清的，2，不可能有decoding on the fly。

当然，如果播放端的设备足够好，一般家用是完全没有问题的。我试过两个电脑同时播放这个nas上存储的1080p电影，同时还在下载，nas的cpu在30%以下，没有什么问题。

就拥有ps3作为播放器的tx而言，其最佳的配套软件是ps3 media server。这个软件应该也是在服务器端解码成ps3能够认的格式，然后stream给ps3.因此从根本上无法利用ps3的强大配置。其他一些方式，如运行于linux上的xbmc，由于ps3的linux（ubuntu/yellow dog)还远远不能发挥ps3的能力，因此运行得很慢。我没有去实验。
目前这个nas能安装的最好的media centre软件是Twonkey，但对ps3支持不好。倒是可以stream到ipad，iphone上。但是对大多数人可能意义不大。

因此我基本上放弃了让这个nas作为media centre的打算。打算试试增强播放端的办法（目前想到的最便宜的完美方案是apple TV+xbmc，已经不在本帖讨论范围内。）

芝麻绿豆

尝试使用rsync来备份，发现一个问题。每当在本地运行rsync时，在nas上除了rsync，还出现一个叫sshd:admin@notty的进程，占了50-60%的cpu。请问这是什么东西？

黑山老妖

sshd是控制ssh connection的daemon（process）。可能你的rsync是通过ssh连接的。
这个NAS的cpu和RAM不太给力。

芝麻绿豆

原帖由 黑山老妖 于 2011-9-4 22:55 发表
sshd是控制ssh connection的daemon（process）。可能你的rsync是通过ssh连接的。
这个NAS的cpu和RAM不太给力。

感谢老妖大周末的还回帖。
这个nas不是不太给力，是太不给力。

我确实按照某教程做了个ssh key。
因为是本地网络，是不是不通过ssh连接也可以？

芝麻绿豆

这个ssh key好像只是避免每次输入登录密码，怎样才能不同郭ssh连接呢？

黑山老妖

telnet and ftp have the lowest overhead.

芝麻绿豆

原帖由 黑山老妖 于 2011-9-5 08:18 发表
telnet and ftp have the lowest overhead.

rsync有个选项是用rsh连接，请问rsh和telnet是一回事吗？

黑山老妖

rsh不是telnet，是remote shell。

芝麻绿豆

nas不知是怎么设置的，拒绝rsh连接

黑山老妖

rsh也是一个service。要有daemon才可以。

芝麻绿豆

又得等到周末了

芝麻绿豆

历时三周，终于把备份部分基本设置好。

一点背景：

一台mac，作为工作机，有大量的文件需要备份，有些需要每天备份，有些需要每周备份。
另有两台pc，有少量但重要的文件需要备份，需要在有文件改动时就备份。

对于pc，这个nas有一份附赠的备份软件，没有太多好说的。
对于mac，没有附赠软件。大概是因为mac自己有time machine备份工具。因此这个nas提供的是对time machine的支持。

time machine相当好用，但是不够开放。我需要的备份应该同时满足两方面的要求

- 完全的备份，即原有文件的拥有者、组别、属性、生成日期，乃至mac自有的一些附加属性，如某个文件夹的标签等都能完整备份和恢复
  --- time machine能够做到这一步
- 别的电脑，尤其是另外一台xp能够访问这些文件
  --- time machine的备份是封闭的，需要借助第三方软件，我甚至不知到是否有这种软件。

对于time machine，网上也有一些损坏数据的报告，因此，我更宁愿用它来做为第二套备份。

第三个原因是通过一周多的试用，nas附带的time machine支持有时候会连不上造成备份失败。

总之，除了time machine外，我需要一个mac下的备份软件。

[ 本帖最后由 芝麻绿豆 于 2011-9-18 23:06 编辑 ]

芝麻绿豆

有些很出色的软件，如super flexible sync，非常好用，但是是收费的。
在盲目的寻找中，发现了rsync这个几乎所有linux和mac都标配的同步软件。
rsync功能强大得令人发指，并且采用一种三角算法，能够比较两个要同步的文件，只传输他们之间不同的那部分。这个算法好像还是个澳洲程序员发明的。
于是我开始了rsync的折腾之旅。几乎每个参数的使用，每个步骤的调试都充满了失败和无数的google 与尝试。单是log就写了好几页纸。
我下面要写的，应该是大虾们不屑一提的常识，但是可能对热爱折腾的菜鸟有所帮助。

----
首先，需升级系统自带的rsync。我的是2.8.9，在3.0.5版以前，有很多明显bug
具体方法参考
http://blog.csdn.net/afatgoat/article/details/4353523
帖子说的好像是3.0.6版，把相应数字换成现在最新的3.0.8版即可。

----
如果在升级时无法编译，那么说明需要安装xcode
找到系统盘直接安装即可，这是mac程序员的软件包，系统没有默认安装。
装完之后应该就可以编译，完成rsync安装了。之后别忘了把新装的（在/usr/local/bin中）覆盖原有的（在usr/bin中）
否则还是原有的rsync在起作用（因为path环境变量还是指向原有的），除非每次指定rsync的新目录。
查看rsync 版本：
rsync --version

----
现在，需要在mac和nas之间使用一组ssh key来确保不需要每次输入密码。
方法如下
Open Terminal and generate an ssh keypair:
ssh-keygen -t rsa
(hit return for all questions, do not enter a password when asked)

Copy the public key to the backup server’s root directory. You must have shell access and ssh enabled on your remote server:
scp ~/.ssh/id_rsa.pub <username>@<your-server.com>:~/

Login to the server shell:
ssh <username>@<your-server.com>
and enter your password to login.

If the server hasn’t yet been been used for for ssh keys, we need to type these lines (enter after each one):
mkdir .ssh
cat id_rsa.pub >> .ssh/authorized_keys
rm id_rsa.pub

These commands create a .ssh directory on the NAS, then adds the key (that we copied over in step 2 using “scp”) to the NAS’ authorized_keys file, then removes the key from the NAS’ root. You may get an error after the “mkdir” step that the folder exists. This is fine.

Now we have to set up our permissions on the NAS:
chmod go-w ~
chmod 700 ~/.ssh
chmod 600 ~/.ssh/authorized_keys

----
然后是选用适合你的参数，我使用如下
--archive \
--recursive \
--verbose \
--progress \
--update \
--super \
--exclude-from='/Users/xxxx/backup-daily-exclude.sh' \
--files-from='/Users/xxxx/backup-daily-include.sh' \

参数解释：
-archive，存档，其实一堆参数的集合
-recursive，这个参数本来是包含在-archive里的，但是由于后面使用了-files-from,这个参数需要单独再提出来使用一次，在这里作用是包含子目录。
-verbose，增量拷贝，不然每次发现文件不同都要重新拷贝一次整个文件
-progress，显示每个文件的拷贝进度
-update, 跳过nas上更新的文件。极个别的时候我需要直接在服务器上修改文件。
-super，这个参数保证了用户owner和组别是一致的。下面详述。
-exclude-from，排除文件，这里我用一个文件来列出排除文件清单
-files-from，要同步的文件清单，这里同样用一个文件来列出，这样方便将来修改。

-----
在终端下实验无误后，便可以将命令整理成脚本，并且利用ical定时运行了。
具体参考
http://garrickvanburen.com/archi ... l-and-applescript-2

----
注意，如果要保证拷贝到nas上的文件和源文件有相同的owner和group属性，则在nas上需要设置和拷贝源机器相同的用户名和组别。
在mac终端下查看组别命令：
$ dscl . list /groups
除此之外，还需要在让rsync以root名义运行，参数-super就是这个作用。
不过这个参数在非局域网中比较危险，因此还有别的办法，如使用-fake-super参数。相关讨论看这个帖子
http://lists.samba.org/archive/rsync/2002-March/001999.html

----
所有的filter，包括include，exclude等，都是以源文件为根目录的，因此在指定时不能带有这个目录的父目录及以上目录，比如，指定的拷贝文件夹是/User/xx/Pictures, 要排除的目录是/User/xx/Pictures/temp/,
那么制定exclude时，直接使用temp/, 甚至/temp/, 这时，/temp/并不是指系统根目录的temp文件夹。

----
其他文件路经使用全局路经，
如排除文件，使用：/User/xx/scripts/exclude.sh。

----
当脚本做好后，要给他赋予可执行性，否则applescript无法调用这个脚本，参看
http://www.douban.com/note/74637526/

----
多用-n参数，这个参数进行模拟运行，给出错误反馈。

----
最后，如果你像我一样是个菜鸟，那么一定要先看一遍rsync的帮助文档，再来看上述提示，这时你会发现每一条提示都很有用。而不是像现在一样一头雾水。
帮助文档：
http://www.samba.org/ftp/rsync/rsync.html

芝麻绿豆

现在的状态：

每天夜里，系统会对某些特定文件（主要是工作文件）进行备份，
每周周六，系统会对某些特定文件（音乐、视频等）进行备份。

整个过程不需要任何人工干预。而且备份的内容和原内容完全一致，并且能够从别的电脑通过用户名和密码访问。

需要进一步解决的问题：
我需要一个log文件，在需要时查看备份情况。这个应该设个参数即可，下周再做。
还是没有解决ssh登录的高cpu问题。在nas上ssh的守护精灵进程（是这么叫的吧？）占用了很高的cpu。虽然同时放两步高清电影，再同时下载没有问题，但总让人决得不舒服。回头再折腾吧。

zhanglianwei

Carbon Copy Cloner有没有试过？

zhanglianwei

看起来rsync只是个同步软件？也就是永远只有一个最新的备份？

那比时光机还差一点：时光机可以找回误删文件或者误覆盖文件。

zhanglianwei

从头看到尾巴，楼主你真是能折腾啊。。。

我要求其实也类似，看我的解决方案：

1. 备份服务器：直接买个USB硬盘，拖在iMac上。
2. 下载机：MyBookLive安装了Transmission。几分钟的事情。后来设置了一下路由器让外网可以访问费了点时间调试。
3. media centre：WDTV Live Hub拖MyBookLive放电影，AppleTV放Youtube。全能的解决方案目前是没有的，我也研究了一阵子这事情。
4. 打印服务器：直接把打印机接iMac上了。
5. 两个blog的服务器（主要是自家用）和一个网站的镜像：直接买了个Hosting服务器，一年99美刀，拖了七八个网站，但常用的就一个blog.chenyi.me。

啥技术含量都没有。功能也不强大。但不用花时间折腾命令行。我的经验是那些功能往往就是折腾的时候特别有趣，折腾调通以后，再也不用了。我把ssh也搞好了。一个月过去了，再也没有ssh过。bt种子倒是隔三差五地往live上加。

[ 本帖最后由 zhanglianwei 于 2011-9-19 18:27 编辑 ]

芝麻绿豆

原帖由 zhanglianwei 于 2011-9-19 18:24 发表

1. 备份服务器：直接买个USB硬盘，拖在iMac上。

我实际是iMac拖了一个，用Time Machine，nas又备份了一份。也算双保险。另外我需要remote access某些文件。nas一直连在网上，能耗也低，复合这个要求。

2. 下载机：MyBookLive安装了Transmission。几分钟的事情。后来设置了一下路由器让外网可以访问费了点时间调试。

Transmission 好像是下BT的吧？

3. media centre：WDTV Live Hub拖MyBookLive放电影，AppleTV放Youtube。全能的解决方案目前是没有的，我也研究了一阵子这事情。

这些设备俺都没有啊，连上那个imac拖着的usb硬盘一共多少m呀？
俺本来只想废物利用，用那个买电视送的ps3，但是不好用

4. 打印服务器：直接把打印机接iMac上了。

这个看需求看你有几台打印机。

5. 两个blog的服务器（主要是自家用）和一个网站的镜像：直接买了个Hosting服务器，一年99美刀，拖了七八个网站，但常用的就一个blog.chenyi.me。

等我也要拖七八个网站就也花钱。现在，花钱的不要。btw，你的blog不错。

啥技术含量都没有。功能也不强大。但不用花时间折腾命令行。我的经验是那些功能往往就是折腾的时候特别有趣，折腾调通以后，再也不用了。我把ssh也搞好了。一个月过去了，再也没有ssh过。bt种子倒是隔三差五地往live上加。

看需求吧。如果能满足你的需求，就是最好的解决方案。
当然，话说回来，有些需求可能是false demand.

当初买这个nas，就是想着什么都拿来用。实际上是什么都不能直接使用。

芝麻绿豆

我可以借你AppleTV试验 2011-9-19 18:09

谢谢啊。这个实验要求破解Apple TV。嘿嘿。这两天在mac上用xbmc实在是很爽。在appleTV上应该也不会差。

zhanglianwei

我的AppleTV是破解过的，已经有XMBC了。我在悉尼，可以借你玩一个星期。现在我的AppleTV的唯一用途就是看Youtube。

用NAS拖网站太不专业了，首先IP不固定，可能会不停地换，其次ADSL的长传速度极低。。。才100K左右吧。来两个人看看相册就能拖垮你的ADSL。如果你开着BT的话，基本上没人能够看你的网站了。

MyBookLive 3TB：180刀，WDTV LiveHub，180刀，连iMac的是个1TB的硬盘，现在100刀不到就搞定了。AppleTV 100刀出头。

zhanglianwei

xbmc不好用。不是要转码，就是要这个要那个，内置的插件，要么龟速，要么各种折腾。

xmbc只有icefilms这个插件可以用，看连续剧还不错，等个20秒缓冲就成了，放到结束也不会卡，数量还不少，但高清电影基本上是每过5分钟就开始重新缓冲，完全不能看。但icefilms这个插件也有缺点，就是菜单深得要死，每进一层都得等5秒钟刷新。。。基本上从开机到看上辛普森动画片，1分钟就过去了，超级烦心。

[ 本帖最后由 zhanglianwei 于 2011-9-20 11:41 编辑 ]

芝麻绿豆

原帖由 zhanglianwei 于 2011-9-20 11:40 发表
xbmc不好用。不是要转码，就是要这个要那个，内置的插件，要么龟速，要么各种折腾。

xmbc只有icefilms这个插件可以用，看连续剧还不错，等个20秒缓冲就成了，放到结束也不会卡，数量还不少，但高清电影基本上是每过5分钟就开始重新缓冲，完全不能看。但icefilms这个插件也有缺点，就是菜单深得要死，每进一层都得等5秒钟刷新。。。基本上从开机到看上辛普森动画片，1分钟就过去了，超级烦心。

是吗！你的xmbc是装在什么上面的？
我的在mac上，很好用啊。你指的缓冲是从网上还是从本地局域网，如果本地局域网，那就太悲剧了。

芝麻绿豆

原帖由 zhanglianwei 于 2011-9-20 11:07 发表
我的AppleTV是破解过的，已经有XMBC了。我在悉尼，可以借你玩一个星期。现在我的AppleTV的唯一用途就是看Youtube。

用NAS拖网站太不专业了，首先IP不固定，可能会不停地换，其次ADSL的长传速度极低。。。才100K左右吧。来两个人看看相册就能拖垮你的ADSL。如果你开着BT的话，基本上没人能够看你的网站了。

MyBookLive 3TB：180刀，WDTV LiveHub，180刀，连iMac的是个1TB的硬盘，现在100刀不到就搞定了。AppleTV 100刀出头。

我在墨尔本。看来不能借了。不过还是谢谢。

nas差不多价格有8T空间，或是6T的raid5.真是看需要了。

我的网站其实是个blog，其实是个记事本，只有自家使用，偶尔远程也是自己登录，所以还好。

zhanglianwei

你给你Mac上的XBMC装一个icefilms的插件就知道怎么回事了。

我不喜欢用AppleTV的时候还要开电脑主机。慢。还不如直接在Imac上看了，屏幕也小不了多少。27寸。

芝麻绿豆

这个，那个，你的电影放在MyBookLive里吧？用XBMC在AppleTV上放，跟电脑主机有啥关系？