基于owncloud最新稳定版本9.1.1开发实现了owncloud支持ceph s3作为primary storage功能
博客专区 > 25641463 的博客 > 博客详情
基于owncloud最新稳定版本9.1.1开发实现了owncloud支持ceph s3作为primary storage功能
25641463 发表于1年前
基于owncloud最新稳定版本9.1.1开发实现了owncloud支持ceph s3作为primary storage功能
  • 发表于 1年前
  • 阅读 528
  • 收藏 4
  • 点赞 2
  • 评论 6

【腾讯云】买域名送云解析+SSL证书+建站!>>>   

摘要: 最近对owncloud进行开发,使其支持类似企业版特性ceph s3作为primary storage的功能。并且支持multi-bucket特性,防止ceph惊魂72小时的问题。

直接上干货,部署和使用方法:

Owncloud对象存储部署文档

一.前言

在阅读此文档前,建议先阅读owncloud官方的《ownCloud_Server_Administration_Manual.pdf》4.2节,对owncloud部署方式有所了解。本期项目通过对owncloud的开发,使其支持后端S3存储,在部署架构上,S3存储端完全可以支持owncloud部署要求的“Large Enterprises and Service Providers”,从功能、性能、可靠性、可扩展性、容量等方面满足大规模云存储网盘的使用规模。

二.部署方法

本文以“Small Workgroups or Departments”为例描述单机owncloud对接S3的部署方式,其他部署方式可以参考ownclud admin手册。本文档部署环境使用Ubuntu14.04 x64。

1. 安装owncloud之前,首先需要Apache, MySQL/MariaDB, PHP的支持,以下使用MySQL作为数据库进行安装。

sudo apt-get install apache2 mysql-server libapache2-mod-php5

sudo apt-get install php5-gd php5-json php5-mysql php5-curl

sudo apt-get install php5-intl php5-mcrypt php5-imagick

第一行    安装运行完之后,MySQL需要配置root用户的密码。

2. 安装ownCloud,从我的https://github.com/YangFanlinux/owncloud下载owncloud源码包,解压缩到/var/www目录下。至此,owncloud安装完毕。

3. Apache服务器配置,首先切换到root用户

    su root

cd /etc/apache2/sites-available/

vim owncloud.conf

4. 将以下文字复制进owncloud.conf配置文件。

Alias /owncloud "/var/www/owncloud/"

<Directory "/var/www/owncloud">

    Options +FollowSymLinks

    AllowOverride All

 

    <IfModule mod_dav.c>

      Dav off

    </IfModule>

      Satisfy Any

    SetEnv HOME /var/www/owncloud

    SetEnv HTTP_HOME /var/www/owncloud

</Directory>

 

<Directory "/var/www/owncloud/data/">

  # just in case if .htaccess gets disabled

  Require all denied

</Directory>

5. 将配置文件symlink到/etc/apache2/sites-enabled下。

ln -s /etc/apache2/sites-available/owncloud.conf /etc/apache2/sites-enabled/owncloud.conf

6. 创建文件链接后,可以看到/etc/apache2/sites-enabled/文件夹下多了一个owncloud.conf文件,此文件的更改和/etc/apache2/sites-available/下owncloud.conf文件的更改同步。

7. 接下来为可选设置,但建议还是设置一下

a2enmod rewrite

a2enmod headers

a2enmod env

a2enmod dir

a2enmod mime

8. 重启Apache

service apache2 restart

9. 开启SSL

a2enmod ssl

a2ensite default-ssl

service apache2 reload

10. ownCloud 配置,首先,把owncloud目录的给你的HTTP user,默认为www-data

chown -R www-data:www-data /var/www/owncloud/

11. 接下来,使用浏览器访问以下地址,其中localhost使用主机内网IP代替。注意,先不要创建管理员帐号并登录。只登录一下系统,这样在/var/www/owncloud/config/目录下会生成默认配置文件。

http://localhost/owncloud

12.修改配置文件/var/www/owncloud/config/config.php,如果使用multibucket特性可以参考config.multibucket.php的配置。如果使用单bucket可以参考config-singbucket.php。以multibucket为例,在config.php中加入如下配置:

  'objectstore_multibucket'=> array (

    'class' => 'OC\\Files\\ObjectStore\\CephS3',

    'arguments' => array (

      'autocreate' => true,//自动创建bucket,默认为true

      'version' => '2006-03-01',//AWS s3版本号

      'region' => '',//连接AWS需要设置,ceph s3不需要设置

      'key' => 'E60Z7V7OW9Y1U8WFI9T3', //s3 rgwkey

      'secret' => 'yf',           // s3 rgwsecret

      'endpoint' => 'http://192.168.74.128:80/',//ceph s3的访问地址

      'PathStyle' => true,//连接cephtrue,awsfalse

      'prefix' => 'neunnowncloud-',//multi-bucket需要填写生成bucket的前缀,注意,需要参考s3 bucket命名规范。

      'hashlength' => '3',//系统自动生成的bucket名字为prefix+hash,默认取userid md5值的前三位作为hash值。

    ),

     'integrity.check.disabled' => true,//由于进行了代码二次开发,关闭程序完整性校验功能

    'enable_previews' => false,//文件预览功能有bug,暂时关闭

13.设置完后访问http://localhost/owncloud,创建管理员并填写数据库信息后,即可登录,owncloud的所有部署工作完成。

三.关于owncloud版本升级

   本次开发基于owncloud最新稳定版本9.1.1,源码进行了一定的改动并没有合并入owncloud主线版本,所以后续升级不支持官方的自动升级,需要手动把修改代码merge到owncloud新版本的代码。

  • 打赏
  • 点赞
  • 收藏
  • 分享
共有 人打赏支持
粉丝 7
博文 15
码字总数 8009
评论 (6)
卷心菜菜
centos7 安装owncloud
配置完config.php
输入用户名和密码,按回车一直在登录界面,没有任何反映,请问您这个owncloud是只使用ubuntu吗?有没有在centos下测试过?
25641463

引用来自“卷心菜菜”的评论

centos7 安装owncloud
配置完config.php
输入用户名和密码,按回车一直在登录界面,没有任何反映,请问您这个owncloud是只使用ubuntu吗?有没有在centos下测试过?
没在centos上测过,在ubuntu14.04上用过。owncloud只是web应用,跟操作系统关系应该不大。出问题可以看看apache日志和owncloud日志,是不是s3连接有问题,或者部署的问题。
卷心菜菜

引用来自“卷心菜菜”的评论

centos7 安装owncloud
配置完config.php
输入用户名和密码,按回车一直在登录界面,没有任何反映,请问您这个owncloud是只使用ubuntu吗?有没有在centos下测试过?

引用来自“25641463”的评论

没在centos上测过,在ubuntu14.04上用过。owncloud只是web应用,跟操作系统关系应该不大。出问题可以看看apache日志和owncloud日志,是不是s3连接有问题,或者部署的问题。
之间从官网下载的owncloud部署没问题。
从您给的连接下载的包,即使不连接s3也是登录那个问题。

apache没有什么错误。

owncloud日志
{"reqId":"WCVnZ9ZvSpfWC9kurBgqAQAAAAM","remoteAddr":"192.168.27.211","app":"vendor","message":"Could not find resource file \"\/davclient.js\/lib\/client.js\"","level":3,"time":"2016-11-11T06:38:31+00:00","method":"GET","url":"\/owncloud\/index.php\/login","user":"--"}

25641463

引用来自“卷心菜菜”的评论

centos7 安装owncloud
配置完config.php
输入用户名和密码,按回车一直在登录界面,没有任何反映,请问您这个owncloud是只使用ubuntu吗?有没有在centos下测试过?

引用来自“25641463”的评论

没在centos上测过,在ubuntu14.04上用过。owncloud只是web应用,跟操作系统关系应该不大。出问题可以看看apache日志和owncloud日志,是不是s3连接有问题,或者部署的问题。

引用来自“卷心菜菜”的评论

之间从官网下载的owncloud部署没问题。
从您给的连接下载的包,即使不连接s3也是登录那个问题。

apache没有什么错误。

owncloud日志
{"reqId":"WCVnZ9ZvSpfWC9kurBgqAQAAAAM","remoteAddr":"192.168.27.211","app":"vendor","message":"Could not find resource file \"\/davclient.js\/lib\/client.js\"","level":3,"time":"2016-11-11T06:38:31+00:00","method":"GET","url":"\/owncloud\/index.php\/login","user":"--"}

对比了下官方的代码,没看出来问题。我只修改了官方的9.1.1版本如下3个文件,以及提供了一个默认的config配置:
owncloud\lib\private\Files\Mount\ObjectHomeMountProvider.php
owncloud\lib\private\Files\ObjectStore\CephS3.php
owncloud\lib\private\Files\ObjectStore\Mapper.php
您可以review一下代码,这些代码不会影响官方的默认local storage流程。或者导致上述js文件找不到问题。

可以这样尝试一下,把官方的9.1.1源码下载并解压缩,把我这3个文件跟源代码diff一下差分过去,然后再安装看看。
卷心菜菜

引用来自“卷心菜菜”的评论

centos7 安装owncloud
配置完config.php
输入用户名和密码,按回车一直在登录界面,没有任何反映,请问您这个owncloud是只使用ubuntu吗?有没有在centos下测试过?

引用来自“25641463”的评论

没在centos上测过,在ubuntu14.04上用过。owncloud只是web应用,跟操作系统关系应该不大。出问题可以看看apache日志和owncloud日志,是不是s3连接有问题,或者部署的问题。

引用来自“卷心菜菜”的评论

之间从官网下载的owncloud部署没问题。
从您给的连接下载的包,即使不连接s3也是登录那个问题。

apache没有什么错误。

owncloud日志
{"reqId":"WCVnZ9ZvSpfWC9kurBgqAQAAAAM","remoteAddr":"192.168.27.211","app":"vendor","message":"Could not find resource file \"\/davclient.js\/lib\/client.js\"","level":3,"time":"2016-11-11T06:38:31+00:00","method":"GET","url":"\/owncloud\/index.php\/login","user":"--"}

引用来自“25641463”的评论

对比了下官方的代码,没看出来问题。我只修改了官方的9.1.1版本如下3个文件,以及提供了一个默认的config配置:
owncloud\lib\private\Files\Mount\ObjectHomeMountProvider.php
owncloud\lib\private\Files\ObjectStore\CephS3.php
owncloud\lib\private\Files\ObjectStore\Mapper.php
您可以review一下代码,这些代码不会影响官方的默认local storage流程。或者导致上述js文件找不到问题。

可以这样尝试一下,把官方的9.1.1源码下载并解压缩,把我这3个文件跟源代码diff一下差分过去,然后再安装看看。
我把
owncloud\lib\private\Files\Mount\ObjectHomeMountProvider.php
owncloud\lib\private\Files\ObjectStore\CephS3.php
owncloud\lib\private\Files\ObjectStore\Mapper.php
这三个文件替换到了我安装好的ownCloud 9.1.2 版本
没问题了!!
25641463

引用来自“卷心菜菜”的评论

centos7 安装owncloud
配置完config.php
输入用户名和密码,按回车一直在登录界面,没有任何反映,请问您这个owncloud是只使用ubuntu吗?有没有在centos下测试过?

引用来自“25641463”的评论

没在centos上测过,在ubuntu14.04上用过。owncloud只是web应用,跟操作系统关系应该不大。出问题可以看看apache日志和owncloud日志,是不是s3连接有问题,或者部署的问题。

引用来自“卷心菜菜”的评论

之间从官网下载的owncloud部署没问题。
从您给的连接下载的包,即使不连接s3也是登录那个问题。

apache没有什么错误。

owncloud日志
{"reqId":"WCVnZ9ZvSpfWC9kurBgqAQAAAAM","remoteAddr":"192.168.27.211","app":"vendor","message":"Could not find resource file \"\/davclient.js\/lib\/client.js\"","level":3,"time":"2016-11-11T06:38:31+00:00","method":"GET","url":"\/owncloud\/index.php\/login","user":"--"}

引用来自“25641463”的评论

对比了下官方的代码,没看出来问题。我只修改了官方的9.1.1版本如下3个文件,以及提供了一个默认的config配置:
owncloud\lib\private\Files\Mount\ObjectHomeMountProvider.php
owncloud\lib\private\Files\ObjectStore\CephS3.php
owncloud\lib\private\Files\ObjectStore\Mapper.php
您可以review一下代码,这些代码不会影响官方的默认local storage流程。或者导致上述js文件找不到问题。

可以这样尝试一下,把官方的9.1.1源码下载并解压缩,把我这3个文件跟源代码diff一下差分过去,然后再安装看看。

引用来自“卷心菜菜”的评论

我把
owncloud\lib\private\Files\Mount\ObjectHomeMountProvider.php
owncloud\lib\private\Files\ObjectStore\CephS3.php
owncloud\lib\private\Files\ObjectStore\Mapper.php
这三个文件替换到了我安装好的ownCloud 9.1.2 版本
没问题了!!
9.1.3版本我看了,这几个文件没变化,可以直接替换。我测过了也OK。
×
25641463
如果觉得我的文章对您有用,请随意打赏。您的支持将鼓励我继续创作!
* 金额(元)
¥1 ¥5 ¥10 ¥20 其他金额
打赏人
留言
* 支付类型
微信扫码支付
打赏金额:
已支付成功
打赏金额: