DevOps 常见于各大云计算提供商。DevOpe被用于打破开发者和运维者之间的壁垒，目的是缩短软件 继续阅读 →

Auto DevOps provides pre-defined CI/CD configuration which allows you to automatically detect, build, test, deploy, and monitor your applications. Leveraging CI/CD best practices and tools, Auto DevOps aims to simplify the setup and execution of a mature & modern software development lifecycle.

GitLab 的 Auto DevOps 是一个亮点，博主对于其特性还不够了解，在此不多谈。本文仅介绍如何为自建的 GitLab 绑定 Google Kubernets Engine (GKE)。

GitLab 配置 Kubernets 节点的方式用两种，一种是绑定 GKE，一种是使用已存在的 Cluster ，但实测第二种貌似是用于 AWS ，这一点博主暂且不提。接着说本文重点 GKE。绑定 GKE需要配置 Google OAuth2 OmniAuth Provider。

领取GCP $200.00 赠金（可用3个月）

在根据上文 《KVM 虚拟机安装 GitLab EE》 配置完毕 GieLab，在 GitLab 绑定 Kubernets 节点的界面出现这样一段描述：

[tip type=”info” title=”Did you know?”] Every new Google Cloud Platform (GCP) account receives $300 in credit upon sign up. In partnership with Google, GitLab is able to offer an additional $200 for both new and existing GCP accounts to get started with GitLab’s Google Kubernetes Engine . [/tip]

大概意思是说，谷歌为每一个注册 GCP 的新账户提供 $300 的赠金。作为 GCP 的伙伴，GitLab 也可以为每一位新的并已有 GCP 账户的用户提供 $200 的赠金用于整合 GKE 和 GitLab 的整合。于是抱着试一试的心态，点击按钮填写表单，没想到没过多久，就收到了邮件：

邮件告诉我，GCP 代表他们的合作伙伴为我提供了 $200 的信用额度，我可以使用这一额度构建自己的应用程序。兑换的信用代码需要在 30 天内兑换并在兑换后三个月内到期。

进入兑换，成功兑换。

如果你是进来看领取赠金的方法，我在这里简单总结一下，但是在此我想说一下：云计算服务可以做的事情很多，如果仅仅是用于 VPS 就颇有一种大炮打蚊子的场面。GCP 等大型云服务提供商提供的稳定、灵活高可用性的云计算服务更加令人兴奋。

大致方法如下：

1. 自建 GitLab （Docker，War包等方式）
2. 使用root账户进入管理后台，进入添加 Kubernets 节点界面
3. 检查是否有获取 GCP 赠金的入口

为 GitLab 配置 GCP 凭据实现二者对接

1. 首先进入 GCP 云资源管理界面: cloud resource manager。

2. 创建项目，可使用 GitLab 作为项目名称，项目ID可以使用系统自动生成的，也可自己指定但必须唯一

3. 进入 API 控制台

4. 在左上方切换到刚刚新建的项目

5. 在左侧选择 OAuth 同意屏幕 并完整填写信息

6. 从左侧 sidebar 进入 凭据，创建凭据，选择 OAuth 客户端 ID ，并完整填写信息

• 应用类型选择 Web 应用程序
• 名称可使用自动生成的或自定义
• 已获授权的 JavaScript 来源 可填入您的 GitLab域名 https://gitlab.example.com/
• 已获授权的重定向 URI 需包含下列两个地址
  • https://gitlab.example.com/users/auth/google_oauth2/callback
  • https://gitlab.example.com/-/google_api/auth/callback

7. 完成以上步骤即可得到 客户端 ID 和 客户端密钥， 信息后面还能看到，后面配置需要用到。

8. 为项目授权以下 APi 权限

• Google Kubernetes Engine API
• Cloud Resource Manager API
• Cloud Billing API

通过这个方法授权：

• 进入 Google API Console
• 点击 启用APi和服务
• 在搜索框内依次检索以上三个 API，进入点击 启用
• 等待数分钟完成

9. 修改 GitLab 配置

# For Omnibus GitLab:
$ sudo editor /etc/gitlab/gitlab.rb

# For installations from source:
$ cd /home/git/gitlab
$ sudo -u git -H editor config/gitlab.yml

找到以下内容进行修改：

# For Omnibus GitLab:
gitlab_rails['omniauth_providers'] = [
  {
    "name" => "google_oauth2",
    "app_id" => "YOUR_APP_ID",
    "app_secret" => "YOUR_APP_SECRET",
    "args" => { "access_type" => "offline", "approval_prompt" => '' }
  }
]

# For installations from source:
- { name: 'google_oauth2', app_id: 'YOUR_APP_ID',
  app_secret: 'YOUR_APP_SECRET',
  args: { access_type: 'offline', approval_prompt: '' } }

修改 YOUR_APP_ID 和 client ID为上面获取到的 GCP 密钥。

10. 完成

参考文献

• Google OAuth2 OmniAuth Provider
• MyGitLab/NewClusters

DevOps 常见于各大云计算提供商。DevOpe被用于打破开发者和运维者之间的壁垒，目的是缩短软件开发周期并提供高质量的持续集成。

[tip type=”info” title=”DevOps”]

DevOps is a set of practices that combines software development (Dev) and information-technology operations (Ops) which aims to shorten the systems development life cycle and provide continuous delivery with high software quality. (WikiPedia)

[/tip]

这样的说法很抽象，来看看各个服务商都是怎么描述自家的 DevOps 的吧。

• CODING DevOps 包括代码托管、项目管理、测试管理、持续集成、制品库等多款产品和服务，涵盖软件开发从构想到交付的一切所需，使研发团队在云端高效协同，实践敏捷开发与 DevOps，提升软件交付质量与速度。 (Tencent Cloud)
• DevCloud是集华为研发实践、前沿研发理念、先进研发工具为一体的研发云平台; 面向开发者提供研发工具服务，让软件开发简单高效。(HuaWei Cloud)
• 利用 DevOps 缩短版本发布间隔时间，提高可靠性，在竞争中保持领先地位; DevOps 是一种日益常见的软件交付方法，开发和运营团队以速度、质量和控制协作构建、测试、部署和监控应用程序。 DevOps 与任何类型的软件项目都相关，无论架构、平台或用途如何。常见用例包括：云原生和移动应用、应用集成以及现代化和多云管理。 成功的 DevOps 实施通常依赖于一组集成的解决方案或“工具链”，用于消除手动步骤，减少错误，并超越小型孤立团队实现扩展。 (IBM DevOps)
• 无论是才刚开始执行 DevOps 实现，还是期望与现有工具链和流程集成，都可以采用 Azure DevOps 技术更加快速、安全地构建端到端的持续交付管道。减少工具集维护耗费的时间，更加专注于客户价值。通过 DevOps 技术生成、发布、测试并监视云和移动应用程序非常简单可靠，可让用户使用任意工具链持续实现创新。(Azure DevOps)
• DevOps 是一项组织和文化运动，旨在加快软件交付速度，提高服务可靠性，并在软件利益相关方之间建立共享所有权。了解如何提高软件交付的速度、稳定性、可用性和安全性。(Google Cloud)
• AWS 可以提供一套灵活的服务，让各家公司利用 AWS 和 DevOps 实践经验来更加快速、可靠地构建和交付产品。这些服务可以简化基础设施的预置和管理、应用程序代码的部署、软件发布流程的自动化以及应用程序和基础设施性能的监控。DevOps 集文化理念、实践和工具于一身，可以提高组织高速交付应用程序和服务的能力，与使用传统软件开发和基础设施管理流程相比，能够帮助组织更快地发展和改进产品。这种速度使组织能够更好地服务其客户，并在市场上更高效地参与竞争。(AWS DevOps)

从上面多家云服务商的描述大概可以窥探 DevOps 一二了吧。目前来说，DevOps更多的还停留在理念层面，它使用容器、Kubernetes 和微服务等服务，多提供代码托管、工作流、软件测试、持续交付等功能。越是大型的企业，提供的服务更全面、高级、层次更高。反观国内的提供商还是有一些差距的。

根据文章 《DevOps漫谈之一：DevOps、CI、CD都是什么鬼？》的说法，DevOps是 Development 和 Operations 的组合，是一种方法论，是一组过程、方法与系统的统称，用于促进应用开发、应用运维和质量保障（QA）部门之间的沟通、协作与整合。以期打破传统开发和运营之间的壁垒和鸿沟。

根据另一篇文章《DevOps简介》的说法：

DevOps的一个巨大好处就是可以高效交付，这也正好是它的初衷。Puppet和DevOps Research and Assessment (DORA) 主办了2016年DevOps调查报告，根据全球4600位各IT公司的技术工作者的提交数据统计，得出高效公司平均每年可以完成1460次部署。

与低效组织相比，高效组织的部署频繁200倍，产品投入使用速度快2555倍，服务恢复速度快24倍。在工作内容的时间分配上，低效者要多花22%的时间用在为规划好或者重复工作上，而高效者却可以多花29%的时间用在新的工作上。所以这里的高效不仅仅指公司产出的效率提高，还指员工的工作质量得到提升。

DevOps另外一个好处就是会改善公司组织文化、提高员工的参与感。员工们变得更高效，也更有满足和成就感；调查显示高效员工的雇员净推荐值（eNPS:employee Net Promoter Score）更高，即对公司更加认同。

综上，DevOps 致力于促进开发人员和运维人员的沟通，及时递交需求、完成软件测试、反馈问题、自动化交付。可以免去很多机械化的操作。这么说，作者认为这和 工作流 的理念也有一些像。

工作流（Work Flow）就是工作流程的计算模型，即将工作流程中的工作如何前后组织在一起的逻辑和规则在计算机中以恰当的模型进行表示并对其实施计算。工作流要解决的主要问题是：为实现某个业务目标，在多个参与者之间，利用计算机，按某种预定规则自动传递文档、信息或者任务。简单地说，工作流就是一系列相互衔接、自动进行的业务活动或任务。我们可以将整个业务过程看作是一条河，其中流过的就是工作流。（MBA 智库）

将一切可流程化的工作流程化，搭建一个高灵活性的工作流平台，将这一平台应用于各个领域，这已成为大势所趋。微软的 Folw，跨平台的 IFTTT，苹果的 捷径，开源的 N8n 等等工具都在致力于将机械化的工作流水线化，从而提高工作效率。Gis 专业的博主最近也在想，能不能将地信的种种应用做成模版，从而将分析过程简化，降低 Gis 的使用门槛，让更多的人可以使用到。

使用广泛的 git hosting 平台 gitlab 也因其强大的 CI/CD 功能而闻名，实际上在使用 GitLab 时是需要绑定 Google Cloud Platform(GCP) 的 Google Kubernetes Engine 服务进行使用的。其实还有开源可用的 Jenkins 可以作为 CI/CD 的有力工具。

工具众多，开源可用，工作流和持续集成有着众多类似之处，但究竟会怎样还是要实践后才知道。

参考文献

• WikiPedia/DevOps
• CODING DevOps
• DevCloud
• IBM DevOps
• Azure DevOps
• Google Cloud DevOps
• Aws DevOps
• Introduction to CI/CD with GitLab
• DevOps简介
• DevOps漫谈之一：DevOps、CI、CD都是什么鬼？
• BaiDu/BaiKe/devops

新建 MySQL 账户报错：

Column count of mysql.user is wrong. Expected 45, found 43. Created with MySQL 5 

错误是由于你曾经升级过数据库，升级完后没有使用mysql_upgrade升级数据结构造成的。

解决办法：使用mysql_upgrade命令

$  mysql_upgrade -u root -p 
Enter password: 
Checking if update is needed.
Checking server version.
Running queries to upgrade MySQL server.
Checking system database.
mysql.columns_priv                                 OK
mysql.db                                           OK
mysql.engine_cost                                  OK
mysql.event                                        OK
mysql.func                                         OK
mysql.general_log                                  OK
mysql.gtid_executed                                OK
mysql.help_category                                OK
mysql.help_keyword                                 OK
mysql.help_relation                                OK
mysql.help_topic                                   OK
mysql.innodb_index_stats                           OK
mysql.innodb_table_stats                           OK
mysql.ndb_binlog_index                             OK
mysql.plugin                                       OK
mysql.proc                                         OK
mysql.procs_priv                                   OK
mysql.proxies_priv                                 OK
mysql.server_cost                                  OK
mysql.servers                                      OK
mysql.slave_master_info                            OK
mysql.slave_relay_log_info                         OK
mysql.slave_worker_info                            OK
mysql.slow_log                                     OK
mysql.tables_priv                                  OK
mysql.time_zone                                    OK
mysql.time_zone_leap_second                        OK
mysql.time_zone_name                               OK
mysql.time_zone_transition                         OK
mysql.time_zone_transition_type                    OK
mysql.user                                         OK
Upgrading the sys schema.
Checking databases.
pan.oc_accounts                                    OK
pan.oc_activity                                    OK
pan.oc_activity_mq                                 OK
pan.oc_addressbookchanges                          OK
pan.oc_addressbooks                                OK
pan.oc_appconfig                                   OK
pan.oc_authtoken                                   OK
pan.oc_bruteforce_attempts                         OK
pan.oc_calendar_invitations                        OK
pan.oc_calendar_reminders                          OK
pan.oc_calendar_resources                          OK
pan.oc_calendar_resources_md                       OK
pan.oc_calendar_rooms                              OK
pan.oc_calendar_rooms_md                           OK
pan.oc_calendarchanges                             OK
pan.oc_calendarobjects                             OK
pan.oc_calendarobjects_props                       OK
pan.oc_calendars                                   OK
pan.oc_calendarsubscriptions                       OK
pan.oc_cards                                       OK
pan.oc_cards_properties                            OK
pan.oc_collres_accesscache                         OK
pan.oc_collres_collections                         OK
pan.oc_collres_resources                           OK
pan.oc_comments                                    OK
pan.oc_comments_read_markers                       OK
pan.oc_credentials                                 OK
pan.oc_dav_cal_proxy                               OK
pan.oc_dav_shares                                  OK
pan.oc_directlink                                  OK
pan.oc_external_applicable                         OK
pan.oc_external_config                             OK
pan.oc_external_mounts                             OK
pan.oc_external_options                            OK
pan.oc_federated_reshares                          OK
pan.oc_file_locks                                  OK
pan.oc_filecache                                   OK
pan.oc_filecache_extended                          OK
pan.oc_files_trash                                 OK
pan.oc_flow_checks                                 OK
pan.oc_flow_operations                             OK
pan.oc_group_admin                                 OK
pan.oc_group_user                                  OK
pan.oc_groups                                      OK
pan.oc_jobs                                        OK
pan.oc_login_flow_v2                               OK
pan.oc_maps_address_geo                            OK
pan.oc_maps_apikeys                                OK
pan.oc_maps_device_points                          OK
pan.oc_maps_devices                                OK
pan.oc_maps_favorites                              OK
pan.oc_maps_photos                                 OK
pan.oc_maps_tracks                                 OK
pan.oc_migrations                                  OK
pan.oc_mimetypes                                   OK
pan.oc_mounts                                      OK
pan.oc_notes_meta                                  OK
pan.oc_notifications                               OK
pan.oc_notifications_pushtokens                    OK
pan.oc_oauth2_access_tokens                        OK
pan.oc_oauth2_clients                              OK
pan.oc_ocdownloader_adminsettings                  OK
pan.oc_ocdownloader_personalsettings               OK
pan.oc_ocdownloader_queue                          OK
pan.oc_phonetrack_devices                          OK
pan.oc_phonetrack_filtersb                         OK
pan.oc_phonetrack_geofences                        OK
pan.oc_phonetrack_points                           OK
pan.oc_phonetrack_proxims                          OK
pan.oc_phonetrack_pubshares                        OK
pan.oc_phonetrack_sessions                         OK
pan.oc_phonetrack_shares                           OK
pan.oc_phonetrack_tileserver                       OK
pan.oc_preferences                                 OK
pan.oc_privacy_admins                              OK
pan.oc_properties                                  OK
pan.oc_schedulingobjects                           OK
pan.oc_share                                       OK
pan.oc_share_external                              OK
pan.oc_storages                                    OK
pan.oc_systemtag                                   OK
pan.oc_systemtag_group                             OK
pan.oc_systemtag_object_mapping                    OK
pan.oc_talk_commands                               OK
pan.oc_talk_guests                                 OK
pan.oc_talk_participants                           OK
pan.oc_talk_rooms                                  OK
pan.oc_talk_signaling                              OK
pan.oc_text_documents                              OK
pan.oc_text_sessions                               OK
pan.oc_text_steps                                  OK
pan.oc_trusted_servers                             OK
pan.oc_twofactor_backupcodes                       OK
pan.oc_twofactor_providers                         OK
pan.oc_users                                       OK
pan.oc_vcategory                                   OK
pan.oc_vcategory_to_object                         OK
pan.oc_whats_new                                   OK
sys.sys_config                                     OK
Upgrade process completed successfully.
Checking if update is needed.

参考文献

• ERROR 3009 (HY000): Column count of mysql.user is wrong. Expected 45, found 43. Created with MySQL 5

本文续上篇 《裸金属服务器 kvm 虚拟化安装 win10》继续记录使用 KVM 在 Centos 继续阅读 →

NextCloud 自带的数据目录在列目录时都是通过数据库查询，如果需要手动在磁盘目录上添加文件并使用nextcloud列出就需要手动扫描。

sudo -u www php console.php files:scan --all

这条命令是官方提供的，但是实际使用时会报错如下：

Unknown user 1 media
+---------+-------+--------------+
| Folders | Files | Elapsed time |
+---------+-------+--------------+
| 0       | 0     | 00:00:00     |
+---------+-------+--------------+

经过信息检索发现问题，在nextcloud安装目录下使用如下命令扫描，就可以看到新添加的文件了：

$ sudo -u www php console.php files:scan --path songtianlun/files

# songtianlun 可替换为你需要扫描的用户

参考文献

• NEXTCLOUD 下载和数据存储目录的问题
• OCC and FIles:Scan in single catlog