超赞的开发者门户-Backstage
cac55 2024-12-08 12:32 17 浏览 0 评论
今天介绍一款非常好用的开发者门户系统,由Spotify主导设计Backstage开放平台,目前已从CNCF孵化毕业,受到越来越多企业的欢迎
背景
对于负责开发维护的开发人员来说,其产出了越来越多的项目成果,对项目的资源依赖和信息掌握就变得越来越模糊。
此外当需要查看某个服务的信息,常常需要在github、jenkins、confluence、grafana、kubernetes。。。不同工具平台之间切换,搞得疲惫不堪。
他们需要这么一个服务于开发人员的以服务为核心,能覆盖周边所有相关资源的管理维护平台
对团队负责人或企业领导来说,如何把一些好的团队技术成果推广到其他团队是一件困难的事情。也亟需打造一个打通能力提供者和能力消费的沟通平台,让潜在的能力消费者能够搜索感兴趣的服务,并通过查看设计文档、使用文档、API、负责联系人等关键信息判断是否适合自身的需要
而backstage即是具备解决这些问题的开放平台。作为CNCF的孵化项目,Backstage是一个开箱即用的平台服务,可用于管理所有的软件(System、Component、Resource、Api、TechDocs等),并且提供了许多的plugin,让这个平台可以无限延伸,受到越来越多的公司青睐。
Backstage
Overview
Backstage(https://backstage.io/)是用于构建开发人员门户的开放平台。Backstage由一个集中的软件目录提供支持,它可以梳理您的微服务和基础设施相互关联,并使您的产品团队能够快速交付高质量的代码,而不影响自主权。
Backstage能将所有基础设施工具、服务和文档统一起来,从而从端到端创建一个更合理的开发环境。
Backstage Demo入口: https://backstage.io/demos
架构
介绍文档: https://backstage.io/docs/overview/architecture-overview
Getting Started
本次我们着重体验Backstage的基础核心功能-Software Catalog,以及软件模板-Software Templates和技术文档-TechDocs功能。
先决条件
确保环境已安装: NodeJS、yarn、Docker、curl/wget、Git、PostgreSQL、
本地安装
本次安装环境为自用windows10系统的PC机
- 执行以下命令安装backstage,
npx @backstage/create-app
安装过程中需要输入你的backstage应用名称,如my-backstage-app
- 配置使用PostgreSQL
进入my-backstage-app的目录,编辑app-config.yaml文件,将SQLite换成Postgres
app-config.yaml
backend:
database:
- client: better-sqlite3
- connection: ':memory:'
+ # config options: https://node-postgres.com/api/client
+ client: pg
+ connection:
+ host: ${POSTGRES_HOST}
+ port: ${POSTGRES_PORT}
+ user: ${POSTGRES_USER}
+ password: ${POSTGRES_PASSWORD}
+ # https://node-postgres.com/features/ssl
+ #ssl: require # see https://www.postgresql.org/docs/current/libpq-ssl.html Table 33.1. SSL Mode Descriptions (e.g. require)
+ #ca: # if you have a CA file and want to verify it you can uncomment this section
+ #$file: <file-path>/ca/server.crt
- 启动my-backstage-app
在应用目录下,执行以下命令启动backstage
yarn dev
待提示成功打开浏览器,输入:http://localhost:3000打开页面
整合github
整合使用github登录认证
- 在github创建Oauth App
提前准备一个github账号,进入账号的'setting'页面,点击'Developer settings',选择'OAuth Apps',创建一个OAuth App,名称自拟,按下图进行配置
- 在backstage中添加你的OAuth App配置
编辑app-config.yaml文件
app-config.yaml
auth:
# see https://backstage.io/docs/auth/ to learn about auth providers
environment: development
providers:
github:
development:
clientId: YOUR CLIENT ID
clientSecret: YOUR CLIENT SECRET
在backstage前端添加github的登陆支持
编辑packages/app/src/App.tsx文件,在import的最后一行添加
import { githubAuthApiRef } from '@backstage/core-plugin-api';
import { SignInPage } from '@backstage/core-components';
在const app = createApp({apis,的下一行添加
App.tsx
components: {
SignInPage: props => (
<SignInPage
{...props}
auto
provider={{
id: 'github-auth-provider',
title: 'GitHub',
message: 'Sign in using GitHub',
apiRef: githubAuthApiRef,
}}
/>
),
},
重新启动,访问http://localhost:3000,页面如下。点击'SIGN IN',弹出登录github的新窗口进行认证
集成github
由于本次使用了github存储catalogEntity数据,托管代码等,我们需要设置github的集成。
- 在github生产Access Token
登录github,进入账号的'setting'页面,点击'Developer settings',选择'Personal access tokens',生成一个token,名称自拟,设置scope,和有效期,如下图
- 在backstage中添加你的Access Token配置
编辑app-config.yaml文件
app-config.yaml
integrations:
github:
- host: github.com
token: ghp_urtokendeinfewinfiwebfweb # this should be the token from GitHub
重新启动backstage,即可进行register 或create 一个component。以下是使用Catalog自带的'Example Node.js Template'创建Component的流程实例,可见其能自动为我们在github中创建相应Repo
已有服务注册到Backstage
在本章节以开源系统xxl-job为例,演示如何将已有项目注册到backstage。
准备服务相关Entity
为了统一管理我们的应用信息,我们在github中创建一个Repo,假如它名称是backstage-commons。我们先在其中创建两个yaml,来存放那些我们觉得今后应该给devops team统一管理的那些Entitt,比如是System、Group等
- 注册User、Group到CatalogEntity
global-org.yaml
---
# https://backstage.io/docs/features/software-catalog/descriptor-format#kind-user
apiVersion: backstage.io/v1alpha1
kind: User
metadata:
name: shaliuchen123
spec:
profile:
displayName: shaliuchen123
email: shaliuchen123@xxx.com.cn
picture: https://example.com/staff/jenny-with-party-hat.jpeg
memberOf: [DevOps-Team]
---
# https://backstage.io/docs/features/software-catalog/descriptor-format#kind-group
apiVersion: backstage.io/v1alpha1
kind: Group
metadata:
name: Admin-Team
description: admin team
spec:
type: root
children: [DevOps-Team]
---
# https://backstage.io/docs/features/software-catalog/descriptor-format#kind-group
apiVersion: backstage.io/v1alpha1
kind: Group
metadata:
name: DevOps-Team
spec:
type: team
profile:
displayName: DevOps Team
email: devops-team@xxx.com.cn
picture: https://example.com/groups/bu-infrastructure.jpeg
children: [SharedService-Team]
members: [guest]
---
# https://backstage.io/docs/features/software-catalog/descriptor-format#kind-group
apiVersion: backstage.io/v1alpha1
kind: Group
metadata:
name: SharedService-Team
spec:
type: team
profile:
displayName: DevOps Team
email: sharedservice-team@xxx.com.cn
picture: https://example.com/groups/bu-infrastructure.jpeg
children: []
---
# https://backstage.io/docs/features/software-catalog/descriptor-format#kind-group
apiVersion: backstage.io/v1alpha1
kind: Group
metadata:
name: Infrastructure-Team
spec:
type: team
children: []
在Backstage 注册Componet
通过的Backstage的Register an existing ...按钮,copy yaml链接导入上面定义的若干Group、User。
默认情况下,这是不允许的,我们通过编辑app-config.yaml文件中的catalog.rules.-allow添加对Group、User的支持
· 注册System、API到Catalog
global-application
---
# https://backstage.io/docs/features/software-catalog/descriptor-format#kind-system
apiVersion: backstage.io/v1alpha1
kind: System
metadata:
name: IDP
spec:
owner: SharedService-Team
---
# https://backstage.io/docs/features/software-catalog/descriptor-format#kind-system
apiVersion: backstage.io/v1alpha1
kind: System
metadata:
name: SampleApplication
spec:
owner: DevOps-Team
---
# https://backstage.io/docs/features/software-catalog/descriptor-format#kind-api
apiVersion: backstage.io/v1alpha1
kind: API
metadata:
name: SampleApplication
spec:
type: openapi
lifecycle: production
owner: DevOps-Team
system: SampleApplication
definition:
$text: http://localhost:8081/v2/api-docs
如同上一步,我们将这些System、API注册到Backstage
- 将已有服务和swagger文档注册到Backstage
我们在backstage-commons的目录中创建一个xxl-job的目录,目录内创建一个catalog-info.yaml文件
catalog-info.yaml
apiVersion: backstage.io/v1alpha1
kind: Component
metadata:
name: xxl-job-admin
description: xxl-job-admin
# Example for optional annotations
annotations:
github.com/project-slug: shaliuchen/xxl-job
backstage.io/techdocs-ref: dir:.
tags:
- java
links:
- url: https://github.com/shaliuchen123/xxl-job
title: sourceCode
icon: github
- url: https://shared-job-admin-uat.unilever-china.azure/xxl-job-admin/toLogin
title: portal
icon: dashboard
spec:
type: service
owner: SharedService-Team
lifecycle: production
system: XXL-JOB
consumesApis: [springboot-sample-service]
---
# https://backstage.io/docs/features/software-catalog/descriptor-format#kind-system
apiVersion: backstage.io/v1alpha1
kind: System
metadata:
name: XXL-JOB
spec:
owner: SharedService-Team
上面定义了一个xxl-job-admin的component,标注了源码位置、xxl-job的登陆页面、调用的API信息,和一个XXL-JOB的System
如同上一步,我们将这些System、API注册到Backstage,效果如下
创建TechDocs文档
TechDocs是Spotify直接内置在Backstage中的docs-like-code解决方案。开发者他们的文档编写在 Markdown 文件中,这些文件与他们的代码一起存在,仅需少量配置即可在Backstage中在线查看该文档。Backstage在markdown内容发生变化时,动态更新TechDocs站点内容。生成文档默认存储在本地,官方推荐将生成文档存储在AWS S3或Azure Blob Storage等云存储中。
安装并配置TechDocs插件
如果尚未安装TechDocs插件,使用前需要先安装。安装后,可在app-config.yarm中进行如下配置
app-config.yarm
# Reference documentation http://backstage.io/docs/features/techdocs/configuration
# Note: After experimenting with basic setup, use CI/CD to generate docs
# and an external cloud storage when deploying TechDocs for production use-case.
# https://backstage.io/docs/features/techdocs/how-to-guides#how-to-migrate-from-techdocs-basic-to-recommended-deployment-approach
techdocs:
builder: 'local' # Alternatives - 'external'
generator:
runIn: 'docker' # Alternatives - 'local'
publisher:
type: 'local' # Alternatives - 'googleGcs' or 'awsS3'. Read documentation for using alternatives.
local:
# (Optional). Set this to specify where the generated documentation is stored.
publishDirectory: 'c:/path/to/local/directory'
编写文档
默认情况下,Backstage推荐你的文档与代码存放在一起,以普通maven项目为例,其目录结构如下:
docs为你的markdown文档的存放目录,一般默认主页文档名称为index.md
发布文档
其中catalog-info.yaml为register到backstage的配置,mkdocs.yml为TechDocs的配置
catalog.info.yaml
metadata:
annotations:
backstage.io/techdocs-ref: dir:.
mkdocs.yml
site_name: 'example-docs'
nav:
- Home: index.md
plugins:
- techdocs-core
在backstage刷新等待片刻后,即可看到效果
创建模板
Backstage自带了若干个软件模板。一方面可以确保创建的Component能够自动注册到backstage,同时也能够起到scaffold的功能,快速创建一个统一规范的应用程序,并最终将所有生成内容提交到远程git仓库。
定义模板
以下是backstage提供的Spring Boot gRPC Service 模板。
template.yaml
apiVersion: scaffolder.backstage.io/v1beta3
kind: Template
metadata:
name: springboot-template
title: Spring Boot gRPC Service
description: Create a simple microservice using gRPC and Spring Boot Java
tags:
- recommended
- java
- grpc
spec:
owner: service@example.com
type: service
parameters:
- title: Provide some simple information
required:
- component_id
- owner
- java_package_name
properties:
component_id:
title: Name
type: string
description: Unique name of the component
ui:field: EntityNamePicker
java_package_name:
title: Java Package Name
type: string
description: Name for the java package. eg (io.backstage.blah)
description:
title: Description
type: string
description: Help others understand what this website is for.
owner:
title: Owner
type: string
description: Owner of the component
ui:field: OwnerPicker
ui:options:
allowedKinds:
- Group
- title: Choose a location
required:
- repoUrl
properties:
repoUrl:
title: Repository Location
type: string
ui:field: RepoUrlPicker
ui:options:
allowedHosts:
- github.com
steps:
- id: template
name: Fetch Skeleton + Template
action: fetch:template
input:
url: ./skeleton
copyWithoutRender:
- .github/workflows/*
values:
component_id: ${{ parameters.component_id }}
description: ${{ parameters.description }}
artifact_id: ${{ parameters.component_id }}
java_package_name: ${{ parameters.java_package_name }}
owner: ${{ parameters.owner }}
destination: ${{ parameters.repoUrl | parseRepoUrl }}
http_port: 8080
- id: publish
name: Publish
action: publish:github
input:
allowedHosts: ["github.com"]
description: This is ${{ parameters.component_id }}
repoUrl: ${{ parameters.repoUrl }}
- id: register
name: Register
action: catalog:register
input:
repoContentsUrl: ${{ steps.publish.output.repoContentsUrl }}
catalogInfoPath: "/catalog-info.yaml"
output:
links:
- title: Repository
url: ${{ steps.publish.output.remoteUrl }}
- title: Open in catalog
icon: catalog
entityRef: ${{ steps.register.output.entityRef }}
定义了使用模板的步骤以及定义一些变量,
作为scaffold的代码目录结构,基本上是一个标准的maven项目结构
添加配置
在app-confing.yaml添加并编辑以下全局配置,
app-config.yaml
app-config.yaml
scaffolder:
defaultAuthor:
name: M.C. Hammer # Defaults to `Scaffolder`
email: hammer@donthurtem.com # Defaults to `scaffolder@backstage.io`
defaultCommitMessage: "Initial commit by backstage'
引入上面的template.yaml位置
app-config.yaml
catalog:
locations:
- type: url
target: https://github.com/backstage/software-templates/blob/main/scaffolder-templates/springboot-grpc-template/template.yaml
rules:
- allow: [Template]
- type: file
target: template.yaml # Backstage will expect the file to be in packages/backend/template.yaml:
重启后可查看该Software Template
使用模板
其他实用插件功能
- CI/CD
- Kubernetes
- Monitor
- Azure Resources
- ... ...
结束语
Backstage在不影响已有代码结构的情况下,通过少量的配置文件,能够很好的组织所有的软件资源,提供良好的用户体验,与可拓展的强大能力,达到了预期要求。
当然假如需引入Backstage,作为生产可用的开放平台,还需要投入更多的精力去解决与自身公司体系融合的问题
相关推荐
- Linux服务器被黑客入侵后各排查项及排除步骤
-
Linux入侵排查0x00前言当企业发生黑客入侵、系统崩溃或其它影响业务正常运行的安全事件时,急需第一时间进行处理,使企业的网络信息系统在最短时间内恢复正常工作,进一步查找入侵来源,还原入侵事故...
- [常用工具] Python视频处理库VidGear使用指北
-
VidGear是一个高性能的Python视频处理库,它在预载多个专业视频图像处理库的基础上,如OpenCV、FFmpeg、ZeroMQ、picamera、starlette、yt_dlp、pyscre...
- 微信公众号自动回复及多客服功能实现
-
目录前期准备1、微信公众平台基本设置2、开发所需参数功能步骤1、填写服务器配置2、验证服务器地址的有效性3、依据接口文档实现业务逻辑具体实现1、微信接入2、自定义回复及多客服接入默认微信公众平台对公众...
- 电脑病毒怎么彻底清理?这3个方法可以解决!
-
案例:电脑中毒无法正常使用怎么办?怎么清理电脑病毒?如何彻底清除病毒?有没有小伙伴知道解决的方法?在使用电脑的过程中,我们经常会遇到电脑中病毒的情况,它们能够通过各种渠道感染你的计算机系统,给你带来许...
- 人在低谷落难的时候,一定要记住的4句话
-
凌晨三点在便利店啃面包时,我看见邻座大哥对着手机里的存款余额发呆,手指在屏幕上划了又划——原来成年人的崩溃,真的会藏在每个看似普通的深夜里。如果你也正在经历「人生断电期」,这10句从谷底爬起来的人总结...
- Linux环境Docker容器安装与使用(六)——安装Hadoop大数据集群
-
简介:Hadoop是一种分析和处理大数据的软件平台,是Appach开源软件的一个架构,在大量计算机组成的集群当中实现了对于海量的数据进行的分布式计算。Hadoop框架最核心的设计就是HDFS和MapR...
- (2023年最新)50个超实用电脑实用快捷键,提高操作效率10倍!
-
我们现在大多数工作都需要使用电脑,掌握简单的电脑知识,可以更好的提高操作效率,熟能生巧是没错,但还有一个方法就是使用快捷键。办公室文员必备技能知识;基本要求:打字快,会office办公软件(word文...
- 升级WIN10毛病多?解决这些问题,轻松应对!
-
1、win10网络不稳定①打开设置,进入网络和INTERNET。②在“WLAN页面”选择“管理Wi-Fi设置”。③在此页面上有个管理已知网络,里面记录着之前电脑连接过的无线网络连接,点击“连接名称”,...
- 史上最贱最贱的电脑病毒!(最致命的电脑病毒)
-
看了标题,有很多人是充满好奇心进来的,想看看有多贱!我可以郑重的告诉你,贱到你想掐死黑客!下面我给你介绍一下这个病毒是怎么个贱法!因为我亲身体验了一把!前几天我不知道怎么回事,我电脑莫名其妙多了几...
- 五千字长文全平台笔记软件obsidian同步攻略&图床使用教程
-
全平台笔记软件obsidianobsidian(黑曜石)是一个全平台的笔记软件,基础笔记功能免费,如果使用官方的同步功能好像是收费(我也不确定,因为我甚至没登陆过obsidian的账号)。可以使用ma...
- 工业自动化2.0演进:具有自我意识的运动控制
-
工业自动化领域的下一个发展方向要求机器能够独立调整其性能参数,以完成工厂操作人员分配的任务,或根据生产力增强的人工智能(AI)算法的输入,对机器自身重新配置以优化其行为。具有自我意识的机器的价值在于,...
- 零信任的时代到来!VPN将逐渐被取代
-
转自NETWORKWORLD,作者NealWeinberg,蓝色摩卡译,合作站点转载请注明原文译者和出处为超级盾!传统的VPN正在被一种更智能、更安全的网络安全方法所取代,这种方法将每个人都视为不受...
- 电脑键盘指法+常用快捷键文字及图片详解
-
图1:20190820(整理)(较全面的在后面)Ctrl+N:新建文档F4:重复上述操作Esc:取消当前操作HOME:光标跳转行首END:光标跳转到行尾WIN+L:锁定桌面WIN+E:开启磁...
- VPN正在消亡,零信任万岁
-
转自NETWORKWORLD,作者NealWeinberg,蓝色摩卡译,合作站点转载请注明原文译者和出处为超级盾!传统的VPN正在被一种更智能、更安全的网络安全方法所取代,这种方法将每个人都视为不受...
- Windows自带的「黑科技」工具,能让你少装10个软件!
-
电脑装了一堆软件,桌面却还是乱糟糟?其实Windows系统里藏着一堆“神器”,无需第三方工具就能搞定截图、录屏、OCR文字提取、系统加速……这7个冷门但逆天的内置工具,专治“软件成瘾症”,看完立马卸载...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- 如何绘制折线图 (52)
- javaabstract (48)
- 新浪微博头像 (53)
- grub4dos (66)
- s扫描器 (51)
- httpfile dll (48)
- ps实例教程 (55)
- taskmgr (51)
- s spline (61)
- vnc远程控制 (47)
- 数据丢失 (47)
- wbem (57)
- flac文件 (72)
- 网页制作基础教程 (53)
- 镜像文件刻录 (61)
- ug5 0软件免费下载 (78)
- debian下载 (53)
- ubuntu10 04 (60)
- web qq登录 (59)
- 笔记本变成无线路由 (52)
- flash player 11 4 (50)
- 右键菜单清理 (78)
- cuteftp 注册码 (57)
- ospf协议 (53)
- ms17 010 下载 (60)