如何使用RBAC API在Kubernetes中创建限制于命名空间的用户/组?

17

问题

我想向许多不同的开发人员(不同主体)发放证书,他们都在开发组内,并且让他们都能够访问创建和修改开发命名空间中的事物,但不能触及其外部,绝对不能查看其外部的机密。 我怀疑我在下面第2步中创建的角色,角色绑定等不正确,有人可以建议更正吗?

尝试

  1. 部署了支持“RBAC,AlwaysAllow”授权模式的API Server标志的Kubernetes,设置了RBAC超级用户,并通过--runtime-config启用了RBAC API。
  2. 创建了一个命名空间、角色和角色绑定,目的是(a)服务帐户和系统组件仍然可以有效地具有“AlwaysAllow”访问权限,以及(b)组dev中的任何实体都可以使用此 YAML文件访问名称空间dev中的任何内容。 注意:此链接的内容已更改,请参见问题底部我获得的工作YAML文件。
  3. 将 Kubernetes 更新为仅允许“RBAC”授权模式。
  4. 生成了客户端TLS数据,其中证书主题标志(用于openssl)为-subj "/ CN = example-dev@kubernetes.click/O=dev"
  5. 按照此模板生成了一个kubeconfig文件。

实际结果

运行时出现以下错误:kubectl -v 8 --kubeconfig=/tmp/dev-kube-config.yml create -f /tmp/busybox.yml

I1219 16:12:37.584657   44323 loader.go:354] Config loaded from file /tmp/dev-kube-config.yml
I1219 16:12:37.585953   44323 round_trippers.go:296] GET https://api.kubernetes.click/api
I1219 16:12:37.585968   44323 round_trippers.go:303] Request Headers:
I1219 16:12:37.585983   44323 round_trippers.go:306]     Accept: application/json, */*
I1219 16:12:37.585991   44323 round_trippers.go:306]     User-Agent: kubectl/v1.5.1+82450d0 (    darwin/amd64) kubernetes/82450d0
I1219 16:12:38.148994   44323 round_trippers.go:321] Response Status: 403 Forbidden in 562     milliseconds
I1219 16:12:38.149056   44323 round_trippers.go:324] Response Headers:
I1219 16:12:38.149070   44323 round_trippers.go:327]     Content-Type: text/plain; charset=utf-    8
I1219 16:12:38.149081   44323 round_trippers.go:327]     Content-Length: 17
I1219 16:12:38.149091   44323 round_trippers.go:327]     Date: Tue, 20 Dec 2016 00:12:38 GMT
I1219 16:12:38.149190   44323 request.go:904] Response Body: Forbidden: "/api"
I1219 16:12:38.149249   44323 request.go:995] Response Body: "Forbidden: \"/api\""
I1219 16:12:38.149567   44323 request.go:1151] body was not decodable (unable to check for     Status): Object 'Kind' is missing in 'Forbidden: "/api"'
...
I1219 16:12:38.820672   44323 round_trippers.go:296] GET https://api.kubernetes.    click/swaggerapi/api/v1
I1219 16:12:38.820702   44323 round_trippers.go:303] Request Headers:
I1219 16:12:38.820717   44323 round_trippers.go:306]     User-Agent: kubectl/v1.5.1+82450d0 (    darwin/amd64) kubernetes/82450d0
I1219 16:12:38.820731   44323 round_trippers.go:306]     Accept: application/json, */*
I1219 16:12:38.902256   44323 round_trippers.go:321] Response Status: 403 Forbidden in 81     milliseconds
I1219 16:12:38.902306   44323 round_trippers.go:324] Response Headers:
I1219 16:12:38.902327   44323 round_trippers.go:327]     Content-Type: text/plain; charset=utf-    8
I1219 16:12:38.902345   44323 round_trippers.go:327]     Content-Length: 31
I1219 16:12:38.902363   44323 round_trippers.go:327]     Date: Tue, 20 Dec 2016 00:12:38 GMT
I1219 16:12:38.902456   44323 request.go:904] Response Body: Forbidden: "/swaggerapi/api/v1"
I1219 16:12:38.902512   44323 request.go:995] Response Body: "Forbidden:     \"/swaggerapi/api/v1\""
F1219 16:12:38.903025   44323 helpers.go:116] error: error validating "/tmp/busybox.yml": error validating data: the server does not allow access to the requested resource; if you choose to ignore these errors, turn validation off with --validate=false

预期结果

dev命名空间中创建busybox pod。

附加细节:

  • $ kubectl version

    Client Version: version.Info{Major:"1", Minor:"5", GitVersion:"v1.5.1+82450d0", GitCommit:"82450d03cb057bab0950214ef122b67c83fb11df", GitTreeState:"not a git tree", BuildDate:"2016-12-14T04:09:31Z", GoVersion:"go1.7.4", Compiler:"gc", Platform:"darwin/amd64"}
    Server Version: version.Info{Major:"1", Minor:"4", GitVersion:"v1.4.6", GitCommit:"e569a27d02001e343cb68086bc06d47804f62af6", GitTreeState:"clean", BuildDate:"2016-11-12T05:16:27Z", GoVersion:"go1.6.3", Compiler:"gc", Platform:"linux/amd64"}
    
  • GitHub问题链接:https://github.com/kubernetes/kubernetes/issues/38997

  • 邮件列表帖子:https://groups.google.com/forum/#!topic/kubernetes-dev/6TBTu1AC2L8

编辑:根据答案和注释得出的解决方案

根据Jordan的答案,我升级到了Kubernetes v1.5.1,然后获得了以下两个YAML文件,用于构建命名空间和所有正确的RBAC资源,以便一切按预期工作:

system-access.yml(因为开箱即用的集群角色和集群角色绑定似乎没有起作用):

kind: ClusterRoleBinding
apiVersion: rbac.authorization.k8s.io/v1alpha1
metadata:
  name: system:node--kubelet
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: ClusterRole
  name: system:node
subjects:
- kind: User
  name: kubelet
---
kind: ClusterRoleBinding
apiVersion: rbac.authorization.k8s.io/v1alpha1
metadata:
  name: cluster-admin--kube-system:default
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: ClusterRole
  name: cluster-admin
subjects:
- kind: ServiceAccount
  name: default
  namespace: kube-system
---
kind: ClusterRoleBinding
apiVersion: rbac.authorization.k8s.io/v1alpha1
metadata:
  name: system:node-proxier--kube-proxy
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: ClusterRole
  name: system:node-proxier
subjects:
- kind: User
  name: kube-proxy

dev-access.yml:

kind: Namespace
apiVersion: v1
metadata:
  name: dev
---
kind: Role
apiVersion: rbac.authorization.k8s.io/v1alpha1
metadata:
  namespace: dev
  name: dev-all
rules:
  - apiGroups: ["*"]
    resources: ["*"]
    verbs: ["*"]
---
kind: RoleBinding
apiVersion: rbac.authorization.k8s.io/v1alpha1
metadata:
  name: dev-role-dev-all-members
  namespace: dev
subjects:
  - kind: Group
    name: dev
  - kind: Group
    name: system:serviceaccounts:dev
roleRef:
  kind: Role
  name: dev-all
  apiGroup: "rbac.authorization.k8s.io"
1个回答

8

首先,您需要允许访问kubectl用于API发现和验证的URL(swagger,API组和资源类型的列表等)。

最简单的方法是加载默认的引导集群角色集群角色绑定

kubectl create -f https://raw.githubusercontent.com/kubernetes/kubernetes/master/plugin/pkg/auth/authorizer/rbac/bootstrappolicy/testdata/cluster-roles.yaml
kubectl create -f https://raw.githubusercontent.com/kubernetes/kubernetes/master/plugin/pkg/auth/authorizer/rbac/bootstrappolicy/testdata/cluster-role-bindings.yaml

那将创建一个 system:discovery ClusterRole 并将所有用户(已验证和未验证)绑定到它,允许他们访问 swagger 和 API 组信息。
其次,您不应在 all 集群角色绑定中包含 dev 服务帐户。这将允许该服务帐户(以及具有访问包含 dev 服务帐户凭据的 dev 命名空间中的机密的任何人)在整个集群范围内访问。

1
请注意,https://github.com/kubernetes/kubernetes/pull/39219 已经开放,以在该角色中包括对“/swaggerapi/*”网址的访问权限。 - Jordan Liggitt
谢谢Jordan。所有的system:...组是从哪里来的?我需要在某个最低版本的Kubernetes上吗?此外,我注意到这些文件中提到了一些角色,但没有在任何绑定中使用,所以我是否真的需要这些角色? - Amit Kumar Gupta
从1.5版本开始,当使用空的etcd启动时,它们将自动创建。其中一些角色会绑定到服务账户,供控制器使用(请参见https://github.com/kubernetes/kubernetes/blob/master/plugin/pkg/auth/authorizer/rbac/bootstrappolicy/testdata/controller-role-bindings.yaml)。 - Jordan Liggitt
关于入口控制器怎么样?我没有看到任何与入口资源相关的角色。 - seh
Ingress控制器没有被控制器管理器启动...这是那个默认定义了角色的集合。 - Jordan Liggitt
显示剩余2条评论

网页内容由stack overflow 提供, 点击上面的
可以查看英文原文,
原文链接