数据科学家建站免运维?安全管理员9年经验说:技术便利不等于安全无虞
|
微信公众号。亲历现场。先扔结论后补细节。后怕。 数据科学家建站免运维?我敢打包票——去年八月那个用 Streamlit 搭 BI 门户的项目,上线第三天,Nginx 日志里跳出十七个 /api/v1/query?sql=select%20%20from%20users 的 GET 请求,全是外网 IP,其中五个带 referer:https://shodan.io/search?query=streamlit。不是扫描器误报,是真实回显了用户邮箱字段——他们连环境变量都没关 DEBUG=True。这个我敢打包票。 那会儿我正蹲在工位上盯 WAF 告警,显示器右下角挂着校样PDF,第17页脚注二还是错的——“TLS 1.3 不兼容旧客户端”写成了“不兼容 TLS 1.2”,已经打回三次。编辑说再改不对就换人署名。我懒得动,把PDF最小化了,顺手切到终端敲 kill -9 `pgrep -f 'gunicorn.config.py'`,心里清楚这治标不治本,但至少让那个被注入的 query 接口断一秒喘气。凉掉的外卖盒盖子没盖严,咖喱味混着焦糊味往上飘。
文章配图,仅供参考 当时真信了那句“平台自动轮转证书、自动扩缩容、自动隔离沙箱”。直到看见审计日志里,同一个账号,凌晨两点四十一分,在 AWS 控制台手动启用了 EC2 实例,系统盘挂载了 S3 的 raw-bucket——那个 bucket 本该只存清洗前的日志压缩包,结果里面多出来三个 .pyc 文件,编译时间戳是三天前,modtime 被人工改过。没人报备,没走 CMDB 流程,没人提变更单。我就在监控大屏前站着看了三分钟,没截图,也没录屏。后来翻 git 提交记录,commit 信息写的是“fix: frontend load time”,但 diff 里全是 requests.post('http://172.16.0.102:8080/llm-proxy', json={...})。领导发来的六十秒语音我没听完,静音了,只听到开头:“这个模型服务,我们是不是可以……” 后面半分钟我反复点暂停键,手指按得太急,误触了微信语音转文字,结果蹦出一句:“是不是可以……把防火墙策略放开十分钟试试?” 我截图发给了安全组小张。他回了个OK手势表情包,两分钟后,又补一条:“刚问了开发,他们说‘Streamlit Cloud 自带 WAF’。” 我没回。手机锁屏时瞥见审稿间的灯还亮着,黄光,一闪一闪的,像是接触不良。上次修灯是上周四,电工说等采购新镇流器,拖到现在还没来。 我原以为这类事顶多引发一次权限回收+通报批评。结果两周后,那个数据科学家自己提了个 Jira ticket,标题叫“为什么不能直接读 production MySQL 而非用 View 层”;附言写:“测试环境跑得通,生产报错 Access denied for user ‘ml_user’@’%’,是不是你们 ACL 配错了?” ——ACL?他配的 Kubernetes Ingress annotation 里写了 nginx.ingress.kubernetes.io/auth-url: http://auth-svc:8080/verify ,而 auth-svc 部署 yaml 里,image 是 registry.internal/ml-auth:latest ,镜像 digest 在 docker hub 上搜得到,tag latest 对应的是一月份打的包,里面有硬编码的 admin:test123 。这个我说不准,但我知道它确实跑起来了。 印刷对接的电话是周五下午打来的,催封面图源文件。“矢量图!别给 PNG!” 我应着,一边在堡垒机里查 last -i 输出,发现那个 ml_user 在过去七十二小时里,从六个不同出口 IP 登录过跳板机,其中两次在凌晨三点之后,session 时长最长的一次一百八十九秒,执行了两条命令:curl -X POST http://k8s-api:6443/api/v1/namespaces/default/secrets --data-binary @token.json 和 kubectl create secret generic aws-creds --from-file=credentials=./aws_creds.txt 。我盯着第二条命令看了半天,没截图,也没告警——因为 namespace default 是白名单里的。可 default 里不该有 aws_creds.txt 这种东西。我点了退出,登出了,没关窗口,让它悬在那儿,像一个没合上的伤口。 优胜劣汰这事,真不是喊口号。上个月清理资产,我们筛出来四十七个“无人认领”的 API 网关路由,其中二十三个绑着 .dev.internal 域名,实际指向 JupyterHub 实例,后端 Python 进程都开着 root 权限——因为某位数据科学家说“TensorFlow 分布式训练必须用 hostPID”。我删了八个,剩下三十几个贴了红标,挂待决策。目前状态:静默。今天早上运维同事顺手给其中一个打了补丁,CVE-2023-45803 的 PoC,他说“看漏洞描述很像我们的场景”。我回了个“收到”,就没再说话。 还有件事,可能扯远了:上周三下午,数据平台组老刘在茶水间跟我说,“其实我们有个想法,想把模型训练流水线里的 artifact 存储,从 MinIO 换成 GitHub Packages,版本可控,审计也方便。” 我没接话,拧开保温杯喝了口凉茶,杯子沿上留了个浅浅的唇印。他笑了笑,转身去接水,背影有点佝偻。我没拦他,也没提醒他 GitHub Packages 私库 token 默认有效期三十年,且一旦写死在 CI YAML 里,基本等于裸奔。 现在我不拦了。不是认输,是学会挑刺的位置。比如,下次他们推“全自动密钥轮转”,我第一反应不是查 RFC 文档,而是翻 IAM role policy version 的 lastModifiedTimestamp——如果它和上次部署时间差超过四十八小时,我就知道轮转根本没触发。具体怎么触发?我不深究。我只记时间戳。够了。 对了,显示器右下角那个校样PDF,刚刚弹出新通知:第17页脚注二,终于改对了。编辑发来消息:“你再确认下,没问题今晚十点前定稿。” 我没点开。先把 terminal 里的 tail -f /var/log/nginx/access.log 关了。 (编辑:站长网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |


数据科学家应对的几大挑战及解决方法
SQL是必学的吗?数据科学家的技能树该如何点?