2018-11-18 第十一周周报

[lxs137]

廖祥森

本周工作

• 和葛红军完成了安卓测试项目的自动化部署工作
• ESXI虚拟机的自动化管理方面，在官方的Flings插件仓库里找到了一个js的sdk，但这个client不支持连接自签名证书的https server，参照NodeJS热更新的方法，替换了其中一个模块，解决了这个问题
• 课程任务：分布式算法的论文报告(Paxos made simple, The part-time parliament)

下周工作

• ESXI虚拟机的自动创建、状态获取；DataCenter的文件管理
• 课程任务：分布式系统的第一次实验 (raft)、nlp的第二次实验(命名实体识别)

想说的话

• 作业好多。。。

[tsdjh]

钦明珑

本周工作

• 完成hadoop第四次大作业
• 提交nlp第一次作业
• 用qt框架实现一些画图功能（计算机图形学课要求）

下周工作

• 完成分布式系统第一次大作业
• 完成nlp第二次大作业
• 完成图形学11月任务，为月进度报告做准备
• 继续学习深入理解计算机系统第四章

想说的话

• 作业好多。还有2000行代码呢。

[wazxser]

王月欢

本周工作

• 看kubernetes scheduler的源码
• 看师兄给的简单调度器的源码
• 熟悉师兄的实验和代码

下周工作

• 尝试开始写简单的调度器
• 分布式系统的第一次作业，自然语言处理的第二次作业

[wdongyu]

王东宇

本周工作

• 阅读了软件工程研究导引和分布式算法的课程论文，并完成了一次论文报告

• 把大数据平台部署到kubernetes集群上的方式进行了修改

• 完成了硕士研讨班的微服务动态更新系统的报告

• 完成了将微服务系统放到kubernetes集群运行的demo，并利用Istio注入Sidecar及相关的可视化工具，来对微服务系统进行管理

下周工作

• 课程作业：要完成分布式系统第一次编程作业

• 继续修改大数据平台的部署方式，考虑持久化等特性

• 完成微服务与kubernetes相关的ppt

想说的话

• 加油

[usernamehcx]

何城贤

本周工作

• MapReduce课程第四次实验
• 在虚拟机装的minikube中部署了storm，Elasticsearch，Kafka，并将之前mesos上跑的服务迁移到了kubernetes上。

下周工作

• 分布式系统第一次实验，nlp第二次作业
• 考虑storm python bolt的实现方式，尝试其他的实现方式

想说的话

• 作业有点多，抓紧

[njuywy]

叶炜煜

本周工作

• 继续理解kubernetes的scheduler代码，对cache.go部分进行分析，将其获取资源定位到node_info中，并对这一部分进行了理解，学习了其通过apiserver获取资源的方式。
• 阅读李青坪提供的scheduler代码。

下周工作

• 对scheduler的资源获取方式进行进一步深入分析，尝试进行资源获取的复现。

[jetmuffin]

陈洁

本周工作

• 参加了下 KubeCon 2018，花了一天写 kubernetes 分享 PPT，另外在写个 KubeCon 上的见闻总结的 blog（还在写）
• dlkit 的 github oauth 代码写完，但是由于墙内走 github 访问太慢，fork 到一个分支上晚点再写；全部鉴权改会最简单的 HTTP Headers 里的信息验证；logging 方面部署了 fluentd 来采容器 stdout，投到 ES 上，整个流程还没调通。
• ddlp 写了 per-process 的 cgroup parser，目前可以拿到单进程 cpu/memory/disk 用量情况，正在写 perf_event 的信息来取 IPC/bandwidth 相应用量。

下周工作

• 接上 dlkit 前端的页面，日志方面写个 backend 提供给前端；
• 和 @konnase 一起把目前最 naive 的 scheduler 的性能分析跑一下（对比手动指定 placement 的方式），琢磨多任务下的调度策略

[Toydi]

邱睿

本周工作

• 阅读kubernetes scheduler代码，理解scheduler获取Nodeinfo的部分，在k8s集群上尝试获取节点的CPU、内存信息。
• 跟李青坪确认他需要的节点资源状态信息，还需要获取每个节点上的GPU总数和剩余数信息，这周主要是在看项目代码，掌握资源获取的机制。

下周工作

• 在k8s集群上尝试进行资源状态获取。

[DavidHux]

胡翔

本周工作

• 从苏川那里取了一些新的质监数据，主要是工业产品信息表和工业企业信息表，原来是全部企业和产品信息。数据质量上感觉变化不大。
• 尝试使用Gephi等图结构数据绘制软件对质监数据构建图，从直观的图上找一些规律，目前没有什么发现。
• 阅读了相关的一些工作，对之前deep walk改进的工作做进一步的修改，进行实验，目前还没完成实验。

下周工作

• 利用新获得的质监数据进行实验，看看效果。
• 继续修改deep walk相关工作。

[NAP-GHJ]

葛红军

本周工作

• 和廖祥森一起，理了一下微信自动化部署系统的设计，完善了微信项目自动化部署的工作
• 继续写了一些抖音演示项目的模块，调了一些运行时刻不稳定的状态

下周工作

• 和邓靖将抖音demo的controller 的状态转移和调度部分完成部署，稳定的长时间运行起来
• 带着完成apsec的报告，并且进行讨论和修改

[konnase]

李青坪

本周工作

• 阅读 https://github.com/kelseyhightower/scheduler 代码和 https://github.com/mateobur/example-kubernetes-scheduler 代码，拿到待调度的pod重新创建binding，将pod绑定到特定node上
• 从宿主机上执行nvidia-smi工具拿到每台宿主机上的gpu使用情况，拿到namespace下Pending的pod，创建binding，将pod绑定到特定node上，不过如果要指定特定node上的某个特定的gpu，需要先更新pod的环境变量之后再创建binding
• 基于sinosteel框架，协助中创伙伴了解spring-boot项目的开发。下一步完成shiro权限控制机制的加入

下周工作

• 完成简单的scheduler的调度流程，将多任务加入调度机制中

[dmemoing]

邓靖

本周工作

• 重写抖音控制器部分的逻辑，通过状态以及策略驱动应用的执行，每次执行的动作由当前所处的页面以及所采取的策略来决定，执行动作成功后，再更新状态
• 在抓取粉丝信息的同时，穿插着观看作品以及查看评论，来模拟人的行为，这部分还有问题

下周工作

• 解决观看作品以及查看评论的问题
• 完善状态的转移，以及状态的检查，使得动作能够精确执行

[Benjamin15122]

王国畅

本周工作

• 辅助中创同事们进行开发
• 添加登录页面，与后台连接

下周工作

• 调试所有接口，添加用户名验证
• 添加详情页面
• 毕设表格，报告，ppt编写

想说的话

• 提高效率