使用Java统计gitlab代码行数

一、背景：
       需要对当前公司所有的项目进行代码行数的统计
二、 可实现方式
       1.脚本：通过git脚本将所有的项目拉下来并然后通过进行代码行数的统计
        样例：

1. echo 创建项目对应的文件夹
2. mkdir 项目名称echo 切到创建的文件夹中
3. cd 项目名称echo 进行git初始化
4. git init
5. echo 添加远程仓库
6. git remote add origin 项目地址
7. git fetch origin
8. git checkout -b master origin/master
9. echo 切换检出的分支为master
10. git branch
11. echo 拉取项目代码
12. git pull origin master
13. echo  将项目名称追加输出到上级目录的projectCount.txt文件中注意逗号分隔
14. echo 项目名称, >> ../projectCount.txt
15. echo 使用git命令统计该项目的代码行数并将结果追加到上级目录的projectCount.txt文件中
16. git ls-files | xargs cat | wc -l >> ../projectCount.txt
17. cd ..
18. echo 创建项目对应的文件夹
19. mkdir 项目名称
20. ...
21. 将该代码保存成sh脚本，在gitbash命令行执行

复制代码

将所有的项目进行脚本处理之后便可以得到一张项目名称，代码行数的txt文件，因为以逗号分隔故转换成csv文件后可以复制到excel中进行统计排序处理
       2.gitlab提供的有标准的API接口可以通过调用API的方式进行统计
         在网上进行一番的搜索发现已经有封装好的SDK包添加maven依赖后可以直接使用
         样例：
        引入maven依赖，如果需要其他的版本可以到github上面找到对应的版本：https://github.com/gitlab4j/gitlab4j-api

1.         <dependency>
2.             <groupId>org.gitlab4j</groupId>
3.             <artifactId>gitlab4j-api</artifactId>
4.             <version>5.3.0</version>
5.         </dependency>

复制代码

       统计所有项目的代码行数：
     

1.     private String url = "gitlab的仓库地址";
3.     private String authToken = "用户的token";
5.     private GitLabApi gitLabAPI = new GitLabApi(url, authToken);
8.     /**
9.      * 统计每个项目的代码行数
10.      *
11.      * @throws Exception
12.      */
13.     @Test
14.     public void codeTotalCount() throws Exception {
15.         //拉取属于我的所有项目
16.         List<Project> projectList = gitLabAPI.getProjectApi().getOwnedProjects();
17.         for (Project proj : projectList) {
18.             String namespace = proj.getNamespace().getFullPath();
19.             String name = proj.getPath();
20.             String url = proj.getWebUrl();
21.             log.info("项目命名空间：{}, 项目名称：{}, 项目地址：{}", namespace, name, url);
22.             //获取项目信息包含statistics信息
23.             Project project = gitLabAPI.getProjectApi().getProject(namespace, name, true);
24.             ProjectStatistics projectStatistics = project.getStatistics();
25.             Long totalLines = projectStatistics.getRepositorySize();
26.             log.info("项目名称:{}, 代码行数:{}", name, totalLines);
27.         }
28.     }

复制代码

      统计某一段时间人员的代码行数：
        

1.     private String url = "gitlab仓库地址";
3.     private String authToken = "用户的token";
5.     private GitLabApi gitLabAPI = new GitLabApi(url, authToken);
7.     /**
8.      * 统计人员某段时间的代码行数
9.      *
10.      * @throws Exception
11.      */
12.     @Test
13.     public void codeAuthorCount() throws Exception {
14.         gitLabAPI.enableRequestResponseLogging(Level.ALL);
15.         List<Project> projectList = gitLabAPI.getProjectApi().getOwnedProjects();
16.         //获取项目中的人员信息
17.         List<User> userList = getMembers("in");
18.         log.info("查询人员列表:{}", JSON.toJSONString(userList));
19.         Date start = DateUtil.parse("2023-07-01 00:00:00", "yyyy-MM-dd HH:mm:ss");
20.         Date end = DateUtil.parse("2023-10-01 00:00:00", "yyyy-MM-dd HH:mm:ss");
21.         for (User user : userList) {
22.             Integer addCode = 0;
23.             Integer delCode = 0;
24.             Integer totalCode = 0;
25.             String name = user.getName();
26.             String userName = user.getUsername();
27.             String state = user.getState();
28.             //检查用户信息，不符合要求的用户如 blocked 可进行跳过
29.             if (checkUserInfo(name, state)) {
30.                 continue;
31.             }
32.             for (Project p : projectList) {
33.                 List<Commit> commitList = gitLabAPI.getCommitsApi().getCommits(p.getId(), "master", start, end);
34.                 for (Commit commit : commitList) {
35.                     //因commit信息中没有用户的memberId信息，每个人提交信息有些缺失故进行多次判断
36.                     if (userName.contains(commit.getAuthorName()) ||
37.                             commit.getCommitterEmail().contains(userName) ||
38.                             commit.getAuthorEmail().contains(userName)) {
39.                         Commit c = gitLabAPI.getCommitsApi().getCommit(p.getId(), commit.getShortId());
40.                         //添加代码行数
41.                         addCode += c.getStats().getAdditions();
42.                         //删除代码行数
43.                         delCode += c.getStats().getDeletions();
44.                         //累计修改行数
45.                         totalCode += c.getStats().getTotal();
46.                     }
47.                 }
48.             }
49.             log.info("开始时间：{},结束时间：{}，姓名：{}, 添加代码行数:{}, 删除代码行数:{}, 累计变更行数：{}", start, end, name, addCode, delCode, totalCode);
50.         }
51.     }
53.     private boolean checkUserInfo(String name, String state) {
54.         if (state.equals("blocked") ||
55.                 name.contains("产品部")
56.         ) {
57.             return true;
58.         }
59.         return false;
60.     }
61.    
62.     /**
63.      * 获取项目与group中的人员信息
64.      *
65.      * @param groupPath
66.      * @return
67.      * @throws Exception
68.      */
70.     private List<User> getMembers(String groupPath) throws Exception {
71.         List<User> userList = new ArrayList<>();
73.         //获取所有组路径下的人员信息
74.         List<Group> groupList = gitLabAPI.getGroupApi().getGroups();
75.         List<Project> projectList = new ArrayList<>();
76.         for (Group g : groupList) {
77.             log.info("组名称：{}， 组路径：{}", g.getDescription(), g.getFullPath());
78.             List<Member> members = gitLabAPI.getGroupApi().getMembers(g.getId());
79.             projectList.addAll(gitLabAPI.getGroupApi().getProjects(g.getId()));
80.             for (Member m : members) {
81.                 if (!checkMemberExist(userList, m)) {
82.                     User user = gitLabAPI.getUserApi().getUser(m.getId());
83.                     userList.add(user);
84.                 }
85.             }
86.         }
88.         //获取所有Project的人员信息
89.         for (Project project : projectList) {
90.             String name = project.getPath();
91.             Long id = project.getId();
92.             log.info("项目名称：{}, 项目Id：{}", name, id);
93.             List<Member> members = gitLabAPI.getProjectApi().getMembers(id);
94.             for (Member m : members) {
95.                 if (!checkMemberExist(userList, m)) {
96.                     User user = gitLabAPI.getUserApi().getUser(m.getId());
97.                     userList.add(user);
98.                 }
100.             }
101.         }
102.         return userList;
103.     }
105.     /**
106.      * 判断人员是否已经存在
107.      *
108.      * @param userList
109.      * @param m
110.      * @return
111.      */
112.     private boolean checkMemberExist(List<User> userList, Member m) {
113.         for (User user : userList) {
114.             if (user.getId().equals(m.getId())) {
115.                 return true;
116.             }
117.         }
118.         return false;
119.     }

复制代码

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！