Java实现的词频统计——Web迁移

2023-08-03 11:50:40

　　本次将原本控制台工程迁移到了web工程上，依旧保留原本控制台的版本。

需求：

　　1.把程序迁移到web平台，通过用户上传TXT的方式接收文件；

　　2.在页面上给出链接 (如果有封皮、作者、字数、页数等信息更佳)或表格，展示经典英文小说词频统计结果；

　　3.支持用户自定义单词分隔符；

　　4.词汇范围对比（额外项）。

实现：

　　1.迁移至web工程中，支持用户手动选择txt文件上传；

　　2.用户提交之后，会在后台运行词频统计函数，并且将统计结果的前10项打印到屏幕上；

　　3.统计结果文件Result.txt可以进行下载（此项功能目前仅在本地有效）；

　　4.用户可自定义分隔符。如想以","、"."分隔则输入",."即可；

　　5.由于时间问题，词汇范围对比尚未实现。

代码：

　　1.Servlet：用来处理文件上传以及对传输文件进行词频统计，其中文件上传部分使用了apache.commons。

　　　　上传文件的配置

 // 上传配置

     private static final String UPLOAD_DIRECTORY = "upload";

     private static final int MEMORY_THRESHOLD = 1024 * 1024 * 3;

     private static final int MAX_FILE_SIZE = 1024 * 1024 * 40;

     private static final int MAX_REQUEST_SIZE = 1024 * 1024 * 50;

　　　　上传文件与处理

         // 配置上传参数

         DiskFileItemFactory factory = new DiskFileItemFactory();

         // 设置内存临界值 - 超过后将产生临时文件并存储于临时目录中

         factory.setSizeThreshold(MEMORY_THRESHOLD);

         // 设置临时存储目录

         factory.setRepository(new File(System.getProperty("java.io.tmpdir")));

         ServletFileUpload upload = new ServletFileUpload(factory);

         // 设置最大文件上传值

         upload.setFileSizeMax(MAX_FILE_SIZE);

         // 设置最大请求值 (包含文件和表单数据)

         upload.setSizeMax(MAX_REQUEST_SIZE);

         String uploadPath = "D:\\Project\\workspace" + File.separator + UPLOAD_DIRECTORY;

         // 如果目录不存在则创建

         File uploadDir = new File(uploadPath);

         if (!uploadDir.exists()) {

             uploadDir.mkdir();

         }

         try {

             // 解析请求的内容提取文件数据

             List<FileItem> formItems = upload.parseRequest(request);

             if (formItems != null && formItems.size() > 0) {

                 // 迭代表单数据

                 String path = "";

                 for (FileItem item : formItems) {

                     if (!item.isFormField()) {

                         String fileName = new File(item.getName()).getName();

                         String filePath = uploadPath + File.separator + fileName;

                         File storeFile = new File(filePath);

                         // 保存文件到硬盘

                         item.write(storeFile);

                         request.setAttribute("message", "文件上传成功!");

                         path = filePath;

                     }else{

                         if (item.getString() == null) {

                             new FileProccessing(path);

                         } else if(item.getString().isEmpty()){

                             new FileProccessing(path);

                         }else{

                             new FileProccessing(path, 4096, item.getString());

                         }

                     }

                 }

             }

         } catch (Exception ex) {

             request.setAttribute("message", "Error: " + ex.getMessage());

         }

　　　　跳转页面

      getServletContext().getRequestDispatcher("/FileDownload.jsp").forward(request, response);

　　2.FileUpload.jsp：定义一个表单，用来提交用户上传的文件以及自定义的分隔符。若用户不填写自定义分隔符，则会用默认的方式分隔字符。

     <form method="post" action="CountWeb/UploadServlet"

         enctype="multipart/form-data">

         选择一个文件: <input type="file" name="uploadFile" /> (请选择TXT文件)<br />

         <br />

         自定义分隔符: <input type="text" name="synstr" value="" /> <br />

         <br /> <input type="submit" value="上传" />

     </form>

　　3.FileDownload.jsp：用来输出用户上传结果以及词频统计结果。

     <center>

         <h2>${message}</h2>

     </center>

     <% String juge = (String)request.getAttribute("message");

     if(!juge.startsWith("Error")) {%>

     统计结果:<br />

     <%FileReader filePrint = new FileReader("D:\\Project\\workspace\\CountWeb\\Result.txt");

     BufferedReader br = new BufferedReader(filePrint);

     for(int i = 0;i<14;i++){%>

         <%=br.readLine()%><br />

     <% }

     br.close();

     filePrint.close();

     %>

     <a href="D:\Project\workspace\CountWeb\Result.txt">下载Result文件</a>

     <%} %>

     <br />