当前位置:首页 > 开发 > 系统架构 > shell > 正文

统计push点击次数的shell脚本版本2

发表于: 2015-04-14   作者:cfyme   来源:转载   浏览次数:
摘要:    在上一个版本 统计push点击次数的shell脚本中,有一个问题,就是没有进行去重,比如同一条push被用户点击了多次,点击次数都在加加,显然数量不准确,运营人员需要的是有多少个设备点击打开了push的次数。        于是版本升级了下:       关键代码如下:   &nbs

   在上一个版本 统计push点击次数的shell脚本中,有一个问题,就是没有进行去重,比如同一条push被用户点击了多次,点击次数都在加加,显然数量不准确,运营人员需要的是有多少个设备点击打开了push的次数。

   

   于是版本升级了下:

 

    关键代码如下:

    awk -F ","  '!a[$2,$3,$4,$5]++' $masterPath/push_feed_back_log.log.$date  |awk -F ","  '{a[$2" "$5]+=1}END{for(i in a) printf "%s %s\n",i,a[i]}' | sort -k 3 -n -r | head -n 15 >>/tmp/mymaster.txt

    说明:最关键的去重部分  '!a[$2,$3,$4,$5]++' 表示第2,3,4,5列不能重复,如果重复,就只算一条记录第一列是时间所有忽略。

    完整代码如下:

    

 #!/bin/sh 
 date=`date   -d   -1day +%Y-%m-%d`;
 masterPath=/home/www/logs/taofen8/master;
 apiPath=/home/www/logs/taofen8/api;
 path=/home/www/logs/taofen8;
 hisPath=/data/history/taofen8;
 log=$path/master/push_feed_back_log.log.$date 
 echo "==============start==================";
 if [ ! -f "$log" ]; then
   #判断文件是否存在
   masterPath=$hisPath/master;
   apiPath=$hisPath/api;
 fi
 echo "==============date$date===================" > /tmp/mymaster.txt;
 
 #!a[$2,$3,$4,$5]++  去重
 awk -F ","  '!a[$2,$3,$4,$5]++' $masterPath/push_feed_back_log.log.$date  |awk -F ","  '{a[$2" "$5]+=1}END{for(i in a) printf "%s %s\n",i,a[i]}' | sort -k 3 -n -r | head -n 15 >>/tmp/mymaster.txt
 
 echo "===============API==================" >> /tmp/mymaster.txt;
 
 awk -F ","  '!a[$2,$3,$4,$5]++' $apiPath/push_feed_back_log.log.$date  |awk -F ","  '{a[$2" "$5]+=1}END{for(i in a) printf "%s %s\n",i,a[i]}' | sort -k 3 -n -r | head -n 15 >>/tmp/mymaster.txt
 
 echo "=================end================" >> /tmp/mymaster.txt;

 

 

 

   这样就是统计不重复的点击记录。

 

统计push点击次数的shell脚本版本2

  • 0

    开心

    开心

  • 0

    板砖

    板砖

  • 0

    感动

    感动

  • 0

    有用

    有用

  • 0

    疑问

    疑问

  • 0

    难过

    难过

  • 0

    无聊

    无聊

  • 0

    震惊

    震惊

编辑推荐
《Linux命令行与shell脚本编程大全:第2版》 基本信息 作者: (美)布卢姆(Blum,R.) 布雷斯纳汉(Bresn
  前言:很多场景下,我们都需要对一篇文章或者文档的点击次数进行统计,然而SharePoint本身并没
进行排序的时,很多时候我们可能想实现根据点击的次数进行升降序排序,也就是说点击第一次点击标题
题目: 根据上排给出十个数,在其下排填出对应的十个数,要求下排每个数都是先前上排那十个数在下排
<%@ page language="java" import="java.util.*" pageEncoding="utf-8"%> <!DOCTYPE HTML
题目描述 统计[0,N)的所有整数中1出现的次数。 推导过程 由于涉及表达式,不好在此显示。详见:http
日志文件格式如下: 220.181.108.151 - - [31/Jan/2012:00:02:32 +0800] "GET /home.php?mod=space&
#include <iostream> using namespace std; /** * @author: jiq * ---问题描述: * 给定一个正
具体思路:首先将用creatArray()函数将文件中的内容读入到一个char型的动态数组,然后统计共有多
引言   前几天做了这么一个东西:一个游戏中有个活动页面,活动页面有个商品,商品下面要显示该商
版权所有 IT知识库 CopyRight © 2009-2015 IT知识库 IT610.com , All Rights Reserved. 京ICP备09083238号