数据可视化(一) 图表简介

写在前面

数据分析界有一句经典名言，字不如表，表不如图。数据可视化是数据分析的主要方向之一。除掉数据挖掘这类高级分析，不少数据分析就是监控数据观察数据。

数据分析的最终都是要兜售自己的观点和结论的。兜售的最好方式就是做出观点清晰数据详实的PPT给老板看。如果没人认同分析结果，那么分析也不会被改进和优化，不落地的数据分析价值又在哪里？

各类图表的详细介绍可以查看这篇文章。

温馨提示：如果您已经熟悉数据可视化，大可不必再看这篇文章，或只挑选部分。

Excel学习(三) 实战篇

前文传送

Excel学习(一) 函数篇
Excel学习(二) 技巧篇

写在前面

此文针对数据分析EXCEL部分的入门。

重点是了解各种函数，包括但不限于sum，count，sumif，countif，find，if，left/right，时间转换等。Excel函数不需要学全，重要的是学会搜索。即如何将遇到的问题在搜索引擎上描述清楚。掌握vlookup和数据透视表足够，是最具性价比的两个技巧。

学会vlookup，SQL中的join，Python中的merge很容易理解。

学会数据透视表，SQL中的group，Python中的pivot_table也是同理。

这两个搞定，基本10万条以内的数据统计没啥难度。Excel是熟能生巧，多找练习题。还有需要养成好习惯，不要合并单元格，不要过于花哨。表格按照原始数据（sheet1）、加工数据（sheet2），图表（sheet3）的类型管理。

第三篇数据分析—技巧篇。主要将前两篇的内容以实战方式进行，简单地进行了一次数据分析。数据源采用了真实的爬虫数据，是5000行数据分析师岗位数据。

温馨提示：如果您已经熟悉Excel，大可不必再看这篇文章，或只挑选部分。

Excel学习(二) 技巧篇

前文传送

Excel学习(一) 函数篇

写在前面

此文针对数据分析EXCEL部分的入门。

重点是了解各种函数，包括但不限于sum，count，sumif，countif，find，if，left/right，时间转换等。Excel函数不需要学全，重要的是学会搜索。即如何将遇到的问题在搜索引擎上描述清楚。掌握vlookup和数据透视表足够，是最具性价比的两个技巧。

学会vlookup，SQL中的join，Python中的merge很容易理解。

学会数据透视表，SQL中的group，Python中的pivot_table也是同理。

这两个搞定，基本10万条以内的数据统计没啥难度。Excel是熟能生巧，多找练习题。还有需要养成好习惯，不要合并单元格，不要过于花哨。表格按照原始数据（sheet1）、加工数据（sheet2），图表（sheet3）的类型管理。

第二篇数据分析—技巧篇。主要简单讲解很有性价比的功能，提高工作效率。

温馨提示：如果您已经熟悉Excel，大可不必再看这篇文章，或只挑选部分。

Excel学习(一) 函数篇

写在前面

此文针对数据分析EXCEL部分的入门。

重点是了解各种函数，包括但不限于sum，count，sumif，countif，find，if，left/right，时间转换等。Excel函数不需要学全，重要的是学会搜索。即如何将遇到的问题在搜索引擎上描述清楚。掌握vlookup和数据透视表足够，是最具性价比的两个技巧。

学会vlookup，SQL中的join，Python中的merge很容易理解。

学会数据透视表，SQL中的group，Python中的pivot_table也是同理。

这两个搞定，基本10万条以内的数据统计没啥难度。Excel是熟能生巧，多找练习题。还有需要养成好习惯，不要合并单元格，不要过于花哨。表格按照原始数据（sheet1）、加工数据（sheet2），图表（sheet3）的类型管理。

第一篇数据分析—函数篇。主要简单讲解常用的函数，以及与之对应的SQL/Python函数。

温馨提示：如果您已经熟悉Excel，大可不必再看这篇文章，或只挑选部分。

常用数据类型的字节数

1
2
3
4
5
6
7
1 G = 1024^3
1 M = 1024^2
1 K = 1024
1 GB = 1024 MB = 1024^3 Byte(字节)
1 MB = 1024 KB = 1024^2 Byte(字节)
1 KB = 1024 Byte(字节)
1 Byte = 8 Bit(位)二进制

1个整数占4个字节，1个字节为8位二进制(1个字节能表示2^8=256个数字范围，大小可以从-2^7-1~2^7)，因此1个整数为32位二进制(1个整数表示2^32个数字范围)

8进制必须以0开头，16进制数必须以0x开头。

使用ASCII编码，可以将一个字节Byte转换成一个字符Character。数据类型的长度跟编译器和系统有关。

在Windows下32位编译器的数据类型字节数：

1
2
3
4
5
6
7
8
9
10
char：1个字节
char\*(即指针变量)：4个字节(32位的寻址空间是2^32，即32个bit，也就是4个字节。)
short int：2个字节
int：4个字节
unsigned int：4个字节
float：4个字节
double：8个字节
long：4个字节
long long：8个字节
unsigned long：4个字节

在Windows下64位编译器的数据类型字节数：

1
2
3
4
5
6
7
8
9
10
char：1个字节
char\*(即指针变量)：8个字节(64位的寻址空间是2^64，即64个bit，也就是8个字节。)
short int：2个字节
int：4个字节
unsigned int：4个字节
float：4个字节
double：8个字节
long：4个字节
long long：8个字节
unsigned long：4个字节

但如果是linux系统的话，在64位编译器下long和unsigned long类型将变成8个字节。

参考资料

宁哥的小站 » 常用数据类型的字节数

ASCII、Unicode和UTF-8编码的区别

归纳

编码 大小 支持语言
ASCII 1个字节 英文
Unicode 2个字节（生僻字4个） 所有语言
UTF-8 1-6个字节，英文字母1个字节，汉字3个字节，生僻字4-6个字节 所有语言

具体解释：

最早只有127个字母被编码到计算机里，也就是大小写英文字母、数字和一些符号，这个编码表被称为ASCII编码，比如大写字母A的编码是65，小写字母z的编码是122。

但是要处理中文显然一个字节是不够的，至少需要两个字节，而且还不能和ASCII编码冲突，所以，中国制定了GB2312编码，用来把中文编进去。

你可以想得到的是，全世界有上百种语言，日本把日文编到Shift_JIS里，韩国把韩文编到Euc-kr里，各国有各国的标准，就会不可避免地出现冲突，结果就是，在多语言混合的文本中，显示出来会有乱码。

因此，Unicode应运而生。Unicode把所有语言都统一到一套编码里，这样就不会再有乱码问题了。

Unicode标准也在不断发展，但最常用的是用两个字节表示一个字符（如果要用到非常偏僻的字符，就需要4个字节）。现代操作系统和大多数编程语言都直接支持Unicode。

新的问题又出现了：如果统一成Unicode编码，乱码问题从此消失了。但是，如果你写的文本基本上全部是英文的话，用Unicode编码比ASCII编码需要多一倍的存储空间，在存储和传输上就十分不划算。

所以，本着节约的精神，又出现了把Unicode编码转化为“可变长编码”的UTF-8编码。UTF-8编码把一个Unicode字符根据不同的数字大小编码成1-6个字节，常用的英文字母被编码成1个字节，汉字通常是3个字节，只有很生僻的字符才会被编码成4-6个字节。如果你要传输的文本包含大量英文字符，用UTF-8编码就能节省空间。

UTF-8编码有一个额外的好处，就是ASCII编码实际上可以被看成是UTF-8编码的一部分，所以，大量只支持ASCII编码的历史遗留软件可以在UTF-8编码下继续工作。

参考资料

计算机编码_百度百科

博客搭建——主题Light修改教程

这是部署了的我的博客：RP’s Blog可以点击预览效果

添加“多说”评论与“页面导航”

在多说 进行注册，我用的是我的QQ号，获取通用代码。

将通用代码粘贴到 \themes\light\layout\_partial\comment.ejs 里边，
其中var duoshuoQuery = {short_name:"paradoxallen"}里的paradoxallen是我的账号。

如下：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
<% if (page.comments){ %>


<nav id="pagination" >
    <% if (page.prev) { %>
    <a href="<%- config.root %><%- page.prev.path %>" class="alignleft prev" ><%= __('prev') %></a>
    <% } %>
    <% if (page.next) { %>
    <a href="<%- config.root %><%- page.next.path %>" class="alignright next" ><%= __('next') %></a>
    <% } %>
    <div class="clearfix"></div>
</nav>

<!-- 多说评论框 start -->
 <div class="ds-thread" data-thread-key="<%- config.root %><%- item.path%>" data-title="<%- item.title %>" data-url="<%- item.permalink %>"></div>
<!-- 多说评论框 end -->
<!-- 多说公共JS代码 start (一个网页只需插入一次) -->
<script type="text/javascript">
var duoshuoQuery = {short_name:"paradoxallen"};
  (function() {
    var ds = document.createElement('script');
    ds.type = 'text/javascript';ds.async = true;
    ds.src = (document.location.protocol == 'https:' ? 'https:' : 'http:') + '//static.duoshuo.com/embed.js';
    ds.charset = 'UTF-8';
    (document.getElementsByTagName('head')[0] 
     || document.getElementsByTagName('body')[0]).appendChild(ds);
  })();
  </script>
<!-- 多说公共JS代码 end -->
<section id="comment">
</section>
<% } %>

添加小图标

在themes/light/layout/_partial/head.ejs里将<link href="<%- config.root %>favicon.png" rel="icon">
替换为<link href="<%- config.root %>favicon.ico" rel="icon" type="image/x-ico">将favicon.ico图标文件放在source目录下。

添加分类、标签云widget

很简单，在themes/light/_config.yml中，添加如下：

1
2
3
4
5
6
7
widgets:
- category
- tagcloud
```   
### 添加友情链接widget ###

在`themes/light/layout/_widget`中新建名为`blogroll.ejs`的文件，编辑内容如下：

友情链接

  • paradix

  • Hexo博客



    • 1
    2
    3
    4
    5
    6

    ### 添加新浪微博widget(微博秀) ###

    去[新浪微博开放平台](http://app.weibo.com/tool/weiboshow)设置和生成微博秀代码。我用的139邮箱注册新浪。
    在`themes/light/layout/_widget`中新建名为`weibo.ejs`的文件，将刚才的代码直接保存到这里。
    在`themes/light/_config.yml`中，添加如下：

    widgets: #站点右边栏，暂时默认，后面介绍修改和添加

    • search
      • category
      • tagcloud #标签云
      • intro
      • weibo #新浪微博秀
      • blogroll #友情链接
        1
        2
        3
        4
        5
        6
        7
        8
        9
        10
        11
        12

        ### 主页文章显示摘要 ###

        编辑md文件的时候，在要作为摘要的文字后面添加``即可。

        ### 修改背景图片、文字颜色等 ###

        找到`hexo\themes\light\source\css\_base\layout.styl`，在`body`下面增加一条`background-image url('/imgs/noise.png')`
        至于背景图片`\themes\light\source\imgs\bozhu.png`，用自己喜欢的即可。
        然后在`hexo\themes\light\source\css\_base\variable.styl`中修改`color`区块中的属性，就可以改变网站不同元素的颜色了。

        ### 重头戏来了，我修改的themes\light\_config.yml文件 ###

    menu: #站点右上角导航栏，暂时默认
    首页: /
    归档: /archives
    关于: /about

    widgets: #站点右边栏

    • search
    • category
    • tagcloud #标签云
    • intro
    • weibo #新浪微博秀
    • blogroll #友情链接

    excerpt_link: 阅读全文 #替换为中文

    plugins:

    • hexo-generator-feed

    twitter: #右边栏要显示twitter展示的话，需要在此设置
    username:
    show_replies: false
    tweet_count: 5

    addthis: #SNS分享，身在天朝，当然用“百度分享”，暂时默认
    enable: true
    pubid:
    facebook: true
    twitter: true
    google: true
    pinterest: true

    fancybox: true #图片效果，默认
    google_analytics: #要使用google_analytics进行统计的话，这里需要配置ID
    rss: /atom.xml #生成RSS，需要配置路径

    1
    2

    ### 根目录下的_config.yml文件设置 ###

    Hexo Configuration

    Docs: http://hexo.io/docs/configuration.html

    Source: https://github.com/hexojs/hexo/

    Site

    title: RP’s Blog
    subtitle:
    description: 学习总结 思考感悟 # 网站描述
    author: paradox
    email: paradoxallen@gmail.com
    language: zh-CN

    URL

    If your site is put in a subdirectory, set url as ‘http://yoursite.com/child' and root as ‘/child/‘

    url: http://paradoxallen.github.io
    root: /
    permalink: :year/:month/:day/:title/
    tag_dir: tags
    archive_dir: archives
    category_dir: categories
    code_dir: downloads/code
    permalink_defaults:

    Directory

    source_dir: source
    public_dir: public

    Writing 文章布局、写作格式的定义，不修改

    new_post_name: :title.md # File name of new posts
    default_layout: post
    titlecase: false # Transform title into titlecase
    external_link: true # Open external links in new tab
    filename_case: 0
    render_drafts: false
    post_asset_folder: false
    relative_link: false
    highlight:
    enable: true
    line_number: true
    tab_replace:

    Category & Tag

    default_category: uncategorized
    category_map:
    tag_map:

    Archives

    2: Enable pagination

    1: Disable pagination

    0: Fully Disable

    archive: 1
    category: 1
    tag: 1

    Server

    Hexo uses Connect as a server

    You can customize the logger format as defined in

    http://www.senchalabs.org/connect/logger.html

    port: 4000
    server_ip: localhost
    logger: false
    logger_format: dev

    Date / Time format

    Hexo uses Moment.js to parse and display date

    You can customize the date format as defined in

    http://momentjs.com/docs/#/displaying/format/

    date_format: YYYY-MM-D
    time_format: H:mm:ss

    Pagination

    Set per_page to 0 to disable pagination

    per_page: 5 #每页5篇文章
    pagination_dir: page

    Disqus #社会化评论disqus，我使用多说，在主题中配置

    disqus_shortname:

    Extensions

    Plugins: https://github.com/hexojs/hexo/wiki/Plugins

    Themes: https://github.com/hexojs/hexo/wiki/Themes

    theme: light
    exclude_generator:

    Deployment 站点部署到github要配置

    deploy:
    type: github
    repository: git@github.com:paradoxallen/paradoxallen.github.io.git
    branch: master

    1
    2
    3
    4
    5
    6

    ### 添加RSS ###

    hexo提供了RSS的生成插件，需要手动安装和设置。步骤如下：
    安装RSS插件到本地：`npm install hexo-generator-feed`
    开启RSS功能：编辑`hexo/_config.yml`，添加如下代码：

    plugins:

    • hexo-generator-feed
      1
      2
      3
      4
      5
      6
      7
      8
      9
      10
      11
      12
      13
      14
      15
      16
      在站点添加链接：
      在`themes/light/_config.yml`中，编辑 `rss: /atom.xml`
      在`themes/light/layout/_partial/header.ejs中，<ul></ul>`之间，添加一样代码
      `<li> <a href="/atom.xml">RSS</a> </li>`


      ### 文章中插入图片 ###

      使用markdown写文章，插入图片的格式为`![图片名称](链接地址)`，这里要说的是链接地址怎么写。对于hexo，有两种方式：
      使用本地路径：在`hexo/source`目录下新建一个`img`文件夹，将图片放入该文件夹下，插入图片时链接即为`/img/图片名称`。
      使用[七牛](https://sso.qiniu.com/)，有图片的链接地址。格式为`![图片名称](链接地址)`我用的是139邮箱注册的七牛。

      ### 加入左上角「fork me on github」 ###

      这里有[github](https://blog.github.com/2008-12-19-github-ribbons/)给出的教程，把代码插入到任意一个全局的模板文件中就行，比如`layout.ejs`的末尾。
      我的`themes\light\layout\layout.ejs`文件如下：

    <%
    if(page.layout !== ‘false’){
    %>

    <%- partial(‘_partial/head’) %>




    <%- body %>




    <%- partial(‘_partial/footer’) %>

    <%- partial(‘_partial/after_footer’) %>

    <%}else{ %>

    <%- page.content %>
    <%};%>
    Fork me on GitHub
    `