Python小二

Python基础教程 | Python爬虫 | Python数据分析

Python 数据分析（四）：Pandas 进阶

1. 概述我们在上一篇文章初识 Pandas中已经对 Pandas 作了一些基本介绍，本文我们进一步来学习 Pandas 的一些使用。 2. 缺失项在现实中我们获取到的数据有时会存在缺失项问题，对于这样的数据，我们通常需要做一些基本处理，下面我们通过示例来看一下。 1 2 3 4 5 6 7 8 9 10 11 12 13 import numpy as np from pand...

Posted by Python小二 on 2020-01-07

Python 数据分析（三）：初识 Pandas

1. 简介 Pandas 基于 NumPy 开发，它提供了快速、灵活、明确的数据结构，旨在简单、直观地处理数据。 Pandas 适用于处理以下类型的数据：有序和无序的时间序列数据带行列标签的矩阵数据，包括同构或异构型数据与 SQL 或 Excel 表类似的，含异构列的表格数据任意其它形式的观测、统计数据...

Posted by Python小二 on 2020-01-05

Python 数据分析（二）：Matplotlib 绘图

1. 简介 Matplotlib 是 Python 提供的一个绘图库，通过该库我们可以很容易的绘制出折线图、直方图、散点图、饼图等丰富的统计图，安装使用 pip install matplotlib 命令即可，Matplotlib 经常会与 NumPy 一起使用。在进行数据分析时，可视化工作是一个十分重要的环节，数据可视化可以让我们更加直观、清晰的了解数据，Matplotlib 就是一...

Posted by Python小二 on 2020-01-04

Python 数据分析（一）：NumPy 基础知识

1. 简介 NumPy（Numerical Python）是一个开源的 Python 科学计算扩展库，主要用来处理任意维度数组与矩阵，通常对于相同的计算任务，使用 NumPy 要比直接使用 Python 基本数据结构要简单、高效的多。安装使用 pip install numpy 命令即可。 2. 使用 2.1 ndarray ndarray 即 n 维数数组类型，它是一个相同数据类型...

Posted by Python小二 on 2020-01-02

Python 分析电影《南方车站的聚会》

《南方车站的聚会》由刁亦男执导，主要演员包括：胡歌、桂纶镁、廖凡、万茜等，该片于 2019 年 5 月 18 在戛纳电影节首映，2019 年 12 月 6 日在中国正式上映。故事灵感来自真实新闻事件，主要讲述盗窃团伙头目周泽农（胡歌饰），在重金悬赏下走上逃亡之路，艰难寻求自我救赎的故事。影片上映了一周多，票房接近 2 亿，作为一部文艺片，这个表现应该算是属于中上水平了。下面打开豆瓣看...

Posted by Python小二 on 2019-12-15

Python 爬虫（七）：pyspider 使用

1 简介 pyspider 是一个支持任务监控、项目管理、多种数据库，具有 WebUI 的爬虫框架，它采用 Python 语言编写，分布式架构。详细特性如下：拥有 Web 脚本编辑界面，任务监控器，项目管理器和结构查看器；数据库支持 MySQL、MongoDB、Redis、SQLite、Elasticsearch、PostgreSQL、SQLAlc...

Posted by Python小二 on 2019-12-14

Python 爬虫（六）：使用 Scrapy 爬取去哪儿网景区信息

Scrapy 是一个使用 Python 语言开发，为了爬取网站数据，提取结构性数据而编写的应用框架，它用途广泛，比如：数据挖掘、监测和自动化测试。安装使用终端命令 pip install Scrapy 即可。 Scrapy 比较吸引人的地方是：我们可以根据需求对其进行修改，它提供了多种类型的爬虫基类，如：BaseSpider、sitemap 爬虫等，新版本提供了对 web2.0 爬虫的支持...

Posted by Python小二 on 2019-12-11

Python 爬虫（五）：PyQuery 框架

PyQuery 是仿照 jQuery 实现的，语法与 jQuery 几乎完全相同，如果你熟悉 jQuery，又不想再记一套 BeautifulSoup （Python 爬虫（三）：BeautifulSoup 库）的调用方法，那么 PyQuery 是一个很好的选择。 1 准备工作 1.1 安装使用如下终端命令安装 pip install pyquery 安装完成后导包 from...

Posted by Python小二 on 2019-12-08

Python 爬虫（四）：Selenium 框架

Selenium 是一个用于测试 Web 应用程序的框架，该框架测试直接在浏览器中运行，就像真实用户操作一样。它支持多种平台：Windows、Linux、Mac，支持多种语言：Python、Perl、PHP、C# 等，支持多种浏览器：Chrome、IE、Firefox、Safari 等。 1 安装 1）安装 Selenium pip install selenium 2）安装 Web...

Posted by Python小二 on 2019-12-06

Python 爬虫（三）：BeautifulSoup 库

BeautifulSoup 是一个可以从 HTML 或 XML 文件中提取数据的 Python 库，它能够将 HTML 或 XML 转化为可定位的树形结构，并提供了导航、查找、修改功能，它会自动将输入文档转换为 Unicode 编码，输出文档转换为 UTF-8 编码。 BeautifulSoup 支持 Python 标准库中的 HTML 解析器和一些第三方的解析器，默认使用 Python ...

Posted by Python小二 on 2019-12-05