本来以为使用Python安装MySQL是件容易的事,但是发现,不管怎样每次安装编译都不通过。强大的pip install mysql-python 不再管用。报错内容为: Traceback (most recent call last): File "setup.py", line 15, in <module> metadata, options = get_config() File "D:\MySQL-pyt
由于公司目前使用的都是MS SQL Server 2008,由于一些特殊需要,要使用python来解决一些简单繁琐的SQL查询,Python本身是不支持连接MSSQL的,需要特殊的组件才行。网上找了一个pymssql的扩展,据说很好。安装这个组件花了我好长时间。下面就来看看他的安装过程
这个程序的功能非常的简单,就是每天在系统中新建一个文件夹。文件夹即当前的时间。此代码是在同事那边看到的,为了锻炼下自己薄弱的Python能力,所以花时间重新写了一个。具体代码如下: import time,os basePath = 'F:\\work\\' thisYear = str(time.localtim
对于SQLite来说,目前查看还是比较麻烦,所以就像把SQLite中的数据直接转成Excel中能查看的数据,这样也好在Excel中做进一步分数据处理或分析,如上篇文章中介绍的IP抓取的IP数据。从网上找到了一个将SQLite转成CVS的方法,贴在博客里,供需要的朋友使用: i
数据分析,特别是网站分析中需要对访问者的IP进行分析,分析IP中主要是区分来访者的省份+城市+行政区数据,考虑到目前纯真IP数据库并没有把这些数据做很好的区分,于是寻找了另外一个可行的方案(当然不是花钱买哈)。解决方案就是抓取新浪的IP数据
在给网站布置统计代码后,往往需要检查开发人员布置的代码是否到位,采用人力的方式去检查很费时间,于是自己整了一个Python自动检查代码的小程序,现拿出来分享下。 # -*- coding: utf-8 -*- __author__ = 'www.biaodianfu.com' import urllib2 ,gzip, StringIO, re code = "_gaq.
一、Redis的介绍 Redis是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。 作为Key-value型数据库,Redis也提供了键(Key)和键值(Value)的映射关系。但是,除了常规的数值或字符串,Redis的
先前已经有一篇关于Scrapy的介绍了(Scrapy的架构),今天这篇文章是将怎么在Windows上安装Scrapy。 在安装Scrapy前首先需要确定的是已经安装好了Python(目前Scrapy支持Python2.5,Python2.6和Python2.7)。官方文档中介绍了三种方法进行安装,我采用的是使用 easy_instal
《learn python the hard way》是一本非常好的Python入门书籍,这是一本需要你一步一步去敲代码去学习的书。 《learn python the hard way》地址:http://learnpythonthehardway.org/book/ 在学习Python之前首先是安装Python运行环境,这里使用的Windows平台,以下为安装步骤:
最近在学Python,同时也在学如何使用python抓取数据,于是就被我发现了这个非常受欢迎的Python抓取框架Scrapy,下面一起学习下Scrapy的架构,便于更好的使用这个工具。 一、概述 下图显示了Scrapy的大体架构,其中包含了它的主要组件及系统的数据处理流程