python-编写hadoop程序
1,先安装好hadoop集群2,编写python的map程序mapper.py#!/usr/bin/env python#import sys # input comes from STDIN (standard input) for line in sys.stdin: &n...
python 升级
在centos-5.4下升级python在centos-5.4下自带的python是2.4的,需要升级一下:tar jfvx Python-2.7.tar.bz2./configuremake allmake installmake cleanmake distclean查看安装的版本信息/usr/local/bin/py...
数据挖掘1-基本概念
数据预处理1,什么是数据预处理数据的迅速膨胀导致很多无用的、错误的数据,所以需要对数据进行预处理。2,数据预处理的步骤2.1 数据清洗数据清洗通过填补遗漏数据、消除异常数据、平滑噪声数据,以及纠正不一...
redis基础(2)-类型及操作
redis的类型和操作1,string 类型string是最简单的类型,它是二进制安全的,也就是说redis的string可以包含任何数据,比如jpg图片或者序列化的对象。从内部实现来看其实string可以看作byte数组,最大上限是1G字节。...
redis基础(1)-安装配置
redis基础-安装配置1,关于redis.排行榜应用,取TOP N操作 这个需求与上面需求的不同之处在于,前面操作以时间为权重,这个是以某个条件为权重,比如按顶的次数排序,这时候就需要我们的sorted set出马了,将你要排...
高级集合
高级集合(collection)1,固定集合.固定集合进行插入时速度极快,因为插入时无需分配内存。.固定集合是一个环形队列,新数据插入时自动淘汰旧的数据。.固定集合在使用前显示的创建1.1 创建固定集合#创建一个大小...
mongodb基础-集合(collection)操作
集合的操作1,基本操作.查看集合中的文档数> db.blog.count()9.可以在查询中添加单个或多个条件> db.blog.count({"age":20}) //age为20的文档数3> db.blog.count({"name":"testmongo","age":20}) //多个...
mongodb基础-索引
mongodb的索引1, 基本概念索引就是用来加速查询的。有了索引就不需要再遍历整个集合,而是根据索引项直接跳转到文档位置。.建立索引的基本方法是使用:ensureIndex函数,语法和sort函数相同:db.p.ensureIndex({...
mongdb基础-查询操作
mongodb基础-查询1, find 用法.查询就是返回一个集合中的文档的子集.查询的一般操作是使用find,若没有向find传递参数,默认的是显示所有文档db.blog.find(){ "_id" : ObjectId("4f6e766e811cca6e90f0dab5"), "...
mongodb基础-文档操作1-创建、更新、删除
mongodb基础-文档操作1-创建、更新、删除1,插入操作#插入操作的基本语法>db.blog.insert({'hello": "world"})#插入多个文档插入多个文档,使用批量插入会快一些。批量插入能传递一个由文档组成的数组给数据库...
mongodb 学习笔记-概念
mongodb 学习笔记-概念 1,mongodb中的文档(document).文档是mongodb的核心概念,多个键及其关联的值有序的放置在一起就是文档。例如:文档1:{"name1": "test", "age": 80, "address": "bj"}文档2:{"name1": "te...