test import math print(math.PI) a = dict() b = dict() c = [1,2,3] a[1] = c b[1] = c d = a.get(1) d.append(9) print(a) print(b) print(c) print(d)
ETL算法
Hive 抽取数据时的存储方式。 在 MySQL 中的表结构 CREATE TABLE `product` ( `product_id` int(11) NOT NULL COMMENT '商品ID', `product_type` int(11) NOT NULL COMMENT '商品类型', `product_name` varchar(1000) NOT NULL C...
常用shell
判断目录/文件是否存在 -e filename 如果 filename存在,则为真 -d filename 如果 filename为目录,则为真 -f filename 如果 filename为常规文件,则为真 -L filename 如果 filename为符号链接,则为真 -r filename 如果 filename可读,则为真 -w filename 如果 filename可...
MongoDB使用指南
MongoDB 的基本操作指南。 命令行连接 MongoDB 连接 MongoDB mongo localhost:27017/test -u mongo -p mongo 查看数据库 show dbs; 新建数据库 use mongo; 新建表 db.createCollection("mongo_test") show collections 插入数据 db...
hql总结
[LanguageManual] DDL LanguageManual DDL 对 Hive Data Definition Language 操作进行了详细的说明,本文只选择比较常见的操作来介绍。 库操作 创建库 CREATE (DATABASE|SCHEMA) [IF NOT EXISTS] database_name [COMMENT database_comment] ...
Jd
java scala python hadoop hive spark kafka flink strom
三月七日有感
长大了突然发现,现在的自己已经不从前那个想着长大的自己了。 怎样找回原来的那个自己 之前都是闲好长时间了,家长同意玩会儿游戏作为奖励 现在平时都是玩游戏啊看电视啊 然后玩累了就想着歇一会,还没多少时间歇着 想要做一个不一样的自己
数仓面试准备
最近感觉好长一段时间只是机械化重复的做着工作,自身没有什么太多的提高,有些基本的东西已经快忘了,所以现在整理一下知识体系,换一分新的工作,为之后的面试做好充足的准备。 数仓相关 基本概念 星型模型和雪花模型 星型模型:是由事实表和维度表共同组成,维度表均以事实表为中心呈放射状分布,它们通过数据库的主键和外键相互连接,整个图就像一个星星,故称之为星型模型。 ...
一些不错的blog
整理收藏一些个人博客,不断更新中! 大数据 过往记忆 lxw的大数据田地 CXY的大数据实践田 标点符 Taotao’ Zone wzy0623 SunWuKong_Hadoop 数据仓库 Wata Warehouse in ...