编程那点事编程那点事

专注编程入门及提高
探究程序员职业规划之道!

大数据

【超人】多用户分销评团商城系统 商业B无限开v7.1.5~v7.1.6更新日志
待修改

【超人】多用户分销评团商城系统 商业B无限开v7.1.5~v7.1.6更新日志

阅读(71)

更多【超人】多用户分销评团商城系统内容,请参考:【超人】多用户分销评团商城系统【超人】多用户分销评团商城系统 商业B无限开v7.1.5主要做了以下更新:【2019年4月10日 【超人】商城 商业版-7.1.5更新】 新增商品不发货区域; 新增分销中心可提现佣金显示按钮; 新增导出商品链接; 修复部分用户商城后台样式失效; 注意: 本次【不需要】...

【超人】多用户分销评团商城系统 商业B无限开v7.1.7~v7.1.8更新日志
待修改

【超人】多用户分销评团商城系统 商业B无限开v7.1.7~v7.1.8更新日志

阅读(66)

更多【超人】多用户分销评团商城系统内容,请参考:【超人】多用户分销评团商城系统【超人】多用户分销评团商城系统 商业B无限开v7.1.7主要做了以下更新:【2019年4月12日 【超人】商城 商业版-7.1.7更新】 修复商品海报商品单位显示错误; 修复限时打折时间设置失效; 优化手机端核销到期后核销码显示; 优化商城后台首页数字显示; 注意: ...

【超人】多用户分销评团商城系统 商业B无限开v7.1.12~v7.1.13更新日志
待修改

【超人】多用户分销评团商城系统 商业B无限开v7.1.12~v7.1.13更新日志

阅读(64)

更多【超人】多用户分销评团商城系统内容,请参考:【超人】多用户分销评团商城系统【超人】多用户分销评团商城系统 商业B无限开v7.1.12主要做了以下更新:【2019年4月19日 【超人】商城 商业版-7.1.12更新】 新增商户设置收款码成功后跳转链接; 修复多种状态下砍价订单无法导出问题; 修复收银台部分积分抵扣全额问题; 注意: 本次【不需要...

【超人】多用户分销评团商城系统 商业B无限开v7.2.0~v7.2.1更新日志
待修改

【超人】多用户分销评团商城系统 商业B无限开v7.2.0~v7.2.1更新日志

阅读(69)

更多【超人】多用户分销评团商城系统内容,请参考:【超人】多用户分销评团商城系统【超人】多用户分销评团商城系统 商业B无限开v7.2.0主要做了以下更新:【2019年4月23日 【超人】商城 商业版-7.2.0更新】 新增文章动态应用【增值应用】; 新增代客下单余额支付是否赠送积分; 新增收款码是否显示余额支付开关; 注意: 本次【不需要】更新小...

【超人】多用户分销评团商城系统 商业B无限开v7.2.2~v7.2.3更新日志
待修改

【超人】多用户分销评团商城系统 商业B无限开v7.2.2~v7.2.3更新日志

阅读(70)

更多【超人】多用户分销评团商城系统内容,请参考:【超人】多用户分销评团商城系统【超人】多用户分销评团商城系统 商业B无限开v7.2.2主要做了以下更新:【2019年4月25日 【超人】商城 商业版-7.2.2更新】 新增店铺装修底部导航、导航图标支持小程序跳转 修复分销小店不存在问题; 优化手机端文章样式; 优化文章动态应用图标; 注意: 本次...

【超人】多用户分销评团商城系统 商业B无限开v7.2.4~v7.2.5更新日志
待修改

【超人】多用户分销评团商城系统 商业B无限开v7.2.4~v7.2.5更新日志

阅读(59)

更多【超人】多用户分销评团商城系统内容,请参考:【超人】多用户分销评团商城系统【超人】多用户分销评团商城系统 商业B无限开v7.2.4主要做了以下更新:【2019年4月28日 【超人】商城 商业版-7.2.4更新】 新增快递鸟物流查询; 新增代客下单打印小票显示积分; 优化代客下单页面展示; 注意: 本次【不需要】更新小程序前端;【超人】多用户...

【超人】多用户分销评团商城系统 商业B无限开v7.2.6~v7.2.7更新日志
待修改

【超人】多用户分销评团商城系统 商业B无限开v7.2.6~v7.2.7更新日志

阅读(65)

更多【超人】多用户分销评团商城系统内容,请参考:【超人】多用户分销评团商城系统【超人】多用户分销评团商城系统 商业B无限开v7.2.6主要做了以下更新:【2019年4月30日 【超人】商城 商业版-7.2.6更新】 新增文章动态浏览量; 新增手机端订单详情页发货状态提示文字自定义; 新增商户后台收银台收款流水; 注意: 本次【不需要】更新小程序...

【超人】多用户分销评团商城系统 商业B无限开v7.2.8~v7.2.9更新日志
待修改

【超人】多用户分销评团商城系统 商业B无限开v7.2.8~v7.2.9更新日志

阅读(72)

更多【超人】多用户分销评团商城系统内容,请参考:【超人】多用户分销评团商城系统【超人】多用户分销评团商城系统 商业B无限开v7.2.8主要做了以下更新:【2019年5月6日 【超人】商城 商业版-7.2.8更新】 新增收款流水导出商户回收积分; 优化分销中心部分用户数据显示; 注意: 本次【不需要】更新小程序前端;【超人】多用户分销评团商城系...

【超人】多用户分销评团商城系统 商业B无限开v7.2.10~v7.2.12更新日志
待修改

【超人】多用户分销评团商城系统 商业B无限开v7.2.10~v7.2.12更新日志

阅读(80)

更多【超人】多用户分销评团商城系统内容,请参考:【超人】多用户分销评团商城系统【超人】多用户分销评团商城系统 商业B无限开v7.2.10主要做了以下更新:【2019年5月8日 【超人】商城 商业版-7.2.10更新】 新增分销佣金策略选择; 修复采集天猫商品详情图异常问题; 注意: 本次【不需要】更新小程序前端;【超人】多用户分销评团商城系统 ...

【超人】多用户分销评团商城系统 商业B无限开v7.2.13~v7.2.15更新日志
待修改

【超人】多用户分销评团商城系统 商业B无限开v7.2.13~v7.2.15更新日志

阅读(76)

更多【超人】多用户分销评团商城系统内容,请参考:【超人】多用户分销评团商城系统【超人】多用户分销评团商城系统 商业B无限开v7.2.13主要做了以下更新:【2019年5月14日 【超人】商城 商业版-7.2.13更新】 新增推广短信模板变量支持; 注意: 本次【不需要】更新小程序前端;【超人】多用户分销评团商城系统 商业B无限开v7.2.14主要做了以...

易用性:标准化SQL支持以及更合理的API
大数据

易用性:标准化SQL支持以及更合理的API

阅读(1804)

标准化SQL支持以及更合理的APISpark最引以为豪的几个特点就是简单、直观、表达性好。Spark 2.0为了继续加强这几个特点,做了两件事情:1、提供标准化的SQL支持;2、统一了Dataframe和Dataset两套API。在标准化SQL支持方面,引入了新的ANSI-SQL解析器,提供标准化SQL的解析功能,而且还提供了子查询的支持。Spark现在可以运行完整的99个TPC-DS...

Hadoop集群搭建
大数据

Hadoop集群搭建

阅读(1592)

Hadoop集群搭建安装hadoop下载hadoop将下载的hadoop包解压缩到/usr/local文件夹下配置hadoop环境变量配置hadoopcd hadoop/etc/hadoop/修改core-site.xml<property>   <name>fs.default.name</name>   <value>hdfs://spark1:9000</value> </property>修改hdfs-site.xml<pr...

CentOS集群搭建
大数据

CentOS集群搭建

阅读(2189)

CentOS设置163的yum源的过程cd /etc/yum.repos.d/ rm -rf * cp /usr/local/CentOS6-Base-163.repo . # 自己的repo文件移动到/etc/yum.repos.d/目录中:cp /usr/local/CentOS6-Base-163.repo . # 修改repo文件,把所有gpgcheck属性修改为0 # 2、配置yum yum clean all ...

与Spark Core整合之每日top3热点搜索词统计案例实战
大数据

与Spark Core整合之每日top3热点搜索词统计案例实战

阅读(2136)

案例需求数据格式:日期 用户 搜索词 城市 平台 版本需求:筛选出符合查询条件(城市、平台、版本)的数据统计出每天搜索uv排名前3的搜索词按照每天的top3搜索词的uv搜索总次数,倒序排序将数据保存到hive表中实现思路分析针对原始数据(HDFS文件),获取输入的RDD使用filter算子,去针对输入RDD中的数据,进行数据过滤,过滤出符合查询条件的...

Hive On Spark使用
大数据

Hive On Spark使用

阅读(2475)

create table students(name string, age int); load data local inpath '/usr/local/spark-study/resources/students.txt' into table students;使用Hive On Spark非常简单只要用set hive.execution.engine命令设置Hive的执行引擎为spark即可默认是mrset hive.ex...

Hive On Spark环境搭建
大数据

Hive On Spark环境搭建

阅读(2588)

下载hive解压到/usr/loca/进入conf目录,mv hive-default.xml.template hive-site.xml,修改hive-site.xml<property>   <name>javax.jdo.option.ConnectionURL</name>   <value>jdbc:mysql://spark1:3306/hive_metadata_2?createDatabaseIfNotExist=true</value> </property> &l...

HiveOnSpark背景
大数据

HiveOnSpark背景

阅读(2162)

Hive是目前大数据领域,事实上的SQL标准。其底层默认是基于MapReduce实现的,但是由于MapReduce速度实在比较慢,因此这两年,陆续出来了新的SQL查询引擎。包括Spark SQL,Hive On Tez,Hive On Spark等。Spark SQL与Hive On Spark是不一样的。Spark SQL是Spark自己研发出来的针对各种数据源,包括Hive、JSON、Parquet、JDBC、RDD等都可以执行...

SparkSQL工作原理剖析
大数据

SparkSQL工作原理剖析

阅读(1890)

工作原理SqlParseAnalyserOptimizerSparkPlan性能优化设置Shuffle过程中的并行度:spark.sql.shuffle.partitions(SQLContext.setConf())在Hive数据仓库建设过程中,合理设置数据类型,比如能设置为INT的,就不要设置为BIGINT。减少数据类型导致的不必要的内存开销。编写SQL时,尽量给出明确的列名,比如select name from students。不要写se...

UDF自定义函数和UDAF自定义聚合函数
大数据

UDF自定义函数和UDAF自定义聚合函数

阅读(2671)

UDF用户自定义函数。Scala版本实例package cn.spark.study.sql import org.apache.spark.SparkConf import org.apache.spark.SparkContext import org.apache.spark.sql.SQLContext import org.apache.spark.sql.Row import org.apache.spark.sql.types.StructType import org.apache.spark.sql.typ...

内置函数
大数据

内置函数

阅读(2410)

Spark 1.5.x版本引入的内置函数在Spark 1.5.x版本,增加了一系列内置函数到DataFrame API中,并且实现了code-generation的优化。与普通的函数不同,DataFrame的函数并不会执行后立即返回一个结果值,而是返回一个Column对象,用于在并行作业中进行求值。Column可以用在DataFrame的操作之中,比如select,filter,groupBy等。函数的输入值,也...