如何将hive表文本格式的源文件迁移至Oracle数据库或者excel文档中

2018-01-05

如何将hive表文本格式的源文件迁移至Oracle数据库或者excel文档中 需求描述:从hadoop的hdfs中下载某hive表文本文件，并将该文件数据迁移至Oracle表中。 思路剖析：首先，我们需要从hadoop服务器中 ...

SqlServer表和Excel文件数据相互复制方法

2018-01-02

SqlServer表和Excel文件数据相互复制方法 SqlServer数据表和Excel文件之间进行数据交互是很常见的，除了数据库自带的“导入数据”和“导出数据”功能可以实现两者之间的数据交互外，还可以直接通过复制的 ...

将Excel数据快速大批量导入数据库的代码

2018-01-01

将Excel数据快速大批量导入数据库的代码 两种途径将数据从EXCEL中导入到SQL SERVER。 一、在程序中，用ADO.NET。代码 如下： //连接串 string strConn = \"Provider=Microsoft.Jet.OLEDB.4.0;Extended P ...

关于大数据的处理的一些经验

2017-12-31

1.数据库的技术上，目前我们公司在研究hadoop分层数据库，具体了解不多；外面流行的NoSql非关系型数据库，像亚马逊、谷歌还有一些日本企业都有自己的NoSql数据库； 2.传统关系型数据库的优化，数 ...

在人工智能和大数据产品的开发中，有哪些需要特别注意的点

2017-12-23

在人工智能和大数据产品的开发中，有哪些需要特别注意的点 人工智能是近年来科技发展的重要方向，大数据的采集、挖掘、应用的技术越来越受到瞩目。在人工智能和大数据产品的开发过程中，有哪些特别需要注意的要 ...

mysql数据库海量数据优化方法总结

2017-12-20

mysql数据库海量数据优化方法总结 下面是一部分比较重要的建议： 1、选择正确的存储引擎 以 MySQL为例，包括有两个存储引擎 MyISAM 和 InnoDB，每个引擎都有利有弊。 MyISAM 适合于一些需要大量查询的应用，但 ...

Python实现基本线性数据结构

2017-11-29

Python实现基本线性数据结构 数组的设计 数组设计之初是在形式上依赖内存分配而成的，所以必须在使用前预先请求空间。这使得数组有以下特性：      1、请求空间以后大小固定，不能再改 ...

人们应该知道的大数据术语

2017-10-27

人们应该知道的大数据术语 大数据带来了许多新的术语,但一些术语往往不太好理解。以下是人们应该了解的大数据术语列表： 以下进行一个简短的回顾，以前曾经介绍了算法，分析，描述性分析，预处理分析，预 ...

【美林数据技术(杭州)有限公司】招聘数据分析师

2017-08-31

【美林数据技术(杭州)有限公司】招聘数据分析师 美林数据技术（杭州）有限公司，作为美林数据技术股份有限公司（证券代码：831546）旗下的全资子公司，依托美林数据在高端军工装备、智能电网等领域近二十年的大数据 ...

人工智能和大数据的开发过程中需要主意这12点

2017-08-12

人工智能和大数据的开发过程中需要主意这12点 人工智能是近年来科技发展的重要方向，在大数据时代，对数据采集、挖掘、应用的技术越来越受到瞩目。在人工智能和大数据的开发过程中，有哪些特别需要注意的要点？ ...

人工智能和大数据的开发过程中需要注意这12点

2017-07-18

人工智能和大数据的开发过程中需要注意这12点 　人工智能是近年来科技发展的重要方向，在大数据时代，对数据采集、挖掘、应用的技术越来越受到瞩目。在人工智能和大数据的开发过程中，有哪些特别需要注意的要点 ...

SQL Server数据库大型应用解决方案总结

2017-07-08

SQL Server数据库大型应用解决方案总结 一、负载均衡技术 负载均衡集群是由一组相互独立的计算机系统构成，通过常规网络或专用网络进行连接，由路由器衔接在一起，各节点相互协作、共同负载、均衡压力，对客 ...

SQL Server数据库的存储过程中定义的临时表，真的有必要显式删除（drop table #tableName）吗

2017-05-27

SQL Server数据库的存储过程中定义的临时表，真的有必要显式删除（drop table #tableName）吗 在写SQL Server存储过程中，如果存储过程中定义了临时表，有些人习惯在存储过程结束的时候一个一个显式地删除过程 ...

SQL语句优化技巧

2017-05-26

SQL语句优化技巧 1、应尽量避免在 where 子句中使用!=或<>操作符，否则将引擎放弃使用索引而进行全表扫描。 2、对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。 ...

SQL实例整理

2017-05-26

SQL实例整理 1、用一条SQL语句 查询出每门课都大于80 分的学生姓名。（表结构如下图） 答案可以有如下两种： select distinct student_name from table_test_one where student_name not in    (se ...

【广州市豪森威有限公司】招聘数据分析师

2017-05-16

【广州市豪森威有限公司】招聘数据分析师 豪森威公司，经政府认定为市场研究专业机构，被国务院收入《中国咨询研究机构大全》名录，成为全国市场研究行业协会的首批成员，并获得涉外调查许可证，2005年成为市场研究 ...

从底层到应用，那些数据人的必备技能

2017-04-13

从底层到应用，那些数据人的必备技能 谨以此文献给对数据有热情，想长期从事此行业的年轻人，希望对你们有所启发，并快速调整思路和方向，让自己的职业生涯有更好的发展。 根据数据应用的不同阶段，我将从数 ...

大数据分析你不能不懂的6个核心技术

2017-04-12

大数据分析你不能不懂的6个核心技术 目前，大数据领域每年都会涌现出大量新的技术，成为大数据获取、存储、处理分析或可视化的有效手段。大数据技术能够将大规模数据中隐藏的信息和知识挖掘出来，为人类社会经 ...

阿里 HBase 超详实践总结

2017-03-29

概述 HBase 是一个开源的非关系型分布式数据库（NoSQL）,基于谷歌的 BigTable 建模，是一个高可靠性、高性能、高伸缩的分布式存储系统，使用 HBase 技术可在廉价 PC Server 上搭建起大规模结构化 ...

企业间的较量！2017大数据的十个走向

2017-03-28

企业间的较量！2017大数据的十个走向 大数据发展已经成为未来科技发展的走向和必要的开端，预计2017年大数据十大新趋势走向将会迎来爆发式的数据增长。 1．大数据实现可视化服务 数据可视化技术让 ...