hive指定位置分割字符串_hive字符串拆分

导航：

• 1、hive怎么将字符型转为数值型
• 2、菜鸟求问，hive如何确定字符位置
• 3、如何让hive支持多字符分割列
• 4、hive如何把字符串分
• 5、hive regexp_extract 字符拆分中那些符号含义
• 6、字符串中怎么截取指定字符的前面的字符和后面的字符

hive怎么将字符型转为数值型

hive字符串函数

1. 字符串长度函数：length

语法: length(string A)

返回值: int

说明：返回字符串A的长度

举例：

hive select length('abcedfg') from lxw_dual;

7

2. 字符串反转函数：reverse

语法: reverse(string A)

返回值: string

说明：返回字符串A的反转结果

举例：

hive select reverse(abcedfg') from lxw_dual;

gfdecba

3. 字符串连接函数：concat

语法: concat(string A, string B…)

返回值: string

说明：返回输入字符串连接后的结果，支持任意个输入字符串

举例：

hive select concat('abc','def','gh') from lxw_dual;

abcdefgh

4. 带分隔符字符串连接函数：concat_ws

语法: concat_ws(string SEP, string A, string B…)

返回值: string

说明：返回输入字符串连接后的结果，SEP表示各个字符串间的分隔符

举例：

hive select concat_ws(',','abc','def','gh') from lxw_dual;

abc,def,gh

5. 字符串截取函数：substr,substring

语法: substr(string A, int start),substring(string A, int start)

返回值: string

说明：返回字符串A从start位置到结尾的字符串

举例：

hive select substr('abcde',3) from lxw_dual;

cde

hive select substring('abcde',3) from lxw_dual;

cde

hive selectsubstr('abcde',-1) from lxw_dual; （和ORACLE相同）

e

6. 字符串截取函数：substr,substring

语法: substr(string A, int start, int len),substring(string A, intstart, int len)

返回值: string

说明：返回字符串A从start位置开始，长度为len的字符串

举例：

hive select substr('abcde',3,2) from lxw_dual;

cd

hive select substring('abcde',3,2) from lxw_dual;

cd

hiveselect substring('abcde',-2,2) from lxw_dual;

de

7. 字符串转大写函数：upper,ucase

语法: upper(string A) ucase(string A)

返回值: string

说明：返回字符串A的大写格式

举例：

hive select upper('abSEd') from lxw_dual;

ABSED

hive select ucase('abSEd') from lxw_dual;

ABSED

8. 字符串转小写函数：lower,lcase

语法: lower(string A) lcase(string A)

返回值: string

说明：返回字符串A的小写格式

举例：

hive select lower('abSEd') from lxw_dual;

absed

hive select lcase('abSEd') from lxw_dual;

absed

9. 去空格函数：trim

语法: trim(string A)

返回值: string

说明：去除字符串两边的空格

举例：

hive select trim(' abc ') from lxw_dual;

abc

10. 左边去空格函数：ltrim

语法: ltrim(string A)

返回值: string

说明：去除字符串左边的空格

举例：

hive select ltrim(' abc ') from lxw_dual;

abc

11. 右边去空格函数：rtrim

语法: rtrim(string A)

返回值: string

说明：去除字符串右边的空格

举例：

hive select rtrim(' abc ') from lxw_dual;

abc

12. 正则表达式替换函数：regexp_replace

语法: regexp_replace(string A, string B, string C)

返回值: string

说明：将字符串A中的符合java正则表达式B的部分替换为C。注意，在有些情况下要使用转义字符,类似oracle中的regexp_replace函数。

举例：

hive select regexp_replace('foobar', 'oo|ar', '') from lxw_dual;

fb

13. 正则表达式解析函数：regexp_extract

语法: regexp_extract(string subject, string pattern, int index)

返回值: string

说明：将字符串subject按照pattern正则表达式的规则拆分，返回index指定的字符。

举例：

hive select regexp_extract('foothebar', 'foo(.*?)(bar)', 1) fromlxw_dual;

the

hive select regexp_extract('foothebar', 'foo(.*?)(bar)', 2) fromlxw_dual;

bar

hive select regexp_extract('foothebar', 'foo(.*?)(bar)', 0) fromlxw_dual;

foothebar

注意，在有些情况下要使用转义字符，下面的等号要用双竖线转义，这是java正则表达式的规则。

select data_field,

regexp_extract(data_field,'.*?bgStart\\=([^]+)',1) as aaa,

regexp_extract(data_field,'.*?contentLoaded_headStart\\=([^]+)',1) as bbb,

regexp_extract(data_field,'.*?AppLoad2Req\\=([^]+)',1) as ccc

from pt_nginx_loginlog_st

where pt = '2012-03-26'limit 2;

14. URL解析函数：parse_url

语法: parse_url(string urlString, string partToExtract [, stringkeyToExtract])

返回值: string

说明：返回URL中指定的部分。partToExtract的有效值为：HOST, PATH, QUERY, REF, PROTOCOL, AUTHORITY, FILE, and USERINFO.

举例：

hive selectparse_url(';k2=v2#Ref1', 'HOST') fromlxw_dual;

facebook.com

hive selectparse_url(';k2=v2#Ref1', 'QUERY','k1') from lxw_dual;

v1

15. json解析函数：get_json_object

语法: get_json_object(string json_string, string path)

返回值: string

说明：解析json的字符串json_string,返回path指定的内容。如果输入的json字符串无效，那么返回NULL。

举例：

hive select get_json_object('{"store":

{"fruit":\[{"weight":8,"type":"apple"},{"weight":9,"type":"pear"}],

"bicycle":{"price":19.95,"color":"red"}

},

"email":"amy@only_for_json_udf_test.net",

"owner":"amy"

}

','$.owner') from lxw_dual;

amy

16. 空格字符串函数：space

语法: space(int n)

返回值: string

说明：返回长度为n的字符串

举例：

hive select space(10) from lxw_dual;

hive select length(space(10)) from lxw_dual;

10

17. 重复字符串函数：repeat

语法: repeat(string str, int n)

返回值: string

说明：返回重复n次后的str字符串

举例：

hive select repeat('abc',5) from lxw_dual;

abcabcabcabcabc

18. 首字符ascii函数：ascii

语法: ascii(string str)

返回值: int

说明：返回字符串str第一个字符的ascii码

举例：

hive select ascii('abcde') from lxw_dual;

97

19. 左补足函数：lpad

语法: lpad(string str, int len, string pad)

返回值: string

说明：将str进行用pad进行左补足到len位

举例：

hive select lpad('abc',10,'td') from lxw_dual;

tdtdtdtabc

注意：与GP，ORACLE不同，pad 不能默认

20. 右补足函数：rpad

语法: rpad(string str, int len, string pad)

返回值: string

说明：将str进行用pad进行右补足到len位

举例：

hive select rpad('abc',10,'td') from lxw_dual;

abctdtdtdt

21. 分割字符串函数: split

语法: split(string str, stringpat)

返回值: array

说明: 按照pat字符串分割str，会返回分割后的字符串数组

举例：

hive select split('abtcdtef','t') from lxw_dual;

["ab","cd","ef"]

22. 集合查找函数:find_in_set

语法: find_in_set(string str, string strList)

返回值: int

说明: 返回str在strlist第一次出现的位置，strlist是用逗号分割的字符串。如果没有找该str字符，则返回0

举例：

hive select find_in_set('ab','ef,ab,de') from lxw_dual;

2

hive select find_in_set('at','ef,ab,de') from lxw_dual;

菜鸟求问，hive如何确定字符位置

方法一：利用编辑器直接插入控制字符，以Vi为例。进入Vi：Shell代码收藏代码$visupply-20110101.txt在Vi命令模式下，键入:setlist，设置控制字符可见，成功后Vi会立即显示一个行结束标志$。填入Hive表中需要的每列数据

如何让hive支持多字符分割列

可以在hive建表语句中，使用built-in的 org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe类， 来使你的表支持多字符分割列。

Hive测试版本为：hive-1.1.0-cdh5.7.1，其他版本需自行测试

drop table test;

create external table test (c1 string, c2 string,c3 string)

row format SERDE'org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe'

with serdeproperties(

"field.delim"="^|~"

)

location '/user/hive/warehouse/test;

load data local inpath '/home/david/test/test_hive_data/multichar_separator_raw.txt' into table test;

select * from test;

hive如何把字符串分

hive字符串函数 1. 字符串长度函数：length 语法: length(string A) 返回值: int 说明：返回字符串A的长度 举例： hive select length('abcedfg') from lxw_dual; 7 2. 字符串反转函数：reverse 语法: reverse(string A) 返回值: string

hive regexp_extract 字符拆分中那些符号含义

case

--处理非科学计数法表示的字符串

when length(regexp_extract('字符串','([0-9]+\\.)([0-9]+)(E-*[0-9]+)',2))=0

then '字符串'

--处理整数

when length(regexp_extract('字符串','([0-9]+\\.)([0-9]+)(E[0-9]+)',2))=cast(regexp_extract('字符串','(E)([0-9]+)',2) as int)

then rpad(regexp_replace(regexp_extract('字符串','([^E]+)',1),'\\.',''),cast(regexp_extract('字符串','(E)([0-9]+)',2) as int)+1,'0')

--处理小数

字符串中怎么截取指定字符的前面的字符和后面的字符

String s = "afhakhfakshfka_key_adasfasfa" 目标字符串，KEY就用"key"

int index = s.indexOf("key") 获取出现key字符串的第一度个知位置，这里要保证前面没有跟KEY重复

String left = s.substring(index) 截取KEY出现位道置前面的字回符串

String right = s.sbustring(index+3) 后面的字符串， +3 是key的长度答为3 (KEY的值长度)

String[] strs = str.split(Pattern.quote("指定的字符"));

var str = 'abcd';

str.substr(0, str.indexOf('b') + 1);

"ab"

var str = 'abcd';

str.substr(str.indexOf('b') + 1);

"cd"

扩展资料：

字符串或串(String)是由数字、字母、下划线组成的一串字符。一般记为 s=“a1a2···an”(n=0)。它是编程语言中表示文本的数据类型。在程序设计中，字符串（string）为符号或数值的一个连续序列，如符号串（一串字符）或二进制数字串（一串二进制数字）。

通常以串的整体作为操作对象，如：在串中查找某个子串、求取一个子串、在串的某个位置上插入一个子串以及删除一个子串等。两个字符串相等的充要条件是：长度相等，并且各个对应位置上的字符都相等。设p、q是两个串，求q在p中首次出现的位置的运算叫做模式匹配。串的两种最基本的存储方式是顺序存储方式和链接存储方式。

参考资料来源:百度百科-字符串

标签：hive指定位置分割字符串