Python
Java
PHP
IOS
Android
Nodejs
JavaScript
Html5
Windows
Ubuntu
Linux
在整行上使用 udf 过滤 Pyspark Dataframe
有没有办法选择整行作为列输入到 Pyspark 过滤器 udf 中 我有一个复杂的过滤函数 my filter 我想将其应用于整个 DataFrame my filter udf udf lambda r my filter r Boole
PySpark
apachesparksql
userdefinedfunctions
如何在 BigQuery UDF 主体内声明变量?
我试图在 BigQuery 上创建一个带有 while 循环的 UDF 函数 但我在文档中没有看到任何专门解决这种情况的语法指南 也没有解决 UDF 正文中变量的声明 上下文 我正在尝试构建一个函数来将标题大小写应用于字符串 I tried
googlebigquery
userdefinedfunctions
如何生成 pandas 数据框行以触发数据框
嗨 我正在转型 我已经创建了some function iter 发电机至yield Row id index api row api A row A B row B 生成从 pandas 数据帧到 rdd 和 Spark 数据帧的转换行
pandas
apachespark
PySpark
apachesparksql
userdefinedfunctions
表值函数和实体框架
我正在尝试使用实体框架执行 TVF 但由于某种原因它不起作用 也许那里的任何人都可以帮助我解决这个问题 以下是代码示例 这就是函数 CREATE FUNCTION dbo udf profileSearch keywords NVARCHA
c
LINQ
EntityFramework
efcodefirst
userdefinedfunctions
如何在 SQL Server Management Studio 中测试表值函数?
我从未使用过数据库函数 但我当前的项目需要它 我需要将一个常见的 sql 查询放入一个函数中 这样我们就不必在代码中输入数百次 我已经创建了该功能 但我不知道如何使用它 这是函数代码 USE DB NAME GO SET ANSI NULL
sql
sqlserver
userdefinedfunctions
无法将登录页面重定向到安全页面
我有一个使用 php 创建的登录页面 但在正确登录后无法将其带到管理页面 我知道我使用的登录名是正确的 因为我刚刚创建了它 如果它是错误的 它应该告诉我 然而 一旦我登录 整个页面就变成空白 网址显示我仍在登录页面而不是管理页面 我检查了错
php
function
redirect
authentication
userdefinedfunctions
解析 pyspark 中数组的每个元素并应用子字符串
您好 我有一个 pyspark 数据框 其数组 col 如下所示 我想迭代每个元素并仅获取连字符之前的字符串并创建另一列 array col hello 123 abc 111 hello 234 def 22 xyz 33 hiiii 1
PySpark
userdefinedfunctions
如何从 Pyspark 中的日期列中减去天数列?
给定以下 PySpark DataFrame df sqlContext createDataFrame 2015 01 15 10 2015 02 15 5 date col days col 如何从日期列中减去天数列 在此示例中 结果列
python
apachespark
PySpark
apachesparksql
userdefinedfunctions
如何使用 Spark UDF 返回复杂类型
您好 提前谢谢您 我的程序是用java编写的 我无法转移到scala 我目前正在使用以下行处理从 json 文件中提取的 Spark DataFrame DataFrame dff sqlContext read json filePath
Java
json
apachespark
userdefinedfunctions
UDF
将十六进制 varbinary 转换为其字符串表示形式?
我在 SQL Server 数据库中有一些 base 64 编码的字符串 例如 DECLARE x VARBINARY 64 SET x 0x4b78374c6a3733514f723444444d35793665362f6c513d3d
sqlserver
Binary
Hex
typeconversion
userdefinedfunctions
PIG UDF 处理多行元组拆分为不同的映射器
我有一个文件 其中每个元组跨越多行 例如 START name Jim phone 2128789283 address 56 2nd street New York USA END START name Tom phone 6308789
Hadoop
amazonwebservices
MapReduce
userdefinedfunctions
apachepig
SQL Server 2008:多语句UDF可以返回UDT吗? [复制]
这个问题在这里已经有答案了 多语句 UDF 是否有可能返回用户定义的表类型 而不是在其返回参数中定义的表 所以而不是 CREATE FUNCTION MyFunc p1 int p2 char RETURNS SomeVar TABLE c
sqlserver
TSQL
sqlserver2008
userdefinedfunctions
userdefinedtypes
从单个 Hive UDF 创建多个列
我正在使用 Amazon EMR 和 Hive 0 11 我正在尝试创建一个 Hive UDF 它将从一个 UDF 调用返回多个列 例如 我想调用如下所示的 UDF 并返回几个 命名的 列 SELECT get data columnnam
Java
Hadoop
hive
userdefinedfunctions
如何获取hive UDF中的taskID或mapperID(类似于Spark中的partitionID)?
作为问题 如何在 hive UDF 中获取任务 ID 或映射器 ID 类似于 Spark 中的分区 ID 您可以使用 TaskContext 访问任务信息 import org apache spark TaskContext sc par
apachespark
hive
apachesparksql
MapReduce
userdefinedfunctions
使用带有正则表达式的字典(Scala?)的 PySpark UDF 优化挑战
我正在尝试优化下面的代码 PySpark UDF 它为我提供了所需的结果 基于我的数据集 但在非常大的数据集 大约 180M 上速度太慢 结果 准确度 优于可用的 Python 模块 例如 geotext hdx python countr
python3x
regex
scala
PySpark
userdefinedfunctions
pandas udf showString 简单示例错误
我开始在使用此 身份 pandas udf 在 EMR 集群上运行的 Pyspark Jupyter 笔记本上使用 pandas udf 并且收到以下错误 pandas udf df schema PandasUDFType GROUPED
PySpark
jupyter
userdefinedfunctions
amazonemr
PLpgSQL 函数查找给定表中仅包含 NULL 值的列
我们必须找到只有 NULL 值的表的列 我们正在尝试构建一个 plpgsql 函数 它接受表的名称并返回此类列的列表 如何创建这样的函数 我们正在使用 PgAdmin 1 16 可以查询catalog表pg attribute http w
sql
postgresql
userdefinedfunctions
PLpgSQL
dynamicsql
Spark中如何获取数组列的所有组合?
假设我有一个数组列group ids user id group ids 1 5 8 3 1 2 3 2 1 4 Schema root user id integer nullable false group ids array null
scala
apachespark
apachesparksql
userdefinedfunctions
如何在 Spark SQL 中查找分组向量列的平均值?
我创建了一个RelationalGroupedDataset通过致电instances groupBy instances col property name val x instances groupBy instances col pr
不允许远程表值函数调用
我怎样才能做到这一点 我正在从远程链接服务器运行表值函数 我尝试在这 4 部分命名中不添加锁定 但仍然遇到相同的错误 我使用 mssql 2008 select from 110 10 10 100 testdbname dbo ufn g
sql
sqlserver
userdefinedfunctions
nolock
«
1
2
3
4
5
6
7
»