CREATE FUNCTION

Skapar en temporär eller permanent funktion. Tillfälliga funktioner begränsas på en sessionsnyckel där permanenta funktioner skapas i den beständiga katalogen och görs tillgängliga för alla sessioner. De resurser som anges i- USING satsen görs tillgängliga för alla körningar när de körs för första gången. Förutom SQL-gränssnittet kan du med Spark skapa anpassade användardefinierade skalära och mängd funktioner med Scala, python och Java-API: er. Mer information finns i användardefinierade skalära funktioner (UDF: er) och användardefinierade mängd funktioner (UDAFs) .

Syntax

CREATE [ OR REPLACE ] [ TEMPORARY ] FUNCTION [ IF NOT EXISTS ]
    function_name AS class_name [ resource_locations ]

Parametrar

  • ELLER ERSÄTT

    Om det här alternativet anges läses resurserna för funktionen in igen. Detta är främst användbart för att hämta alla ändringar som gjorts i implementeringen av funktionen. Den här parametern är ömsesidigt uteslutande till IF NOT EXISTS och kan inte anges tillsammans.

  • UTHYRNING

    Anger omfånget för funktionen som skapas. När TEMPORARY har angetts är funktionen skapad giltig och synlig i den aktuella sessionen. Ingen permanent post görs i katalogen för den här typen av funktioner.

  • OM DEN INTE FINNS

    Om det här alternativet anges skapas funktionen bara när den inte finns. Funktionen kan inte skapas (inget fel genereras) om den angivna funktionen redan finns i systemet. Den här parametern är ömsesidigt uteslutande till OR REPLACE och kan inte anges tillsammans.

  • function_name

    Ett namn på en funktion som ska skapas. Funktions namnet kan också kvalificeras med ett databas namn.

    Syntax:[database_name.] function_name

  • class_name

    Namnet på den klass som innehåller implementeringen för funktionen som ska skapas. Den implementerande klassen bör utöka en av bas klasserna enligt följande:

    • Ska utöka UDF eller UDAF i org.apache.hadoop.hive.ql.exec paket.
    • Ska utöka AbstractGenericUDAFResolver , GenericUDF eller GenericUDTF i org.apache.hadoop.hive.ql.udf.generic paket.
    • Bör utöka UserDefinedAggregateFunction i org.apache.spark.sql.expressions paket.
  • resource_locations

    Listan med resurser som innehåller implementeringen av funktionen tillsammans med dess beroenden.

    Syntax:USING { { (JAR | FILE ) resource_uri } , ... }

Exempel

-- 1. Create a simple UDF `SimpleUdf` that increments the supplied integral value by 10.
--    import org.apache.hadoop.hive.ql.exec.UDF;
--    public class SimpleUdf extends UDF {
--      public int evaluate(int value) {
--        return value + 10;
--      }
--    }
-- 2. Compile and place it in a JAR file called `SimpleUdf.jar` in /tmp.

-- Create a table called `test` and insert two rows.
CREATE TABLE test(c1 INT);
INSERT INTO test VALUES (1), (2);

-- Create a permanent function called `simple_udf`.
CREATE FUNCTION simple_udf AS 'SimpleUdf'
    USING JAR '/tmp/SimpleUdf.jar';

-- Verify that the function is in the registry.
SHOW USER FUNCTIONS;
+------------------+
|          function|
+------------------+
|default.simple_udf|
+------------------+

-- Invoke the function. Every selected value should be incremented by 10.
SELECT simple_udf(c1) AS function_return_value FROM t1;
+---------------------+
|function_return_value|
+---------------------+
|                   11|
|                   12|
+---------------------+

-- Created a temporary function.
CREATE TEMPORARY FUNCTION simple_temp_udf AS 'SimpleUdf'
    USING JAR '/tmp/SimpleUdf.jar';

-- Verify that the newly created temporary function is in the registry.
-- The temporary function does not have a qualified
-- database associated with it.
SHOW USER FUNCTIONS;
+------------------+
|          function|
+------------------+
|default.simple_udf|
|   simple_temp_udf|
+------------------+

-- 1. Modify `SimpleUdf`'s implementation to add supplied integral value by 20.
--    import org.apache.hadoop.hive.ql.exec.UDF;

--    public class SimpleUdfR extends UDF {
--      public int evaluate(int value) {
--        return value + 20;
--      }
--    }
-- 2. Compile and place it in a jar file called `SimpleUdfR.jar` in /tmp.

-- Replace the implementation of `simple_udf`
CREATE OR REPLACE FUNCTION simple_udf AS 'SimpleUdfR'
    USING JAR '/tmp/SimpleUdfR.jar';

-- Invoke the function. Every selected value should be incremented by 20.
SELECT simple_udf(c1) AS function_return_value FROM t1;
+---------------------+
|function_return_value|
+---------------------+
|                   21|
|                   22|
+---------------------+