Database Looping

KNIME Base Nodes version 3.7.1.v201901291053 by KNIME AG, Zurich, Switzerland

This node runs SQL queries in the connected database restricted by the possible values given by the input table. It establishes and opens a database access connection from which to read data and restricts each SQL query so that only rows that match the possible values from the input table are retrieved.
The place holder in brackets for table name and table column must be replaced, while the possible value place holder enclosed in hashes must not be edit and will be resolved during execution.

If the optional input is connected the database connection information is taken from the port, otherwise you need to specify the connection information in the dialog.

Make sure you have your vendor-specific database driver registered in the KNIME preference page (section Database Driver). By default, the sun.jdbc.odbc.JdbcOdbcDriver (Windows and Linux) is only available.

Options

Database Driver

Enter the database driver here; it is a Java class (including the package path), for example: sun.jdbc.odbc.JdbcOdbcDriver Additional driver can be registered via KNIME's preference page (Database Driver).

Database Name

Enter the database name here, for example jdbc:odbc:database_name or jdbc:mysql://host:port/database_name

Workflow Credentials

If checked, the credentials (user and password) are used as defined on the workflow. The credential name links to the specified user and password. Those can be replaced or edit using the 'Workflow Credentials' menu available in the workflow context menu.

User Name

Your log-in user name for the database.

Password

Your log-in password for the database. Note, the password is de- and encrypted before handling it internally.

TimeZone

Select the TimeZone to convert the date, time or timestamp field into. The current implementation can't represent time zones. In order to support persisting those fields into a database, the time values can be changed according to the selected time zone, which is used as the offset (including the daylight saving time) for the original values: No Correction (use UTC) is used for workflows (created before 2.8) and doesn't apply any correction, Use local TimeZone uses the local time zone offset to correct the date field before reading or writing, and TimeZone: allows selecting the time zone to covert the date values into.

SQL Statement

Enter the SQL-like query here, for example SELECT * FROM table. The WHERE statement is automatically adjusted according to the possible values of the selected column.

Column selection

Select one column whose possible (distinct) values are used to constrain the SQL WHERE clause.

Aggregate by row:

If this option is selected, the final output table will only contain one row per value of the aggregated column. All other column values are aggregated and separated by comma.

Append grid column:

If this option is selected, the grid column from the input table is appended to the end of the resulting output table which is case of a more than one value per query, will contain the set of values.

No. of Values per Query:

Specifies the number of elements executed in each SQL query.

Input Ports

Data column with possible values used to constrain the database SQL query

An optional database connection that should be used instead of providing the connection information in the dialog.

Output Ports

Table with data read from the database

Best Friends (Incoming)

• GroupBy (12 %) Manipulator
• Database Reader (8 %) Source
• Row Filter (7 %) ManipulatorStreamable
• Table Creator (7 %) Source
• Database Connector (4 %) Source
• Chunk Loop Start (3 %) LoopStart
• Excel Reader (XLS) (3 %) SourceStreamable
• String Manipulation (3 %) ManipulatorStreamable
• Rule-based Row Filter (2 %) ManipulatorStreamable
• CSV Reader (2 %) Source
• PostgreSQL Connector (2 %) Source
• Database Looping (2 %) Source
• Column Filter (2 %) ManipulatorStreamable
• Row Splitter (2 %) ManipulatorStreamable
• Joiner (2 %) Manipulator
• Table Row to Variable (2 %) Other
• Database Connection Table Reader (2 %) Source
• Loop End (2 %) LoopEnd
• Reference Row Filter (2 %) Manipulator
• Database Writer (2 %) SinkStreamable
• Column Rename (2 %) ManipulatorStreamable
• Rule-based Row Splitter (2 %) ManipulatorStreamable
• MySQL Connector (1 %) Source
• File Reader (1 %) SourceStreamable
• Concatenate (1 %) ManipulatorStreamable
• Row Sampling (1 %) Manipulator
• Ungroup (1 %) ManipulatorStreamable
• SQLite Connector (1 %) Source
• Database Table Creator (< 1 %) Source
• String To Number (< 1 %) ManipulatorStreamable
• Variable to Table Row (< 1 %) Other
• Database Table Connector (< 1 %) Source
• Database Table Selector (< 1 %) Source
• Java Snippet (< 1 %) ManipulatorStreamable
• HiLite Row Splitter (< 1 %) Manipulator
• Missing Value (< 1 %) Manipulator
• Empty Table Switch (< 1 %) Manipulator
• String to Date&Time (< 1 %) ManipulatorStreamable
• Flow Variable IF Switch (< 1 %) Manipulator
• Table Row To Variable Loop Start (< 1 %) LoopStart
• Database Query (< 1 %) Manipulator
• Database SQL Executor (< 1 %) Manipulator
• Group Loop Start (< 1 %) LoopStart
• Reference Row Splitter (< 1 %) Manipulator
• Sorter (< 1 %) Manipulator
• Column Splitter (< 1 %) ManipulatorStreamable
• String Replacer (< 1 %) ManipulatorStreamable
• CASE Switch Variable (End) (< 1 %) Manipulator
• End IF (< 1 %) Manipulator
• Molecule Type Cast (< 1 %) ManipulatorStreamable
• Excel Reader (XLS) (< 1 %) SourceStreamableDeprecated
• Value Filter (< 1 %) QuickForm
• Table Column to Variable (< 1 %) Other
• Database Delete (< 1 %) Sink
• Database Update (< 1 %) Sink
• Parameterized Database Query (< 1 %) Source
• Table Reader (< 1 %) SourceStreamable
• Java Edit Variable (< 1 %) Manipulator
• Column List Loop Start (< 1 %) LoopStart
• Recursive Loop Start (< 1 %) LoopStart
• Cell Splitter (< 1 %) ManipulatorDeprecated
• Cell Splitter By Position (< 1 %) ManipulatorStreamable
• Column Combiner (< 1 %) ManipulatorStreamable
• Column Comparator (< 1 %) ManipulatorStreamable
• Number To String (< 1 %) Manipulator
• Column Appender (< 1 %) ManipulatorStreamable
• Constant Value Column (< 1 %) ManipulatorStreamable
• Cross Joiner (< 1 %) ManipulatorStreamable
• Double To Int (< 1 %) ManipulatorStreamableDeprecated
• Double To Int (< 1 %) ManipulatorStreamable
• Interactive HiLite Collector (< 1 %) Visualizer
• Nominal Value Row Filter (< 1 %) ManipulatorStreamable
• Partitioning (< 1 %) Manipulator
• Pivoting (< 1 %) Manipulator
• Regex Split (< 1 %) ManipulatorStreamable
• Round Double (< 1 %) ManipulatorStreamable
• RowID (< 1 %) ManipulatorStreamable
• Rule Engine (< 1 %) PredictorStreamable
• Merge Variables (< 1 %) Other
• Hive Connector (< 1 %) Source
• Parallel Chunk Start (< 1 %) LoopStart
• Microsoft SQL Server Connector (< 1 %) Source
• Empty Table Creator (< 1 %) Source
• Math Formula (< 1 %) ManipulatorStreamable
• XLS Reader (< 1 %) SourceDeprecated
• Java Snippet (simple) (< 1 %) Manipulator
• Column Filter (< 1 %) QuickForm
• Date&Time Difference (< 1 %) ManipulatorStreamable
• Preset Date/Time (legacy) (< 1 %) Manipulator
• Impala Connector (< 1 %) 
• Benchmark Start (< 1 %) LoopStart
• MolConverter (< 1 %) ManipulatorStreamable
• Binary Objects to Strings (< 1 %) Manipulator
• Wait... (< 1 %) Manipulator
• Database Row Filter (< 1 %) Manipulator
• SQL Extract (< 1 %) Other
• Database Auto-Binner (< 1 %) Manipulator
• Case Converter (< 1 %) ManipulatorStreamable
• Category To Number (< 1 %) ManipulatorStreamable
• Column Resorter (< 1 %) ManipulatorStreamable
• Missing Value Column Filter (< 1 %) Manipulator
• String Manipulation (Variable) (< 1 %) Manipulator
• Transpose (< 1 %) Manipulator
• Rule-based Row Splitter (Dictionary) (< 1 %) ManipulatorStreamable
• CASE Switch Variable (Start) (< 1 %) Manipulator
• Cache (< 1 %) Other
• Vertica Connector (< 1 %) Source
• Amazon Redshift Connector (< 1 %) Source
• OpenBabel (< 1 %) Manipulator
• Excel Writer (XLS) (< 1 %) Sink
• Dictionary tagger (< 1 %) ManipulatorStreamableDeprecated
• Python Script (2⇒1) (< 1 %) ManipulatorDeprecated
• Python Source (< 1 %) SourceDeprecated
• R Snippet (< 1 %) Manipulator
• Time Generator (legacy) (< 1 %) Source
• Moving Aggregation (< 1 %) Manipulator
• String to Date/Time (legacy) (< 1 %) ManipulatorStreamable
• Show all 117 recommendations

Best Friends (Outgoing)

• Joiner (29 %) Manipulator
• GroupBy (12 %) Manipulator
• Column Filter (7 %) ManipulatorStreamable
• Row Filter (4 %) ManipulatorStreamable
• Loop End (3 %) LoopEnd
• Reference Row Filter (3 %) Manipulator
• Database Looping (3 %) Source
• CSV Writer (3 %) SinkStreamable
• Concatenate (3 %) ManipulatorStreamable
• Molecule Type Cast (3 %) ManipulatorStreamable
• Database Writer (2 %) SinkStreamable
• String Manipulation (2 %) ManipulatorStreamable
• Split Collection Column (1 %) Manipulator
• Column Rename (1 %) ManipulatorStreamable
• Database Update (< 1 %) Sink
• Parameterized Database Query (< 1 %) Source
• Reference Row Splitter (< 1 %) Manipulator
• Sorter (< 1 %) Manipulator
• Catch Errors (Data Ports) (< 1 %) ScopeEnd
• Cell Replacer (< 1 %) ManipulatorStreamable
• Cell Splitter (< 1 %) ManipulatorDeprecated
• Number To String (< 1 %) Manipulator
• Column Resorter (< 1 %) ManipulatorStreamable
• Pivoting (< 1 %) Manipulator
• Ungroup (< 1 %) ManipulatorStreamable
• Rule-based Row Filter (< 1 %) ManipulatorStreamable
• Rule Engine (< 1 %) PredictorStreamable
• Empty Table Switch (< 1 %) Manipulator
• End IF (< 1 %) Manipulator
• Timer Info (< 1 %) Sink
• Math Formula (< 1 %) ManipulatorStreamable
• Excel Writer (XLS) (< 1 %) Sink
• Molecule to CDK (< 1 %) Manipulator
• Table Row to Variable (< 1 %) Other
• Table Row To Variable Loop Start (< 1 %) LoopStart
• Database Delete (< 1 %) Sink
• Database Reader (< 1 %) Source
• Chunk Loop Start (< 1 %) LoopStart
• Variable Condition Loop End (< 1 %) LoopEnd
• Concatenate (Optional in) (< 1 %) ManipulatorStreamable
• Create Bit Vector (< 1 %) Manipulator
• Column Appender (< 1 %) ManipulatorStreamable
• Double To Int (< 1 %) ManipulatorStreamable
• HiLite Row Splitter (< 1 %) Manipulator
• Nominal Value Row Filter (< 1 %) ManipulatorStreamable
• Row Splitter (< 1 %) ManipulatorStreamable
• Regex Split (< 1 %) ManipulatorStreamable
• Round Double (< 1 %) ManipulatorStreamable
• Rule-based Row Splitter (< 1 %) ManipulatorStreamable
• CASE Switch Data (End) (< 1 %) Manipulator
• Parallel Chunk End (< 1 %) LoopEnd
• OpenBabel (< 1 %) Manipulator
• XLS Writer (< 1 %) SinkDeprecated
• Tika Parser URL Input (< 1 %) ManipulatorStreamable
• Table View (JavaScript) (< 1 %) Visualizer
• Scatter Plot (JavaScript) (< 1 %) Visualizer
• Max Filter (< 1 %) 
• Python Script (1⇒1) (< 1 %) ManipulatorDeprecated
• R Snippet (< 1 %) Manipulator
• Legacy Date&Time to Date&Time (< 1 %) ManipulatorStreamable
• Date Field Extractor (legacy) (< 1 %) Manipulator
• Mask Date/Time (legacy) (< 1 %) Manipulator
• Mask Date/Time (legacy) (< 1 %) Manipulator
• Time to String (legacy) (< 1 %) ManipulatorStreamable
• HttpRetriever (< 1 %) Manipulator
• Create Well Position (< 1 %) Manipulator
• Inject Variables (Data) (< 1 %) Other
• Database Connector (< 1 %) Source
• Java Snippet (< 1 %) ManipulatorStreamable
• Generic Loop Start (< 1 %) LoopStart
• Group Loop Start (< 1 %) LoopStart
• Variable Loop End (< 1 %) LoopEnd
• Column Combiner (< 1 %) ManipulatorStreamable
• Constant Value Column (< 1 %) ManipulatorStreamable
• Cross Joiner (< 1 %) ManipulatorStreamable
• Extract Missing Value Cause (< 1 %) ManipulatorStreamable
• Rank (< 1 %) Manipulator
• String Replacer (< 1 %) ManipulatorStreamable
• Value Counter (< 1 %) Other
• Rule-based Row Filter (Dictionary) (< 1 %) ManipulatorStreamable
• Histogram (< 1 %) Visualizer
• Color Manager (< 1 %) Visualizer
• Interactive Table (< 1 %) Visualizer
• SDF Extractor (< 1 %) Manipulator
• Table Indexer (< 1 %) Manipulator
• Java Snippet (simple) (< 1 %) Manipulator
• Java IF (Table) (< 1 %) Manipulator
• Date Field Extractor (legacy) (< 1 %) Manipulator
• String to Date/Time (legacy) (< 1 %) ManipulatorStreamable
• Show all 89 recommendations

Installation

To use this node in KNIME, install KNIME Base Nodes from the following update site: