pk_teisendame_liiklussagedusi.R 9.0 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259
  1. #' Piirkonnale andmebaasis oleva liiklussageduse andmete jagamine kihtideks
  2. #'
  3. #' Etteantud piirkonna geomeetrilise piirjoone ('piir') ja selle joone piirikasti ('bb') järele leitud liiklussagedusandmete eraldamine kihtideks ("sapa", "vaab", "ar", "sapaarv", "vaabarv", "ararv"). Andmed salvestatakse postgis andmebaasi.
  4. #'
  5. #' @param obj str Objekti nimi. Edaspidi on oluline ainult see nimi. Piirkonna geomeetrilist joont ei ole vaja lisada.
  6. #' @param conf A list() of configuration variables. Default values \code{\link[ruut]{get_config}}.
  7. #' @return Liiklussageduse andmete jagamine kihtideks.
  8. #' @seealso [sf::st_read()], [sf::write_sf()],[sf::st_transform()],[ruut::pk_sellest_alustame_db_loomist()],[ruut::pk_lisame_ruudustikud()] ,[ruut::pk_lisame_polygoonid()],[ruut::pk_lisame_jooned()],[ruut::pk_lisame_punktid()],[ruut::pk_teisendame_polygoone()],[ruut::pk_teisendame_jooni()],[ruut::pk_teisendame_punkte()]
  9. #' @keywords postgis, boundary box, EPSG:3301
  10. #' @export
  11. #' @examples
  12. #' \dontrun{
  13. #'
  14. #' obj <- "marja"
  15. #' pk_teisendame_liiklussagedusi(obj = obj, conf = NULL)
  16. #'
  17. #' # Layers list.
  18. #' ruut::db_schema_tablenames(conf = conf)
  19. #' }
  20. pk_teisendame_liiklussagedusi <- function(obj = NULL, conf = NULL) {
  21. ## ------------- muutujad ja teisendused ---------------
  22. vars <- ajutised_muutujad(pk = NULL, obj, conf)
  23. obj <- vars$obj
  24. piir <- vars$pk
  25. conf <- vars$conf
  26. ## Konfiguratsiooni muutujale väärtuste omistamine, kui seda pole antud.
  27. if (!any("a00_piir" %in% ruut::db_schema_tablenames(conf = conf))) {
  28. cat(
  29. "\nAndmebaas loomata. Palun funktsiooniga ruut::pk_sellest_alustame_db_loomist() andmebaasi loomist.\n"
  30. )
  31. return(NULL)
  32. }
  33. ## Tabelid mis on juba andmebaasis ja mida ümber ei kirjutata.
  34. olemasolevad_tabelid <- ruut::db_schema_tablenames(conf = conf)
  35. ## ====================== teisendused =====================
  36. # Layers list
  37. layer_names <- ruut::db_schema_tablenames(conf = conf)
  38. layer_names <-
  39. layer_names[!layer_names %in% c(
  40. "a00_piir",
  41. "a00_bb2",
  42. "a00_piir_bb",
  43. "bb2_epk10t_grid",
  44. "bb2_epk02t_grid",
  45. "bb2_epk2t_grid"
  46. )]
  47. layer_names <- layer_names[grepl("^data_l_", layer_names)]
  48. layer_name <- "n_liiklussagedus"
  49. parent_table <- "data_l_te_n_liiklussagedus"
  50. ## Konfiguratsiooni muutujale väärtuste omistamine, kui seda pole antud.
  51. if (!parent_table %in% layer_names) {
  52. cat(sprintf("\nPuudub andmebaas \"%s\".\n", parent_table))
  53. return(NULL)
  54. }
  55. conn <- ruut::db_connect(conf = conf)
  56. try(ruumiline_obj <-
  57. sf::st_read(dsn = conn,
  58. layer = c(conf$schema, parent_table)))
  59. DBI::dbDisconnect(conn)
  60. ## Kontlrollime kas geomeetriline objekt on polügoon.
  61. ## Arvutame sel juhul pindala.
  62. is_line <-
  63. any(grepl("line", tolower(attributes(
  64. ruumiline_obj$geom
  65. )$class), fixed = TRUE))
  66. # Liiklussageduse klassid.
  67. ls_klassid <-
  68. c("sapa", "vaab", "ar", "sapaarv", "vaabarv", "ararv")
  69. if (is_line) {
  70. for (ls_klass in ls_klassid) {
  71. ## Kui olemasolev tabel eksisteerib andmebaasis, siis jätame arvutused
  72. ## selle tabeliga vahele.
  73. uus_tabel <-
  74. sprintf("grid_%s_%s", gsub("^data_", "", parent_table), ls_klass)
  75. if (uus_tabel %in% olemasolevad_tabelid) {
  76. cat(sprintf("\nTabel %s on juba andmebaasis olemas.\n", uus_tabel))
  77. next
  78. }
  79. ls <- ruumiline_obj[, ls_klass]
  80. ## Veeru ümbernimetamine
  81. names(ls) <- c("ls", "geom")
  82. ## 1. Ajutise sf salvestamine
  83. pk <- sf::st_transform(ls, 3301)
  84. # Write to gpkg and check validity
  85. sf::write_sf(
  86. pk,
  87. dsn = vars$tmp_gpkg_file,
  88. layer = vars$conf$gpkg_table,
  89. driver = "gpkg",
  90. fid_column_name = "fid",
  91. delete_dsn = T
  92. )
  93. ## 2. Lõikame objekti ruudistikga tükkideks. Ühte ruutu võib jääda mitu tükki.
  94. ## Peame need pärast ühendama
  95. # ruut::qgis_algorithm_search_by_word("join")
  96. algorithm <- "native:joinattributesbylocation"
  97. conf$table <- sprintf("%s", "bb2_epk02t_grid")
  98. input <- ruut::construct_to_gpkg_output_postgres_str(
  99. conf = conf,
  100. geometry_type = "Polygon",
  101. srid = 3301,
  102. checkPrimaryKeyUnicity = TRUE,
  103. key = "id",
  104. geometry_field = "geom"
  105. )
  106. join <- vars$tmp_gpkg_file_input_1
  107. output <- vars$tmp_gpkg_file_output_2 # ajutine fail
  108. str <-
  109. sprintf(
  110. "{
  111. 'DISCARD_NONMATCHING' : false,
  112. 'INPUT' : '%s',
  113. 'JOIN' : '%s',
  114. 'JOIN_FIELDS' : ['ls'],
  115. 'METHOD' : 2,
  116. 'OUTPUT' : '%s',
  117. 'PREDICATE' : [0],
  118. 'PREFIX' : ''
  119. }",
  120. input,
  121. join,
  122. output
  123. )
  124. cmd <-
  125. ruut::construct_qgis_output_result_to_better_format(str = str, algorithm = algorithm)
  126. system(cmd)
  127. ## ------------- TIFF ----------------
  128. ## 5. Asendame NULL väärtustega 0.
  129. algorithm <- "qgis:advancedpythonfieldcalculator"
  130. input <- vars$tmp_gpkg_file_input_2 # ajutine fail
  131. output <- vars$tmp_gpkg_file_output_1
  132. cmd <-
  133. sprintf(
  134. "qgis_process run %s --FIELD_NAME='value' --FIELD_TYPE=1 --FIELD_LENGTH=4 --FIELD_PRECISION=2 --GLOBAL=\"def getValue(x):
  135. if not x:
  136. value = 0
  137. else:
  138. value = round(x,1)
  139. return value\" --FORMULA='value = getValue( <ls> )' --INPUT='%s' --OUTPUT='%s' ",
  140. algorithm,
  141. input,
  142. output
  143. )
  144. system(cmd)
  145. ## 6. tif salvestamine tmp kataloogi
  146. conn <- ruut::db_connect(conf = conf)
  147. grid_layer <-
  148. sf::read_sf(dsn = conn,
  149. layer = c(conf$schema, "bb2_epk02t_grid"))
  150. DBI::dbDisconnect(conn)
  151. # sf::st_crs(grid_layer) <- 3301
  152. pk_attributes <- attributes(grid_layer$geom)
  153. extent <-
  154. sprintf(
  155. "%s,%s,%s,%s [EPSG:3301]",
  156. round((pk_attributes$bbox["xmin"] / 100), digits = 0) * 100,
  157. ceiling((pk_attributes$bbox["xmax"] / 100)) * 100,
  158. round((pk_attributes$bbox["ymin"] / 100), digits = 0) * 100,
  159. ceiling((pk_attributes$bbox["ymax"] / 100)) * 100
  160. )
  161. # ruut::qgis_algorithm_search_by_word("Rasterize")
  162. algorithm <- "gdal:rasterize"
  163. # ruut::qgis_show_help(algorithm = algorithm)
  164. input <- vars$tmp_gpkg_file_input_1
  165. tif_file_name <-
  166. sprintf("tif_%s_%s", gsub("^data_", "", parent_table), ls_klass)
  167. output <- sprintf("%s/%s.tif", vars$tmp_dir, tif_file_name)
  168. str <-
  169. sprintf(
  170. "{ 'BURN' : 0, 'DATA_TYPE' : 5, 'EXTENT' : '%s', 'EXTRA' : '-a_srs epsg:3301', 'FIELD' : 'value', 'HEIGHT' : 100, 'INIT' : None, 'INPUT' : '%s', 'INVERT' : False, 'NODATA' : -1, 'OPTIONS' : '', 'OUTPUT' : '%s', 'UNITS' : 1, 'WIDTH' : 100 }",
  171. extent,
  172. input,
  173. output
  174. )
  175. cmd <-
  176. ruut::construct_qgis_output_result_to_better_format(str = str, algorithm = algorithm)
  177. system(cmd) # Salvestame kataloogi
  178. ## 7. ----------- TIF TO POSTGIS -------------
  179. (
  180. cmd <- sprintf(
  181. "export PGPASSWORD=%s && raster2pgsql -s 3301 -d -I -C -M %s %s.%s_tif | psql -U %s -d %s -h %s -p %s",
  182. conf$password,
  183. output,
  184. conf$schema,
  185. tif_file_name,
  186. conf$user,
  187. conf$dbname,
  188. conf$host,
  189. conf$port
  190. )
  191. )
  192. system(cmd)
  193. ## 8. Eemaldame üleliigsed veerud ja salvestame tiff alusfaili andmebaasi
  194. # ruut::qgis_algorithm_search_by_word("Drop ")
  195. algorithm <- "native:deletecolumn"
  196. input <- vars$tmp_gpkg_file_input_1
  197. conf$table <- uus_tabel
  198. output <-
  199. ruut::construct_to_gpkg_output_postgres_str(
  200. conf = conf,
  201. geometry_field = "geom",
  202. geometry_type = "Polygon",
  203. srid = 3301,
  204. checkPrimaryKeyUnicity = FALSE,
  205. key = "id"
  206. )
  207. cmd <-
  208. sprintf(
  209. "qgis_process run %s --COLUMN='fid' --COLUMN='left' --COLUMN='top' --COLUMN='right' --COLUMN='bottom' --COLUMN='ls' --INPUT='%s' --OUTPUT='%s' ",
  210. algorithm,
  211. input,
  212. output
  213. )
  214. system(cmd)
  215. ## 9. Kustutame geom veeru.
  216. conn <- ruut::db_connect(conf = conf)
  217. q <-
  218. sprintf("ALTER TABLE \"%s\".\"%s\" DROP COLUMN geom;",
  219. conf$schema,
  220. conf$table)
  221. cat(sprintf("\n-----------------\n%s\n\n", q))
  222. DBI::dbSendQuery(conn, q)
  223. ## 10. Vaakum.
  224. q <-
  225. sprintf(
  226. "VACUUM (FULL, FREEZE, VERBOSE, ANALYZE, INDEX_CLEANUP) \"%s\".\"%s\";",
  227. conf$schema,
  228. conf$table
  229. )
  230. cat(sprintf("\n-----------------\n%s\n\n", q))
  231. DBI::dbSendQuery(conn, q)
  232. ## 11. Add foreign key.
  233. q <-
  234. sprintf(
  235. "ALTER TABLE \"%s\".\"%s\" ADD CONSTRAINT %s_fk FOREIGN KEY (id) REFERENCES %s.bb2_epk02t_grid(id);",
  236. conf$schema,
  237. conf$table,
  238. conf$table,
  239. conf$schema
  240. )
  241. cat(sprintf("\n-----------------\n%s\n\n", q))
  242. DBI::dbSendQuery(conn, q)
  243. DBI::dbDisconnect(conn)
  244. }
  245. }
  246. ## Layers list
  247. conf$schema <- obj
  248. ruut::db_schema_tablenames(conf = conf)
  249. sf::st_layers(dsn = vars$tmp_gpkg_file)
  250. }