Структура таблиц БД

[Grut]

Коллеги, помогите, пожалуйста, сообразить правильную структуру таблиц базы даных в MySQL.
Исходные данные:
Совершая get-запрос к API SemRush, получаю массив данных в формате json. Этот массив есть список отслеживаемых поисковых запросов, их позиция в Гугле, урл ранжируемой страницы и др.
Один элемент массива выглядит следующим образом:

    "1": {
      "Pi": "16409507011027092224",            ## keyword ID ##
      "Ph": "keyword",                         ## keyword ##
      "Kb": 20151208,
      "Tg": {                                  ## tags for a keyword ##
        "0": "brand"
      },
      "Cp": "0.86",                            ## Average price in U.S. dollars
      "Nq": "320",                             ## Search Volume, monthly ##
      "Gs": "0",
      "Dt": {                                  ## array of dates and positions ##
        "20171116": {
          "www.domain.com/*": 6
        }
      },
      "Be": {                                 ## Position at the beginning of specified period
        "www.domain.com/*": 6
      },
      "Fi": {                                 ## Position at the end of specified period
        "www.domain.com/*": 6
      },
      "Diff": {                               ## Position difference for specified period
        "www.domain.com/*": 0
      },
      "Diff1": {                              ## Position difference for 1-day period
        "www.domain.com/*": 94
      },
      "Diff7": {                              ## Position difference for 1-week period
        "www.domain.com/*": 94
      },
      "Diff30": {                             Position difference for 1-month period
        "www.domain.com/*": 94
      },
      "Vi": {
        "20171116": {
          "www.domain.com/*": 0.000000
        },
        "Diff": {
          "www.domain.com/*": 0.000000
        }
      },
      "Sf": {
        "20171116": [
          "img",
          "rev",
          "kng"
        ]
      },
      "Tr": {
        "20171116": {
          "www.domain.com/*": 0.430000
        }
      },
      "Tc": {
        "20171116": {
          "www.domain.com/*": 0.370000
        }
      },
      "Lu": {                                   ## Landing URLs ##
        "20171116": {
          "www.domain.com/*": "https://www.domain.com/keyword-url.html"
        }
      },
      "Lt": {
        "20171116": {
          "www.domain.com/*": [
            "org"
          ]
        }
      }
    }

комментарии я добавил сам, чтоб было понятнее

Я планирую накапливать в БД следующие данные:
- keyword
- tag
- дата запроса
- позиция
- урл
- search volume ключевика
, чтоб в будущем формировать таблицы и графики с фильтрацией всех ключевиков по отдельному тегу.

[веломан]

так вот же структура

- keyword
- tag
- дата запроса
- позиция
- урл
- search volume ключевика

id нужен auto_increment
keyword, очевидно, основная колонка
tag, возможно, в отдельную таблицу надо (НФ1)

[Grut]

Сообщение от веломан

так вот же структура

id нужен auto_increment
keyword, очевидно, основная колонка
tag, возможно, в отдельную таблицу надо (НФ1)

Получается, что при добавлении новых данных, значения колонки Keywords будут каждый раз обновлятся?
Я подозреваю, что Keywords должны быть в одной таблице, Теги - в другой, а Позиция и УРЛ - в третьей (или в разных, хз).
Но как это все связать - я хз.

[Ёся]

можно сделать примерно так:
1 таблица id + время запроса + еще какие то данные если нужно..
2 таблица id + кеи
3 таблица id + теги
4 таблица состоит из id (primary key, auto increment), id запроса, id кея, id тега, позиция, url

затем делаешь выборку с join... соединяешь как нужно и всё, можешь связать таблицу 4 и таблицу 1 с помощью foreign key (таблица4.query_id = таблица1.id)

[веломан]

Сообщение от Grut

Получается, что при добавлении новых данных, значения колонки Keywords будут каждый раз обновлятся?
Я подозреваю, что Keywords должны быть в одной таблице, Теги - в другой, а Позиция и УРЛ - в третьей (или в разных, хз).
Но как это все связать - я хз.

1 запись = 1 кейворд, разве нет?
и позиция с урлом тоже одно на кейворд, им не нужна отдельная таблица

[flo0]

Грут, посмотри монгодб, забей на мускул. В монго сделаешь одну таблицу и пиши в нее все данные как есть. Тебе этого хватит с головой.

[Юнга]

не надо тебе монги, нормализируй это.

[xUnicornx]

Grut, сделай, как говорит веломан. Только добавь индекс к тег колонке

{
 id int unsignet auto_increment primary key,
 keyword varchar(250)
 tag varchar(250) index
 date DATE
 position int
 url varchar(250)
 search_volume text
}

[Grut]

Сделал как говорил Веломан.
Теперь при импорте данных со следующей датой, значиния в колоке Keywords дублируются.


Теперь склоняюсь к предложению Ёся.

[веломан]

лучше скрипт импорта поправь
почему-то дата отсутствует и позиции разные
кстати по дефолту должен быть NULL, т.е. создаёшь просто:
added date (added = название колонки)
это на будущее, потому что тут пустышек быть не может