Умное добавление музыкальных групп в Google Таблицы через VK API, Tampermonkey и Telegram бота

access_token = '1111111111' // VK token ss = SpreadsheetApp.getActiveSpreadsheet() // Таблица sheet = ss.getSheets()[getNumSheet('Группы')] // Лист data = sheet.getDataRange().getValues() // Все ячейки numRows = sheet.getLastRow()+1 // Последняя строка faveTag = 'муз.группы' // Тег закладок в ВК  // Принимаем входящие get запросы function doGet(e) { try {     var link = e.parameters['link']     /*       A - Название       B - English       C - Ссылка       D - Город       E - Жанр       F - Описание       G - Примечание     */     var n = searchExists(link)     if (n != false) return ContentService.createTextOutput('Группа '+n+' уже есть!')     // Запрос в API VK https://vk.com/dev/groups.getById     var html = UrlFetchApp.fetch('https://api.vk.com/method/groups.getById.json?group_id='+link+'&fields=city,description&access_token='+access_token+'&v=5.107')     // Парсим в json первый элемент response     var json = JSON.parse(html).response[0]     addInTableFromArray(json, link)     sort()     return ContentService.createTextOutput('Добавлено')   } catch (e) {      return ContentService.createTextOutput('Ошибка из гуглотаблиц doGet! '+e)   } }  // Поиск стиля/жанра группы из описания по регулярке function searchGenre(txt) {   var t = txt.match(/(?:(?:стил[ь|я|ю|ем|е]|genre|жанр[а|у|ом|е]?)[\s:-]+){1}([a-zа-я\/-]+)/i)   if(txt != '' && t) return t[1] }  // Поиск русских букв в названии function isRus(txt) {   return txt.search(/[^A-Za-z0-9\/.:_]+/i) }  // Сортировка function sort(){   // Диапазон сортируемых ячеек от левой верхней до правой нижней   var tableRange = "A2:G"+numRows   var editedCell = sheet.getActiveCell()   var range = sheet.getRange(tableRange)   // Порядок сортировки по номеру столбца. Начинается не с 0, а с 1   range.sort([{      column : 4,     ascending: true   },{     column: 1,     ascending: true   },{     column: 2,     ascending: true   }]) }  // Поиск существующих групп function searchExists(t) {   for (var i = 1; i < data.length; i++) {     if (t == data[i][2] || 'club'+t == data[i][2]){       return data[i][0]+data[i][1]     }   }   return false }  // Подтягивание данных массово если их нет function addInfo(isBot = false) {   var arr = []   var j = 0   var part = 1000 // Кол-во символов, на которое будет делиться блок текста. Из-за ограничений в адресной строке и UrlFetchApp.fetch   arr[j] = new Array()   for (var i = 1; i < data.length; i++) {     var txt = data[i][2].replace('https://vk.com/','').replace('vk.com/','').replace('^club','')     if (txt != '' && data[i][0] == '' && data[i][1] == '' && data[i][3] == '' && data[i][4] == '' && data[i][5] == '' && data[i][6] == ''){       arr[j].push(txt)       if (arr[j].toString().length > part){         j++         arr[j] = new Array()       }     }   }   if (arr[0].length == 0){     if (isBot) return false     else{       SpreadsheetApp.getUi().alert('Нет групп, которые нужно дополнить')       return false     }   }   // Цикл по ссылкам   for (var t = 0; t < Math.ceil(arr.toString().length/part); t++) {     var html = UrlFetchApp.fetch('https://api.vk.com/method/groups.getById.json?group_ids='+arr[t].toString()+'&fields=city,description&access_token='+access_token+'&v=5.107')     var json = JSON.parse(html).response     if(json){       for (var i = 0; i < json.length; i++) {         var id = json[i].id         var link = json[i].screen_name         var name = json[i].name         var description = (json[i].description)?json[i].description:''         var city = (json[i].city)?json[i].city.title:''         var rus = (isRus(name) != -1)?"A":"B"             // Скрипт можно попробовать заменить на двумерный массив к arr         for (var j = 1; j < data.length; j++) {           var nameCell = data[j][2].replace('https://vk.com/','').replace('vk.com/','').replace('^club','')           if (nameCell == link || nameCell == id){             var num = j+1             break           }         }         sheet.getRange(rus+num).setValue(name.replace('=',''))         sheet.getRange("C"+num).setValue('=HYPERLINK("https://vk.com/'+link+'";"'+link+'")')         sheet.getRange("D"+num).setValue(city)         sheet.getRange("E"+num).setValue(searchGenre(description))         sheet.getRange("F"+num).setValue(description)       }     }   }   sort()   return true }  // Втянуть группы из закладок ВК function getVkFave(isBot = false) {   var idTag   var getTags = UrlFetchApp.fetch('https://api.vk.com/method/fave.getTags.json?access_token='+access_token+'&v=5.107')   var res = JSON.parse(getTags).response   var iTag = res.items   for (var i = 0; i < iTag.length; i++) {     if (iTag[i].name == faveTag) idTag = iTag[i].id   }      // Предупреждение   if (!isBot){     var ui = SpreadsheetApp.getUi()     var resp = ui.alert('После втягивания закладок с тегом "'+faveTag+'" они будут удалены из ВК. Продолжаем?', ui.ButtonSet.YES_NO)   }   var inside = function (){     var getPages = UrlFetchApp.fetch('https://api.vk.com/method/fave.getPages.json?tag_id='+idTag+'&fields=city,description&access_token='+access_token+'&v=5.107')     var iPage = JSON.parse(getPages).response.items     // Цикл по каждой закладке. Добавление в таблицу, удаление с ВК     for (var j = 0; j < iPage.length; j++) {       var gr = iPage[j].group       addInTableFromArray(gr)       numRows++         UrlFetchApp.fetch('https://api.vk.com/method/fave.removePage?group_id='+gr.id+'&access_token='+access_token+'&v=5.107')         Utilities.sleep(1000) // костыль     }     sort()   }   if (isBot) { // Костыль, потому что бот стопарится на ui     inside()   }else if(resp == ui.Button.YES) {     inside()   } }  // Добавление строки в таблицу function addInTableFromArray(arr, linkIn) {   if (linkIn){     var link = linkIn   }else{     var link = arr.screen_name     if (searchExists(link) != false) return false   }   var name = arr.name // Название   var description = (arr.description)?arr.description:'' //Описание   var city = (arr.city)?arr.city.title:'' // Город   // Если в тексте нет русских букв, значит пишем название в колонку "English"   var rus = (isRus(name) != -1)?"A":"B"   // Добавление строки в таблицу   sheet.getRange(rus+numRows).setValue(name.replace('=',''))   sheet.getRange("C"+numRows).setValue('=HYPERLINK("https://vk.com/'+link+'";"'+link+'")')   sheet.getRange("D"+numRows).setValue(city)   sheet.getRange("E"+numRows).setValue(searchGenre(description))   sheet.getRange("F"+numRows).setValue(description) } // Актуализировать ссылки. Единоразово. function checkActualLink(){   for (var i = 1; i < data.length; i++) {     try {       var num = i+1       UrlFetchApp.fetch("https://vk.com/"+data[i][2])       sheet.getRange('C'+num).setBackgroundColor('')     }catch(err) {       var num = i+1       sheet.getRange('C'+num).setBackgroundColor('red')     }   } } // Статус URL в строке. Запуск добавлением кода в ячейку function getStatusUrl(url){    var options = {      'muteHttpExceptions': true,      'followRedirects': false    }    var response = UrlFetchApp.fetch(url.trim(), options)    return response.getResponseCode() } //Поиск номера листа по имени function getNumSheet(nameList){   var s = SpreadsheetApp.getActiveSpreadsheet().getSheetByName(nameList)   if (s != null) {     return s.getIndex()-1   }else{     return false   } } //Удалить спецсимволы function escapeHtml(text) {   return text       .replace(/&/g, "")       .replace(/</g, "")       .replace(/>/g, ""); } // Меню function onOpen() {   SpreadsheetApp.getUi()   .createMenu('Меню специальное')   .addItem('Сортировка', 'sort')   .addItem('Втянуть закладки из ВК', 'getVkFave')   .addItem('Дозаполнить пустые', 'addInfo')   .addToUi(); }  // Краткий вызов логирования function ll(t){   return Logger.log(t) } 

var botApi = 'https://api.telegram.org/bot1123123:AAA/' // Токен Telegram бота  /* Команды:  /start - Начало работы бота  /sort - Сортировка  /getvkfave - Втянуть закладки из ВК   /addinfo - Дозаполнить пустые  /getall - Получить все группы */ function doPost(e){   var inp = JSON.parse(e.postData.contents)   // Логи   var sheet2 = ss.getSheets()[getNumSheet('Логи')]   sheet2.getRange('A1').setValue(inp)      var inpTxt = inp.message.text   var chatId = inp.message.chat.id      var link = inpTxt.replace('https://vk.com/','').replace('vk.com/','').replace('^club','')   // Команды бота   // start   if (inpTxt == '/start' || inpTxt == 'В начало'){     sendText(chatId, 'Бот заносит группы из ВК в Google таблицу.\n'+                     '/start - Начало работы бота\n'+                     '/sort - Сортировка\n'+                     '/getvkfave - Втянуть закладки из ВК\n'+                     '/addinfo - Дозаполнить пустые\n'+                     '/getall - Получить все группы')     return true   }   // sort   if (inpTxt == '/sort' || inpTxt == 'Сортировка'){     sort()     sendText(chatId, 'Отсортировано')     return true   }   // getvkfave   if (inpTxt == '/getvkfave' || inpTxt == 'Втянуть закладки из ВК'){     getVkFave(true)     sendText(chatId, 'Втянуто')     return true   }   // addinfo   if (inpTxt == '/addinfo' || inpTxt == 'Дозаполнить пустые'){     if (addInfo(true)) sendText(chatId, 'Дозаполнено')     else sendText(chatId, 'Нет групп, которые нужно дополнить')     return true   }   // getall   if (inpTxt == '/getall' || inpTxt == 'Получить все группы'){     var arr = [[],[],[],[],[],[],[],[],[],[],['В начало']] // TODO доделать     var repeat = ''     var n = 0     var j = 0     for (var i = 1; i < data.length; i++) {       if (j == 4){ // Количество на одной строке         n++         j = 0       }       if (repeat != data[i][3]){         arr[n][j] = data[i][3]         if (data[i][3] == '') arr[n][j] = '---'         j++       }       repeat = data[i][3]     }     var key = JSON.stringify({keyboard:                                arr,                               resize_keyboard:true,                               one_time_keyboard:true                             });     sendText(chatId, 'Выберите город', key)     return true   }      // Город   if (isRus(link) != -1) {     var name = (inpTxt == '---')?'Не заполнен':inpTxt     for (var j = 1; j < data.length; j++) {       if (data[j][3] == inpTxt || inpTxt == '---') {         var str = 'Город '+name+'\n\n'         for (var i = 1; i < data.length; i++) {           if ((data[j][3] == data[i][3]) || (data[i][3] == '' && inpTxt == '---')) {             if (str.length >= 4000) { // Ограничение на кол-во символов в сообщении Telegram бота               sendText(chatId, str)               str = ''             }             str = str + '<a href="https://vk.com/' + data[i][2] + '">' + escapeHtml(data[i][0] + data[i][1]) + '</a> \n'           }         }         if (str != '') sendText(chatId, str)         return true       }     }     sendText(chatId, inpTxt + ' - это не муз.группа и не команда бота')     return true   }   // Проверка на валидность   if (getStatusUrl('https://vk.com/'+link) != 200 && getStatusUrl('https://vk.com/club'+link) != 200){     sendText(chatId, inpTxt+' - битая ссылка')     return true   }      var name = searchExists(link)   if (name != false){     sendText(chatId, 'Группа '+name+' уже есть')     return true   }else{     var html = UrlFetchApp.fetch('https://api.vk.com/method/groups.getById.json?group_id='+link+'&fields=city,description&access_token='+access_token+'&v=5.103')     var json = JSON.parse(html).response[0]     addInTableFromArray(json, link)     sort()     sendText(chatId, 'Группа '+json.name+' добавлена')     return true   } } //Отправить сообшение боту function sendText(chatId, text, key = ''){   var payload = {     'method': 'sendMessage',     'chat_id': String(chatId),     'text': text,     'parse_mode': 'HTML',     'reply_markup': key,     'disable_web_page_preview': true,     'one_time_keyboard':true   }        var data = {     "method": "post",     "payload": payload   }   // для дебага комментируем UrlFetchApp.fetch и вставляем ll(text)   UrlFetchApp.fetch(botApi, data) } 

// ==UserScript== // @name         vkGroupToGS // @namespace    https://vk.com/* // @version      0.1 // @author       You // @match        https://vk.com/* // @grant        GM_xmlhttpRequest // ==/UserScript==     var url_first = 'https://script.google.com/macros/s/AAA/exec'     var url_short = document.location.href.replace("https://vk.com/", "")     var d = document.createElement('div')     var head = document.querySelector('.left_menu_nav_wrap')     d.setAttribute('id', 'send_group')     d.style.display = 'inline-block'     d.style.position = 'relative'     d.style.fontSize = '50pt'     d.style.cursor = 'pointer'     d.innerHTML = '+'     head.parentNode.appendChild(d)     d.onclick = function() {     setTimeout(function() {         GM_xmlhttpRequest({             method: 'GET',             url: url_first + '?link=' + url_short,             headers: {                 'Accept': 'application/atom+xml,application/xml,text/xml'             },             onload: function(x) {                 console.log(x.responseText)                 if (/Ошибка/.test(x.responseText)) document.querySelector('#send_group').style.color = 'red'                 else document.querySelector('#send_group').style.color = 'green'             }         })     }, 0) }; 

// ==UserScript== // @name         VK_event_to_list_mvk // @namespace    https://m.vk.com/* // @match        https://m.vk.com/* // @grant    GM_xmlhttpRequest // ==/UserScript== setTimeout(function() {     var url_first = 'https://script.google.com/macros/s/111/exec';     var url_short = document.location.href.replace("https://m.vk.com/", "");     GM_xmlhttpRequest({         method: 'GET',         url: url_first + '?link=' + url_short,         headers: {             'Accept': 'application/atom+xml,application/xml,text/xml'         },         onload: function(x) {             alert(x.responseText);         }     }); }, 2000);