இன்ஸ்டாகிராம் ரீல்ஸ்

Lina Fontaine

செவ்வாய், 10 டிசம்பர், 2024 ’அன்று’ முற்பகல் 9:32:38

குறுகிய வீடியோ தரவுத்தொகுப்புகளின் சாத்தியத்தைத் திறக்கிறது

இன்ஸ்டாகிராம் ரீல்ஸ் மற்றும் ஸ்டோரிஸ் போன்ற குறுகிய வடிவ வீடியோ உள்ளடக்கம் சமீபத்திய ஆண்டுகளில் ஒரு கலாச்சார நிகழ்வாக மாறியுள்ளது. டெவலப்பர்கள் மற்றும் ஆராய்ச்சியாளர்களாக, இந்த பரந்த படைப்பாற்றல் கடலில் தட்டுவது இயந்திர கற்றல் மாதிரிகளைப் பயிற்றுவிப்பதற்கான ஒரு அற்புதமான வாய்ப்பாகும். 📱

இருப்பினும், அத்தகைய உள்ளடக்கத்தின் பெரிய அளவிலான தொகுப்பை அணுகுவது அதன் சவால்களுடன் வருகிறது. ஸ்கிராப்பிங் கருவிகள் இருக்கும்போது, அவை மெதுவாகவும் சட்டப்பூர்வமாக கேள்விக்குரியதாகவும் இருக்கலாம், பயன்படுத்த தயாராக உள்ள, நெறிமுறை மாற்று உள்ளதா என்று பலர் ஆச்சரியப்படுகிறார்கள். 🤔

"மில்லியன் சாங்ஸ் டேட்டாசெட்" போன்ற தரவுத்தளத்தை அணுகுவதை கற்பனை செய்து பாருங்கள், ஆனால் குறுகிய வீடியோக்களுக்கு. அத்தகைய வளமானது புதுமைகளை விரைவாகக் கண்காணிக்க முடியும், எண்ணற்ற மணிநேரங்களைச் சேமிக்கிறது மற்றும் விதிமுறைகளுக்கு இணங்குவதை உறுதி செய்கிறது. இந்த கனவு ஆர்வத்தைத் தூண்டுகிறது மற்றும் கிடைக்கக்கூடிய வளங்களை ஆய்வு செய்ய தூண்டுகிறது.

இந்த கட்டுரையில், Instagram போன்ற குறுகிய வீடியோக்களின் சட்டபூர்வமான மற்றும் திறந்த தொகுப்பு உள்ளதா என்பதை ஆராய்வோம். பொது ஸ்கிராப்பிங்கின் நன்மை தீமைகளையும் நாங்கள் ஆராய்வோம் மற்றும் தெளிவை வழங்க நிஜ உலக உதாரணங்களை முன்னிலைப்படுத்துவோம். ஒன்றாக நிலப்பரப்பை ஆராய்வோம்! 🌟

கட்டளை	பயன்பாட்டின் உதாரணம்
requests.get()	URL இலிருந்து தரவைப் பெற HTTP GET கோரிக்கையை அனுப்புகிறது. Instagram சுயவிவரங்களிலிருந்து HTML உள்ளடக்கம் அல்லது கோப்புகளை மீட்டெடுக்க பின்தளத்தில் ஸ்கிரிப்ட்டில் பயன்படுத்தப்படுகிறது.
BeautifulSoup()	தரவைப் பிரித்தெடுக்க HTML மற்றும் XML ஆவணங்களைப் பாகுபடுத்துகிறது. ஸ்கிரிப்ட்டில், இன்ஸ்டாகிராம் சுயவிவரத் தரவைக் கொண்ட ஜாவாஸ்கிரிப்ட் உள்ளடக்கத்தைக் கண்டறிந்து செயலாக்க இது பயன்படுகிறது.
soup.find()	பாகுபடுத்தப்பட்ட உள்ளடக்கத்தில் குறிப்பிட்ட HTML குறிச்சொற்கள் அல்லது கூறுகளைக் கண்டறியும். Instagram இடுகைகளைப் பற்றிய JSON தரவைக் கொண்ட ஸ்கிரிப்ட் குறிச்சொல்லைக் கண்டறியப் பயன்படுகிறது.
json.loads()	JSON-வடிவமைக்கப்பட்ட சரத்தை பைதான் அகராதியாக மாற்றுகிறது. இன்ஸ்டாகிராமின் கட்டமைக்கப்பட்ட சுயவிவரத் தரவைச் செயலாக்குவதற்கு இது முக்கியமானது.
os.makedirs()	வீடியோ கோப்புகளைச் சேமிக்க இடைநிலை-நிலை கோப்பகங்கள் உட்பட கோப்பகங்களை உருவாக்குகிறது. பதிவிறக்கங்களுக்கான கட்டமைக்கப்பட்ட வெளியீட்டு கோப்புறையை உறுதிப்படுத்த உதவுகிறது.
response.iter_content()	நினைவகத்தில் முழுவதுமாக ஏற்றப்படுவதைத் தவிர்க்க பெரிய கோப்புகளை துண்டுகளாக ஸ்ட்ரீம் செய்கிறது. பைதான் ஸ்கிரிப்ட்டில் வீடியோ கோப்புகளை திறமையாக பதிவிறக்கம் செய்ய பயன்படுகிறது.
fetch()	ஜாவாஸ்கிரிப்டில் HTTP கோரிக்கைகளைச் செய்கிறது. ஃபிரண்ட்எண்ட் ஸ்கிரிப்ட்டில், வீடியோ மெட்டாடேட்டாவைப் பெற APIகளுடன் தொடர்பு கொள்ள இது பயன்படுகிறது.
fs.mkdirSync()	Node.js இல் கோப்பகங்களை ஒத்திசைவாக உருவாக்குகிறது. வீடியோ கோப்புகளைச் சேமிப்பதற்கு முன் வெளியீட்டு அடைவு இருப்பதை உறுதி செய்கிறது.
path.basename()	Node.js இல் உள்ள URL அல்லது பாதையிலிருந்து கோப்புப் பெயரைப் பிரித்தெடுக்கிறது. பதிவிறக்கம் செய்யப்பட்ட வீடியோக்களுக்கு பொருத்தமான கோப்புப் பெயர்களை உருவாக்கப் பயன்படுகிறது.
await response.buffer()	பதிலில் இருந்து வீடியோ கோப்புகள் போன்ற பைனரி உள்ளடக்கத்தைப் பெற்று சேமிக்கிறது. ஜாவாஸ்கிரிப்டில் வீடியோக்களைப் பதிவிறக்குவதற்கு அவசியம்.

வீடியோ தரவுத்தொகுப்பு சேகரிப்புக்கான தடையற்ற பணிப்பாய்வுகளை உருவாக்குதல்

மேலே உருவாக்கப்பட்ட ஸ்கிரிப்ட்கள், Instagram பாணியிலான குறுகிய வீடியோக்களின் கணிசமான தரவுத்தொகுப்பைச் சேகரிப்பதில் உள்ள சிக்கலைச் சமாளிக்கின்றன. Python பின்தளத்தில் ஸ்கிரிப்ட் பொதுவில் அணுகக்கூடிய சுயவிவரங்கள் மற்றும் வீடியோக்களை பதிவிறக்கம் செய்ய வடிவமைக்கப்பட்டுள்ளது. போன்ற நூலகங்களைப் பயன்படுத்துவதன் மூலம் கோரிக்கைகள் மற்றும் BeautifulSoup, ஸ்கிரிப்ட் வலைப்பக்க உள்ளடக்கத்தை மீட்டெடுக்க HTTP கோரிக்கைகளை அனுப்புகிறது மற்றும் வீடியோ URLகள் போன்ற குறிப்பிட்ட கூறுகளைக் கண்டறிய HTML தரவைப் பாகுபடுத்துகிறது. இந்த அணுகுமுறை திறமையான மற்றும் கட்டமைக்கப்பட்ட தரவு பிரித்தெடுப்பை உறுதி செய்கிறது, இது நூற்றுக்கணக்கான மீடியா கோப்புகளை வழங்கும் சுயவிவரங்களைக் கையாளும் போது முக்கியமானது. எடுத்துக்காட்டாக, உடற்பயிற்சி தொடர்பான வீடியோக்களை ஆய்வு செய்ய விரும்பும் டெவலப்பர், இதுபோன்ற உள்ளடக்கத்தை தொடர்ந்து இடுகையிடும் பொது கணக்குகளை குறிவைக்கலாம். 🏋️

பாகுபடுத்தப்பட்ட தரவை நிர்வகிக்க, ஸ்கிரிப்ட் பயன்படுத்துகிறது json உட்பொதிக்கப்பட்ட JSON தரவை பைதான் பொருள்களாக மாற்ற நூலகம். வீடியோ URLகள், இடுகை தலைப்புகள் அல்லது நேர முத்திரைகள் போன்ற மெட்டாடேட்டாவைப் பிரித்தெடுக்க டெவலப்பர்கள் உள்ளமைக்கப்பட்ட தரவு கட்டமைப்புகள் மூலம் நிரல்முறையில் செல்ல இது அனுமதிக்கிறது. கூடுதலாக, போன்ற செயல்பாடுகள் os.makedirs() வீடியோ கோப்புகள் ஒழுங்கமைக்கப்பட்ட கோப்பக அமைப்பில் சேமிக்கப்படுவதை உறுதிசெய்து, பின்னர் இந்தக் கோப்புகளைக் கண்டறிந்து செயலாக்குவதை எளிதாக்குகிறது. குறுகிய வடிவ வீடியோ பரிந்துரைகளை உருவாக்க AI பயிற்சி போன்ற திட்டங்களில் பணிபுரியும் ஆராய்ச்சியாளர்களுக்கு இந்த அளவிலான விவரங்கள் மிகவும் பயனுள்ளதாக இருக்கும். 🤖

ஜாவாஸ்கிரிப்ட் ஃபிரண்ட்எண்ட் ஸ்கிரிப்ட், வாடிக்கையாளர் எதிர்கொள்ளும் சூழலில் வீடியோ சேகரிப்புகளை எவ்வாறு வழங்கலாம் அல்லது மேலும் கையாளலாம் என்பதைக் காண்பிப்பதன் மூலம் பின்தளத்தை நிறைவு செய்கிறது. பெறுதல் API ஐப் பயன்படுத்தி, இது ஒரு அனுமான API இறுதிப் புள்ளியிலிருந்து வீடியோ மெட்டாடேட்டாவை மீட்டெடுக்கிறது மற்றும் வீடியோக்களை நேரடியாகப் பதிவிறக்குகிறது. ஸ்கிரிப்ட் Node.js தொகுதிகளைப் பயன்படுத்துகிறது fs கோப்பு முறைமை செயல்பாடுகளுக்கு மற்றும் பாதை கோப்பு பெயர் கையாளுதலுக்காக, பதிவிறக்கம் செய்யப்பட்ட வீடியோக்கள் அர்த்தமுள்ள பெயர்களுடன் சேமிக்கப்படுவதை உறுதி செய்கிறது. வீடியோ தரவுத்தொகுப்புகளை உலாவுவதற்கு அல்லது குறியிடுவதற்கு ஒரு ஊடாடும் தளத்தை உருவாக்கும் வலை உருவாக்குநர்களுக்கு இந்த செயல்முறை மிகவும் மதிப்புமிக்கதாக இருக்கும்.

இரண்டு ஸ்கிரிப்ட்களும் மட்டு வடிவமைப்பு மற்றும் அளவிடுதல் ஆகியவற்றின் முக்கிய கொள்கைகளை எடுத்துக்காட்டுகின்றன. HTTP மறுமொழி குறியீடுகளை சரிபார்த்தல் அல்லது வெளியீட்டு கோப்பகங்கள் மாறும் வகையில் உருவாக்கப்படுவதை உறுதி செய்தல் போன்ற வலுவான பிழை கையாளும் வழிமுறைகள் இதில் அடங்கும். இது இயக்க நேர பிழைகளின் அபாயத்தைக் குறைக்கிறது மற்றும் மறுபயன்பாட்டை அதிகரிக்கிறது. இன்ஸ்டாகிராம் உள்ளடக்கத்திலிருந்து மற்றொரு தளத்திலிருந்து வீடியோக்களுக்கு ஒரு ஆராய்ச்சிக் குழு முன்னிலைப்படுத்த விரும்பும் ஒரு காட்சியை கற்பனை செய்து பாருங்கள்; இந்த ஸ்கிரிப்டுகள் வெவ்வேறு APIகள் அல்லது வலை கட்டமைப்புகளுக்கு மாற்றியமைக்கக்கூடிய உறுதியான அடித்தளத்தை வழங்குகின்றன. ஃபிரண்ட்எண்ட் ஒருங்கிணைப்புடன் பின்தளத்தில் ஸ்கிராப்பிங்கை இணைப்பதன் மூலம், இந்த ஸ்கிரிப்டுகள் வீடியோ தரவுத்தொகுப்புகளை திறம்பட பெறுவதற்கும் நிர்வகிப்பதற்கும் ஒரு முழுமையான தீர்வை உருவாக்குகின்றன. 🌟

குறுகிய வீடியோ பயிற்சி மாதிரிகளுக்கான தரவுத்தொகுப்பை உருவாக்குதல்

வலை ஸ்கிராப்பிங் பொது Instagram சுயவிவரங்களுக்கான பைதான் அடிப்படையிலான பின்தள ஸ்கிரிப்ட்

import requests
from bs4 import BeautifulSoup
import json
import os
import time
# Define headers for requests
HEADERS = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36'}
# Function to fetch profile data
def fetch_profile_data(profile_url):
    try:
        response = requests.get(profile_url, headers=HEADERS)
        if response.status_code == 200:
            soup = BeautifulSoup(response.text, 'html.parser')
            script_tag = soup.find('script', text=lambda x: x and 'window._sharedData' in x)
            json_data = json.loads(script_tag.string.split(' = ', 1)[1].rstrip(';'))
            return json_data
        else:
            print(f"Error: Status code {response.status_code} for {profile_url}")
    except Exception as e:
        print(f"Exception occurred: {e}")
    return None
# Save videos locally
def save_video(video_url, folder, filename):
    try:
        response = requests.get(video_url, stream=True)
        if response.status_code == 200:
            os.makedirs(folder, exist_ok=True)
            filepath = os.path.join(folder, filename)
            with open(filepath, 'wb') as file:
                for chunk in response.iter_content(1024):
                    file.write(chunk)
            print(f"Video saved at {filepath}")
        else:
            print(f"Failed to download video: {video_url}")
    except Exception as e:
        print(f"Error saving video: {e}")
# Example: Fetch public profile data
profile_url = "https://www.instagram.com/some_public_profile/"
profile_data = fetch_profile_data(profile_url)
if profile_data:
    posts = profile_data['entry_data']['ProfilePage'][0]['graphql']['user']['edge_owner_to_timeline_media']['edges']
    for post in posts:
        if 'video_url' in post['node']:
            video_url = post['node']['video_url']
            save_video(video_url, folder="videos", filename=f"{post['node']['id']}.mp4")

இன்ஸ்டாகிராம் போன்ற தரவு சேகரிப்புக்கான APIகளை மேம்படுத்துதல்

வீடியோ சேகரிப்புகளை வழங்குவதற்கான ஜாவாஸ்கிரிப்ட் முன்பக்கம் ஸ்கிரிப்ட்

const fetch = require('node-fetch');
const fs = require('fs');
const path = require('path');
// Function to fetch video metadata
async function fetchVideoMetadata(apiUrl) {
    try {
        const response = await fetch(apiUrl);
        if (response.ok) {
            const data = await response.json();
            return data.videos;
        } else {
            console.error(`Failed to fetch metadata: ${response.status}`);
        }
    } catch (error) {
        console.error(`Error fetching metadata: ${error.message}`);
    }
}
// Function to download videos
async function downloadVideo(videoUrl, outputDir) {
    try {
        const response = await fetch(videoUrl);
        if (response.ok) {
            const videoBuffer = await response.buffer();
            const videoName = path.basename(videoUrl);
            fs.mkdirSync(outputDir, { recursive: true });
            fs.writeFileSync(path.join(outputDir, videoName), videoBuffer);
            console.log(`Saved ${videoName}`);
        } else {
            console.error(`Failed to download: ${videoUrl}`);
        }
    } catch (error) {
        console.error(`Error downloading video: ${error.message}`);
    }
}
// Example usage
const apiEndpoint = "https://api.example.com/videos";
fetchVideoMetadata(apiEndpoint).then(videos => {
    videos.forEach(video => downloadVideo(video.url, './downloads'));
});

பெரிய அளவிலான Instagram வீடியோ தரவுத்தொகுப்புகளுக்கான மாற்றுகளை ஆராய்தல்

இயந்திர கற்றல் மாதிரிகளைப் பயிற்றுவிப்பதற்காக Instagram போன்ற வீடியோக்களின் பரந்த தொகுப்பைத் தேடும்போது, ஸ்கிராப்பிங் கருவிகள் மட்டுமின்றி அனைத்து சாத்தியமான ஆதாரங்களையும் மதிப்பீடு செய்வது முக்கியம். ஒரு மாற்று கல்வி அல்லது ஆராய்ச்சி நிறுவனங்களால் நிர்வகிக்கப்படும் தரவுத்தொகுப்புகளை மேம்படுத்துவதாகும். இந்தத் தரவுத்தொகுப்புகள் பெரும்பாலும் சமூக ஊடகப் போக்குகள், நடத்தை அல்லது உடற்பயிற்சி அல்லது உணவு வீடியோக்கள் போன்ற குறிப்பிட்ட உள்ளடக்க வகைகளில் கவனம் செலுத்துகின்றன, மேலும் அவை ஆராய்ச்சி நோக்கங்களுக்காக வெளிப்படையாகப் பகிரப்படுகின்றன. ஒரு குறிப்பிடத்தக்க உதாரணம் YFCC100M இன்ஸ்டாகிராம் சார்ந்த உள்ளடக்கத்திற்கு கூடுதல் வடிகட்டுதல் தேவைப்பட்டாலும், Yahoo இலிருந்து தரவுத்தொகுப்பு, பயனர் உருவாக்கிய பலதரப்பட்ட மல்டிமீடியாவை உள்ளடக்கியது. 📊

மற்றொரு சாத்தியமான முறையானது கிரவுட் சோர்சிங் தரவு சேகரிப்பை உள்ளடக்கியது. அமேசான் மெக்கானிக்கல் டர்க் அல்லது ப்ராலிஃபிக் போன்ற இயங்குதளங்கள் பயனர்களை வீடியோக்களைப் பதிவேற்ற அல்லது உங்களுக்கான உள்ளடக்கத்தை சிறுகுறிப்பு செய்யக் கோருவதற்குப் பயன்படுத்தப்படலாம், தரவு சட்டப்பூர்வமாகப் பெறப்பட்டு உங்களின் தேவைகளுக்கு ஏற்ப வடிவமைக்கப்பட்டுள்ளது என்பதை உறுதிப்படுத்துகிறது. இந்த அணுகுமுறை பலதரப்பட்ட மற்றும் சீரான தரவுத்தொகுப்புகளை உருவாக்க உதவுகிறது, அவை உள்ளடக்க தீம்களின் வரம்பைக் குறிக்கும். கல்வி அல்லது பயண வீடியோக்கள் போன்ற முக்கிய தரவுத்தொகுப்புகளுக்கு இது மிகவும் பயனுள்ளதாக இருக்கும். 🌍

கடைசியாக, YouTube அல்லது TikTok போன்ற தளங்களால் வழங்கப்படும் APIகள், அவற்றின் டெவலப்பர் புரோகிராம்கள் மூலம் குறுகிய வடிவ வீடியோக்களுக்கு சட்டப்பூர்வ அணுகலை வழங்கலாம். இந்த APIகள் மெட்டாடேட்டா, கருத்துகள் மற்றும் சில நேரங்களில் பொது வீடியோக்களைப் பதிவிறக்கம் செய்ய உங்களை அனுமதிக்கின்றன. இந்த சேவைகள் விகித வரம்புகளை விதிக்கலாம் என்றாலும், அவை தரவை அணுகுவதற்கான அளவிடக்கூடிய மற்றும் நெறிமுறை தீர்வை வழங்குகின்றன, அதே நேரத்தில் இயங்குதளக் கொள்கைகளுக்கு இணங்குவதை உறுதி செய்கின்றன. தரவு சேகரிப்பு உத்திகளை பல்வகைப்படுத்துவதன் மூலம், உங்கள் மாடல்களுக்கான வலுவான மற்றும் பல்துறை பயிற்சி தரவுத்தொகுப்பை நீங்கள் உருவாக்கலாம். 🚀

Instagram வீடியோ தரவுத்தொகுப்புகள் பற்றி அடிக்கடி கேட்கப்படும் கேள்விகள்

இன்ஸ்டாகிராம் வீடியோக்களை சட்டப்பூர்வமாக நீக்க முடியுமா?
பொது உள்ளடக்கத்தை அகற்றுவது அனுமதிக்கப்பட்டதாகத் தோன்றினாலும், அது பெரும்பாலும் இயங்குதள சேவை விதிமுறைகளை மீறுகிறது. பயன்படுத்தி requests மற்றும் BeautifulSoup எச்சரிக்கையுடன் அணுக வேண்டும்.
குறுகிய வடிவ வீடியோக்களுக்கு ஏற்கனவே திறந்த தரவுத்தொகுப்புகள் உள்ளதா?
ஆம், தரவுத்தொகுப்புகள் போன்றவை YFCC100M சிறிய வீடியோக்கள் அடங்கும், ஆனால் Instagram-பாணி உள்ளடக்கத்துடன் பொருந்துவதற்கு நீங்கள் அவற்றை முன்கூட்டியே செயலாக்க வேண்டும்.
வலை ஸ்கிராப்பிங்கிற்கு எந்த நிரலாக்க கருவிகள் சிறந்தவை?
நூலகங்கள் போன்றவை requests மற்றும் BeautifulSoup டைனமிக் பக்கங்களுக்கான செலினியம் போன்ற கருவிகளுடன் பைத்தானில் பரவலாகப் பயன்படுத்தப்படுகிறது.
நான் எப்படி நெறிமுறையில் வீடியோக்களை பெறுவது?
YouTube அல்லது TikTok போன்ற தளங்களில் இருந்து API களைப் பயன்படுத்துவதைக் கருத்தில் கொள்ளுங்கள், இது பொது வீடியோக்கள் மற்றும் மெட்டாடேட்டாவிற்கு கட்டமைக்கப்பட்ட அணுகலை வழங்குகிறது.
வீடியோக்களை ஸ்கிராப்பிங் செய்வதில் பொதுவான சவால்கள் என்ன?
சிக்கல்களில் விகிதக் கட்டுப்பாடு, ஐபி தடைகள் மற்றும் ஸ்கிராப்பர்களை உடைக்கக்கூடிய இணையதள அமைப்பில் மாற்றங்கள் ஆகியவை அடங்கும்.

நெறிமுறை வீடியோ தரவு சேகரிப்பு பற்றிய இறுதி எண்ணங்கள்

இன்ஸ்டாகிராம் பாணி வீடியோக்களின் தரவுத்தொகுப்பை உருவாக்குவது ஒரு அற்புதமான மற்றும் சவாலான முயற்சியாகும். நெறிமுறை மற்றும் சட்டரீதியான கவலைகள் மிக முக்கியமானவை மற்றும் ஸ்கிராப்பிங் கருவிகளை மட்டுமே நம்பியிருக்கின்றன கோரிக்கைகள் எப்போதும் சிறந்த பாதையாக இருக்காது. திறந்த வளங்களை ஆராய்வது நீண்ட கால அளவை உறுதி செய்கிறது. 📊

கல்வித் தரவுத்தொகுப்புகள் அல்லது டெவலப்பர் APIகள் போன்ற விருப்பங்களைப் பயன்படுத்துவதன் மூலம், இணக்கமாக இருக்கும்போதே அர்த்தமுள்ள உள்ளடக்கத்தைச் சேகரிக்கலாம். உங்கள் அணுகுமுறையை பல்வகைப்படுத்துவது நெறிமுறை தரங்களை ஆதரிப்பது மட்டுமல்லாமல், புதுமையான AI பயன்பாடுகளுக்கான உங்கள் பயிற்சி தரவுத்தொகுப்பின் தரத்தையும் மேம்படுத்துகிறது. 🌟

நெறிமுறை தரவு சேகரிப்புக்கான ஆதாரங்கள் மற்றும் குறிப்புகள்

பற்றிய விவரங்கள் YFCC100M தரவுத்தொகுப்பு, ஆராய்ச்சி நோக்கங்களுக்காக மல்டிமீடியா உள்ளடக்கத்தின் ஒரு பெரிய தொகுப்பு, இங்கே காணலாம்: YFCC100M தரவுத்தொகுப்பு .
வீடியோ உள்ளடக்கத்தை சட்டப்பூர்வமாக அணுக APIகளைப் பயன்படுத்துவதற்கான வழிகாட்டுதல்கள் மற்றும் சிறந்த நடைமுறைகள் அதிகாரப்பூர்வ TikTok டெவலப்பர் பக்கத்தில் கோடிட்டுக் காட்டப்பட்டுள்ளன: டெவலப்பர்களுக்கான TikTok .
ஸ்கிராப்பிங் சவால்கள் மற்றும் சட்டப்பூர்வ பரிசீலனைகள் பற்றிய தகவல்கள் இந்த விரிவான வழிகாட்டியில் வழங்கப்பட்டுள்ளன: Scrapinghub - Web Scraping என்றால் என்ன? .
அமேசான் மெக்கானிக்கல் டர்க் பயன்படுத்தி க்ரூவ்சோர்சிங் தரவு சேகரிப்பு பற்றிய நுண்ணறிவு: அமேசான் மெக்கானிக்கல் டர்க் .
OpenAI இலிருந்து நெறிமுறை AI மேம்பாடு மற்றும் தரவுத்தொகுப்பு உருவாக்கத்திற்கான சிறந்த நடைமுறைகள்: OpenAI ஆராய்ச்சி .

இன்ஸ்டாகிராம் ரீல்ஸ் மற்றும் ஸ்டோரிகளுக்கான சட்டப்பூர்வ தரவு ஆதாரங்களை ஆராய்தல்