19c92ab61SThomas Gleixner // SPDX-License-Identifier: GPL-2.0-only
29d8d47eaSDaniel Lezcano /*
39d8d47eaSDaniel Lezcano *
49d8d47eaSDaniel Lezcano * Copyright (C) 2007 Google, Inc.
59d8d47eaSDaniel Lezcano * Copyright (c) 2009-2012,2014, The Linux Foundation. All rights reserved.
69d8d47eaSDaniel Lezcano */
79d8d47eaSDaniel Lezcano
89d8d47eaSDaniel Lezcano #include <linux/clocksource.h>
99d8d47eaSDaniel Lezcano #include <linux/clockchips.h>
109d8d47eaSDaniel Lezcano #include <linux/cpu.h>
119d8d47eaSDaniel Lezcano #include <linux/init.h>
129d8d47eaSDaniel Lezcano #include <linux/interrupt.h>
139d8d47eaSDaniel Lezcano #include <linux/irq.h>
149d8d47eaSDaniel Lezcano #include <linux/io.h>
159d8d47eaSDaniel Lezcano #include <linux/of.h>
169d8d47eaSDaniel Lezcano #include <linux/of_address.h>
179d8d47eaSDaniel Lezcano #include <linux/of_irq.h>
189d8d47eaSDaniel Lezcano #include <linux/sched_clock.h>
199d8d47eaSDaniel Lezcano
209d8d47eaSDaniel Lezcano #include <asm/delay.h>
219d8d47eaSDaniel Lezcano
229d8d47eaSDaniel Lezcano #define TIMER_MATCH_VAL 0x0000
239d8d47eaSDaniel Lezcano #define TIMER_COUNT_VAL 0x0004
249d8d47eaSDaniel Lezcano #define TIMER_ENABLE 0x0008
259d8d47eaSDaniel Lezcano #define TIMER_ENABLE_CLR_ON_MATCH_EN BIT(1)
269d8d47eaSDaniel Lezcano #define TIMER_ENABLE_EN BIT(0)
279d8d47eaSDaniel Lezcano #define TIMER_CLEAR 0x000C
289d8d47eaSDaniel Lezcano #define DGT_CLK_CTL 0x10
299d8d47eaSDaniel Lezcano #define DGT_CLK_CTL_DIV_4 0x3
309d8d47eaSDaniel Lezcano #define TIMER_STS_GPT0_CLR_PEND BIT(10)
319d8d47eaSDaniel Lezcano
329d8d47eaSDaniel Lezcano #define GPT_HZ 32768
339d8d47eaSDaniel Lezcano
349d8d47eaSDaniel Lezcano static void __iomem *event_base;
359d8d47eaSDaniel Lezcano static void __iomem *sts_base;
369d8d47eaSDaniel Lezcano
msm_timer_interrupt(int irq,void * dev_id)379d8d47eaSDaniel Lezcano static irqreturn_t msm_timer_interrupt(int irq, void *dev_id)
389d8d47eaSDaniel Lezcano {
399d8d47eaSDaniel Lezcano struct clock_event_device *evt = dev_id;
409d8d47eaSDaniel Lezcano /* Stop the timer tick */
419d8d47eaSDaniel Lezcano if (clockevent_state_oneshot(evt)) {
429d8d47eaSDaniel Lezcano u32 ctrl = readl_relaxed(event_base + TIMER_ENABLE);
439d8d47eaSDaniel Lezcano ctrl &= ~TIMER_ENABLE_EN;
449d8d47eaSDaniel Lezcano writel_relaxed(ctrl, event_base + TIMER_ENABLE);
459d8d47eaSDaniel Lezcano }
469d8d47eaSDaniel Lezcano evt->event_handler(evt);
479d8d47eaSDaniel Lezcano return IRQ_HANDLED;
489d8d47eaSDaniel Lezcano }
499d8d47eaSDaniel Lezcano
msm_timer_set_next_event(unsigned long cycles,struct clock_event_device * evt)509d8d47eaSDaniel Lezcano static int msm_timer_set_next_event(unsigned long cycles,
519d8d47eaSDaniel Lezcano struct clock_event_device *evt)
529d8d47eaSDaniel Lezcano {
539d8d47eaSDaniel Lezcano u32 ctrl = readl_relaxed(event_base + TIMER_ENABLE);
549d8d47eaSDaniel Lezcano
559d8d47eaSDaniel Lezcano ctrl &= ~TIMER_ENABLE_EN;
569d8d47eaSDaniel Lezcano writel_relaxed(ctrl, event_base + TIMER_ENABLE);
579d8d47eaSDaniel Lezcano
589d8d47eaSDaniel Lezcano writel_relaxed(ctrl, event_base + TIMER_CLEAR);
599d8d47eaSDaniel Lezcano writel_relaxed(cycles, event_base + TIMER_MATCH_VAL);
609d8d47eaSDaniel Lezcano
619d8d47eaSDaniel Lezcano if (sts_base)
629d8d47eaSDaniel Lezcano while (readl_relaxed(sts_base) & TIMER_STS_GPT0_CLR_PEND)
639d8d47eaSDaniel Lezcano cpu_relax();
649d8d47eaSDaniel Lezcano
659d8d47eaSDaniel Lezcano writel_relaxed(ctrl | TIMER_ENABLE_EN, event_base + TIMER_ENABLE);
669d8d47eaSDaniel Lezcano return 0;
679d8d47eaSDaniel Lezcano }
689d8d47eaSDaniel Lezcano
msm_timer_shutdown(struct clock_event_device * evt)699d8d47eaSDaniel Lezcano static int msm_timer_shutdown(struct clock_event_device *evt)
709d8d47eaSDaniel Lezcano {
719d8d47eaSDaniel Lezcano u32 ctrl;
729d8d47eaSDaniel Lezcano
739d8d47eaSDaniel Lezcano ctrl = readl_relaxed(event_base + TIMER_ENABLE);
749d8d47eaSDaniel Lezcano ctrl &= ~(TIMER_ENABLE_EN | TIMER_ENABLE_CLR_ON_MATCH_EN);
759d8d47eaSDaniel Lezcano writel_relaxed(ctrl, event_base + TIMER_ENABLE);
769d8d47eaSDaniel Lezcano return 0;
779d8d47eaSDaniel Lezcano }
789d8d47eaSDaniel Lezcano
799d8d47eaSDaniel Lezcano static struct clock_event_device __percpu *msm_evt;
809d8d47eaSDaniel Lezcano
819d8d47eaSDaniel Lezcano static void __iomem *source_base;
829d8d47eaSDaniel Lezcano
msm_read_timer_count(struct clocksource * cs)839d8d47eaSDaniel Lezcano static notrace u64 msm_read_timer_count(struct clocksource *cs)
849d8d47eaSDaniel Lezcano {
859d8d47eaSDaniel Lezcano return readl_relaxed(source_base + TIMER_COUNT_VAL);
869d8d47eaSDaniel Lezcano }
879d8d47eaSDaniel Lezcano
889d8d47eaSDaniel Lezcano static struct clocksource msm_clocksource = {
899d8d47eaSDaniel Lezcano .name = "dg_timer",
909d8d47eaSDaniel Lezcano .rating = 300,
919d8d47eaSDaniel Lezcano .read = msm_read_timer_count,
929d8d47eaSDaniel Lezcano .mask = CLOCKSOURCE_MASK(32),
939d8d47eaSDaniel Lezcano .flags = CLOCK_SOURCE_IS_CONTINUOUS,
949d8d47eaSDaniel Lezcano };
959d8d47eaSDaniel Lezcano
969d8d47eaSDaniel Lezcano static int msm_timer_irq;
979d8d47eaSDaniel Lezcano static int msm_timer_has_ppi;
989d8d47eaSDaniel Lezcano
msm_local_timer_starting_cpu(unsigned int cpu)999d8d47eaSDaniel Lezcano static int msm_local_timer_starting_cpu(unsigned int cpu)
1009d8d47eaSDaniel Lezcano {
1019d8d47eaSDaniel Lezcano struct clock_event_device *evt = per_cpu_ptr(msm_evt, cpu);
1029d8d47eaSDaniel Lezcano int err;
1039d8d47eaSDaniel Lezcano
1049d8d47eaSDaniel Lezcano evt->irq = msm_timer_irq;
1059d8d47eaSDaniel Lezcano evt->name = "msm_timer";
1069d8d47eaSDaniel Lezcano evt->features = CLOCK_EVT_FEAT_ONESHOT;
1079d8d47eaSDaniel Lezcano evt->rating = 200;
1089d8d47eaSDaniel Lezcano evt->set_state_shutdown = msm_timer_shutdown;
1099d8d47eaSDaniel Lezcano evt->set_state_oneshot = msm_timer_shutdown;
1109d8d47eaSDaniel Lezcano evt->tick_resume = msm_timer_shutdown;
1119d8d47eaSDaniel Lezcano evt->set_next_event = msm_timer_set_next_event;
1129d8d47eaSDaniel Lezcano evt->cpumask = cpumask_of(cpu);
1139d8d47eaSDaniel Lezcano
1149d8d47eaSDaniel Lezcano clockevents_config_and_register(evt, GPT_HZ, 4, 0xffffffff);
1159d8d47eaSDaniel Lezcano
1169d8d47eaSDaniel Lezcano if (msm_timer_has_ppi) {
1179d8d47eaSDaniel Lezcano enable_percpu_irq(evt->irq, IRQ_TYPE_EDGE_RISING);
1189d8d47eaSDaniel Lezcano } else {
1199d8d47eaSDaniel Lezcano err = request_irq(evt->irq, msm_timer_interrupt,
1209d8d47eaSDaniel Lezcano IRQF_TIMER | IRQF_NOBALANCING |
1219d8d47eaSDaniel Lezcano IRQF_TRIGGER_RISING, "gp_timer", evt);
1229d8d47eaSDaniel Lezcano if (err)
1239d8d47eaSDaniel Lezcano pr_err("request_irq failed\n");
1249d8d47eaSDaniel Lezcano }
1259d8d47eaSDaniel Lezcano
1269d8d47eaSDaniel Lezcano return 0;
1279d8d47eaSDaniel Lezcano }
1289d8d47eaSDaniel Lezcano
msm_local_timer_dying_cpu(unsigned int cpu)1299d8d47eaSDaniel Lezcano static int msm_local_timer_dying_cpu(unsigned int cpu)
1309d8d47eaSDaniel Lezcano {
1319d8d47eaSDaniel Lezcano struct clock_event_device *evt = per_cpu_ptr(msm_evt, cpu);
1329d8d47eaSDaniel Lezcano
1339d8d47eaSDaniel Lezcano disable_percpu_irq(evt->irq);
1349d8d47eaSDaniel Lezcano return 0;
1359d8d47eaSDaniel Lezcano }
1369d8d47eaSDaniel Lezcano
msm_sched_clock_read(void)1379d8d47eaSDaniel Lezcano static u64 notrace msm_sched_clock_read(void)
1389d8d47eaSDaniel Lezcano {
1399d8d47eaSDaniel Lezcano return msm_clocksource.read(&msm_clocksource);
1409d8d47eaSDaniel Lezcano }
1419d8d47eaSDaniel Lezcano
msm_read_current_timer(void)1429d8d47eaSDaniel Lezcano static unsigned long msm_read_current_timer(void)
1439d8d47eaSDaniel Lezcano {
1449d8d47eaSDaniel Lezcano return msm_clocksource.read(&msm_clocksource);
1459d8d47eaSDaniel Lezcano }
1469d8d47eaSDaniel Lezcano
1479d8d47eaSDaniel Lezcano static struct delay_timer msm_delay_timer = {
1489d8d47eaSDaniel Lezcano .read_current_timer = msm_read_current_timer,
1499d8d47eaSDaniel Lezcano };
1509d8d47eaSDaniel Lezcano
msm_timer_init(u32 dgt_hz,int sched_bits,int irq,bool percpu)1519d8d47eaSDaniel Lezcano static int __init msm_timer_init(u32 dgt_hz, int sched_bits, int irq,
1529d8d47eaSDaniel Lezcano bool percpu)
1539d8d47eaSDaniel Lezcano {
1549d8d47eaSDaniel Lezcano struct clocksource *cs = &msm_clocksource;
1559d8d47eaSDaniel Lezcano int res = 0;
1569d8d47eaSDaniel Lezcano
1579d8d47eaSDaniel Lezcano msm_timer_irq = irq;
1589d8d47eaSDaniel Lezcano msm_timer_has_ppi = percpu;
1599d8d47eaSDaniel Lezcano
1609d8d47eaSDaniel Lezcano msm_evt = alloc_percpu(struct clock_event_device);
1619d8d47eaSDaniel Lezcano if (!msm_evt) {
1629d8d47eaSDaniel Lezcano pr_err("memory allocation failed for clockevents\n");
1639d8d47eaSDaniel Lezcano goto err;
1649d8d47eaSDaniel Lezcano }
1659d8d47eaSDaniel Lezcano
1669d8d47eaSDaniel Lezcano if (percpu)
1679d8d47eaSDaniel Lezcano res = request_percpu_irq(irq, msm_timer_interrupt,
1689d8d47eaSDaniel Lezcano "gp_timer", msm_evt);
1699d8d47eaSDaniel Lezcano
1709d8d47eaSDaniel Lezcano if (res) {
1719d8d47eaSDaniel Lezcano pr_err("request_percpu_irq failed\n");
1729d8d47eaSDaniel Lezcano } else {
1739d8d47eaSDaniel Lezcano /* Install and invoke hotplug callbacks */
1749d8d47eaSDaniel Lezcano res = cpuhp_setup_state(CPUHP_AP_QCOM_TIMER_STARTING,
1759d8d47eaSDaniel Lezcano "clockevents/qcom/timer:starting",
1769d8d47eaSDaniel Lezcano msm_local_timer_starting_cpu,
1779d8d47eaSDaniel Lezcano msm_local_timer_dying_cpu);
1789d8d47eaSDaniel Lezcano if (res) {
1799d8d47eaSDaniel Lezcano free_percpu_irq(irq, msm_evt);
1809d8d47eaSDaniel Lezcano goto err;
1819d8d47eaSDaniel Lezcano }
1829d8d47eaSDaniel Lezcano }
1839d8d47eaSDaniel Lezcano
1849d8d47eaSDaniel Lezcano err:
1859d8d47eaSDaniel Lezcano writel_relaxed(TIMER_ENABLE_EN, source_base + TIMER_ENABLE);
1869d8d47eaSDaniel Lezcano res = clocksource_register_hz(cs, dgt_hz);
1879d8d47eaSDaniel Lezcano if (res)
1889d8d47eaSDaniel Lezcano pr_err("clocksource_register failed\n");
1899d8d47eaSDaniel Lezcano sched_clock_register(msm_sched_clock_read, sched_bits, dgt_hz);
1909d8d47eaSDaniel Lezcano msm_delay_timer.freq = dgt_hz;
1919d8d47eaSDaniel Lezcano register_current_timer_delay(&msm_delay_timer);
1929d8d47eaSDaniel Lezcano
1939d8d47eaSDaniel Lezcano return res;
1949d8d47eaSDaniel Lezcano }
1959d8d47eaSDaniel Lezcano
msm_dt_timer_init(struct device_node * np)1969d8d47eaSDaniel Lezcano static int __init msm_dt_timer_init(struct device_node *np)
1979d8d47eaSDaniel Lezcano {
1989d8d47eaSDaniel Lezcano u32 freq;
1999d8d47eaSDaniel Lezcano int irq, ret;
2009d8d47eaSDaniel Lezcano struct resource res;
2019d8d47eaSDaniel Lezcano u32 percpu_offset;
2029d8d47eaSDaniel Lezcano void __iomem *base;
2039d8d47eaSDaniel Lezcano void __iomem *cpu0_base;
2049d8d47eaSDaniel Lezcano
2059d8d47eaSDaniel Lezcano base = of_iomap(np, 0);
2069d8d47eaSDaniel Lezcano if (!base) {
2079d8d47eaSDaniel Lezcano pr_err("Failed to map event base\n");
2089d8d47eaSDaniel Lezcano return -ENXIO;
2099d8d47eaSDaniel Lezcano }
2109d8d47eaSDaniel Lezcano
2119d8d47eaSDaniel Lezcano /* We use GPT0 for the clockevent */
2129d8d47eaSDaniel Lezcano irq = irq_of_parse_and_map(np, 1);
2139d8d47eaSDaniel Lezcano if (irq <= 0) {
2149d8d47eaSDaniel Lezcano pr_err("Can't get irq\n");
2159d8d47eaSDaniel Lezcano return -EINVAL;
2169d8d47eaSDaniel Lezcano }
2179d8d47eaSDaniel Lezcano
2189d8d47eaSDaniel Lezcano /* We use CPU0's DGT for the clocksource */
2199d8d47eaSDaniel Lezcano if (of_property_read_u32(np, "cpu-offset", &percpu_offset))
2209d8d47eaSDaniel Lezcano percpu_offset = 0;
2219d8d47eaSDaniel Lezcano
2229d8d47eaSDaniel Lezcano ret = of_address_to_resource(np, 0, &res);
2239d8d47eaSDaniel Lezcano if (ret) {
2249d8d47eaSDaniel Lezcano pr_err("Failed to parse DGT resource\n");
2259d8d47eaSDaniel Lezcano return ret;
2269d8d47eaSDaniel Lezcano }
2279d8d47eaSDaniel Lezcano
2289d8d47eaSDaniel Lezcano cpu0_base = ioremap(res.start + percpu_offset, resource_size(&res));
2299d8d47eaSDaniel Lezcano if (!cpu0_base) {
2309d8d47eaSDaniel Lezcano pr_err("Failed to map source base\n");
2319d8d47eaSDaniel Lezcano return -EINVAL;
2329d8d47eaSDaniel Lezcano }
2339d8d47eaSDaniel Lezcano
2349d8d47eaSDaniel Lezcano if (of_property_read_u32(np, "clock-frequency", &freq)) {
235*ca140a0dSAnkit Agrawal iounmap(cpu0_base);
2369d8d47eaSDaniel Lezcano pr_err("Unknown frequency\n");
2379d8d47eaSDaniel Lezcano return -EINVAL;
2389d8d47eaSDaniel Lezcano }
2399d8d47eaSDaniel Lezcano
2409d8d47eaSDaniel Lezcano event_base = base + 0x4;
2419d8d47eaSDaniel Lezcano sts_base = base + 0x88;
2429d8d47eaSDaniel Lezcano source_base = cpu0_base + 0x24;
2439d8d47eaSDaniel Lezcano freq /= 4;
2449d8d47eaSDaniel Lezcano writel_relaxed(DGT_CLK_CTL_DIV_4, source_base + DGT_CLK_CTL);
2459d8d47eaSDaniel Lezcano
246*ca140a0dSAnkit Agrawal ret = msm_timer_init(freq, 32, irq, !!percpu_offset);
247*ca140a0dSAnkit Agrawal if (ret)
248*ca140a0dSAnkit Agrawal iounmap(cpu0_base);
249*ca140a0dSAnkit Agrawal
250*ca140a0dSAnkit Agrawal return ret;
2519d8d47eaSDaniel Lezcano }
2529d8d47eaSDaniel Lezcano TIMER_OF_DECLARE(kpss_timer, "qcom,kpss-timer", msm_dt_timer_init);
2539d8d47eaSDaniel Lezcano TIMER_OF_DECLARE(scss_timer, "qcom,scss-timer", msm_dt_timer_init);
254